Aiven Managed PostgreSQL から Heroku Postgres への移行

Table of Contents [expand]

データベースのサイズを取得する
データベースダンプを準備する
復元移行を実行する
移行が完了したことをテストで検証する
既存のアプリケーションとサービスを接続する
まとめ

最終更新日 2025年03月28日(金)

このガイドでは、Postgres データベースを Aiven for PostgreSQL から Heroku Postgres に移行するプロセスについて説明します。このガイドでは、AWS S3 を使用してデータベースダンプファイルを保存します。移行を開始する前に、「Heroku Postgres への移行の準備」のステップを完了していることを確認してください。

データベースのサイズを取得する

ほとんどの場合、データベースのサイズが 100 GB 未満であれば、ダンプと復元の移行戦略が適しています。Aiven のマネージドデータベースでは、Web UI を通じて、または psql クライアントによるデータベースのクエリを通じて、データベースのサイズを見積もることができます。Aiven のデータベースで、左側のナビゲーションペインの Metrics (メトリクス) をクリックし、Disk space (ディスク容量) の使用量のグラフを見つけます。

Aiven のディスク使用量

グラフは、データベースが使用しているのがこのインスタンスに割り当てられた合計ストレージの 15.413% であることを示しています。次に、Overview (概要) ページに移動して、Service plan (サービスプラン) の使用量を確認します。

Aiven のサービス使用量

このページには、合計割り当て量 5 GB のうち 15.4%、約 770 MB のストレージ使用量が示されています。ただし、この数値には、システムファイル、インストールなど、管理されたインスタンスで実行しているシステムのすべてのストレージが含まれます。そのため、実際のデータベースサイズはこの数値のほんの一部にすぎません。

より正確なサイズを読み取るには、データベースインスタンスに接続して list databases \l+ コマンドを使用します。データベースの Postgres 資格情報は、データベースの Overview (概要) ページの Connection information (接続情報) セクションで確認できます。Service URI をコピーします。これは psql クライアント経由で接続するために使用する接続文字列です。

Aiven の接続の詳細

psql クライアントを使用するための接続文字列には、次の形式を使用します。

postgres://DB_USERNAME:DB_PASSWORD@DB_HOST:DB_PORT/DB_NAME

サンプルデータベースの名前は employees であるため、以下のコマンドでデータベースを psql クライアントに接続します。

$ psql postgres://avnadmin:thisismypassword@pg-25eae734-ds-hero-migration.i.aivencloud.com:11893/employees

接続すると、list databases \l+ コマンドでデータベースのサイズを表示できます。

$ psql=> \l+

                        List of databases
    Name        | Owner     | Encoding |   Collate   | Size   |
----------------+-----------+----------+-------------+--------+
 employees      | avnadmin  | UTF8     | en_US.UTF-8 | 335 MB |

Size 列はデータベースのサイズが 335 MB であることを示しています。

データベースのサイズに適した Heroku Postgres プランを確認するには、「適切な Heroku Postgres プランの選択」を参照してください。

データベースダンプを準備する

開始する前に、システムを読み取り専用モードに設定するか、連動するすべてのサービスをオフラインにして、エンドユーザーに現在のメンテナンスステータスを通知します。

データベースが Heroku アプリにアタッチされている場合は、アプリをメンテナンスモードにします。

データをバックアップする

移行を実行する前に、Aiven にデータベースの最新のバックアップがあることを確認してください。Aiven はデータベースを毎日自動的にバックアップします。最新のバックアップがいつ行われたかを確認するには、データベースの Backups (バックアップ) ページに移動します。

Aiven のバックアップ

データベースをローカルファイルにダンプする

pg_dump を使用して、Aiven データベースをローカルファイルにダンプします。

$ pg_dump postgres://DB_USERNAME:DB_PASSWORD@DB_HOST:DB_PORT/DB_NAME \
    -Fc -b -v \
    -f /tmp/data-for-migration.sql

このコマンドの実行にかかる時間は、データベースのサイズによって異なります。/tmp/data-for-migration.sql のファイルサイズを監視し、長いプロセスが実行中であることを確認します。

ファイルを AWS S3 にアップロードする

Heroku では、URL でアクセスできるファイルから Postgres データベースを復元できます。Aiven はオブジェクトストレージサービスを提供していないため、この移行では、データバックアップファイルを AWS S3 にアップロードします。

まず、S3 バケットを作成します。この例では、バケットに postgres-for-migration という名前を付けました。

Aiven でバケットを作成する

セキュリティ保護のため、このバケットへの公開アクセスを必ずブロックしてください。このファイルからデータベースを復元する場合は、有効期間が短い署名付き URL を使用してファイルにアクセスします。

Aiven で公開アクセスをブロックする

さらに、S3 バケットがストレージに適切な暗号化を使用していることを確認してください。

AWS での暗号化

S3 バケットを作成したら、「データベースをローカルファイルにダンプする」のステップの /tmp/data-for-migration.sql ファイルをアップロードします。

復元移行を実行する

Heroku アプリを作成する

Heroku CLI を使用して Heroku アカウントにログインします。

$ heroku login

次に、Heroku アプリを作成し、postgres-migration-from-aiven のように名前を付けます。

$ heroku apps:create psql-migration-from-aiven
Creating ⬢ psql-migration-from-aiven... done

Heroku Postgres アドオンを作成する

Heroku アプリを作成したら、適切なプランで Heroku Postgres アドオンを追加します。「データベースのサイズを取得する」で取得したデータベース情報に基づいて、Essential-1 Postgres プランを使用します。

$ heroku addons:create \
    --app psql-migration-from-aiven \
    heroku-postgresql:essential-1
Creating heroku-postgresql:essential-1 on ⬢ psql-migration-from-aiven... ~$0.013/hour (max $9/month)
Database should be available soon
postgresql-silhouetted-05205 is being created in the background. The app will restart when complete...
Use heroku addons:info postgresql-silhouetted-05205 to check creation progress
Use heroku addons:docs heroku-postgresql to view documentation

Heroku は、Heroku アプリ向けに Postgres データベースのプロビジョニングを開始し、一意の名前を指定します。数分以内にデータベース名を指定して以下のコマンドを実行し、作成したデータベースを確認できます。

$ heroku addons:info postgresql-silhouetted-05205
=== postgresql-silhouetted-05205

Attachments:  psql-migration-from-aiven::DATABASE
Installed at: Thu Oct 17 2024 14:30:00 GMT-0700 (Mountain Standard Time)
Max Price:    $9/month
Owning app:   psql-migration-from-aiven
Plan:         heroku-postgresql:essential-1
Price:        ~$0.013/hour
State:        created

Heroku Postgres に必要な拡張機能をインストールする

データを移行する前に、Aiven Postgres インスタンスで使用していた拡張機能をインストールします。

まず、Heroku Postgres インスタンスにすでにインストールされている拡張機能を確認するため、pg:psql を使用して Heroku Postgres インスタンスに接続します。

$ heroku pg:psql --app psql-migration-from-aiven
--> Connecting to postgresql-silhouetted-05205
psql (16.4 (Ubuntu 16.4-1.pgdg20.04+1), server 16.2)
SSL connection (protocol: TLSv1.3, cipher: TLS_AES_256_GCM_SHA384, compression: off)
Type "help" for help.

psql=> \dx
                     List of installed extensions
        Name        | Version |   Schema   |          Description
--------------------+---------+------------+-------------------------------
 pg_stat_statements | 1.10    | public     | track planning and executio...
 plpgsql            | 1.0     | pg_catalog | PL/pgSQL procedural language
(2 rows)

Aiven で使用していた拡張機能のうち、Heroku Postgres にまだインストールしていないものがあればインストールします。この例では、uuid-ossp 拡張機能です。

$ psql=> CREATE EXTENSION IF NOT EXISTS "uuid-ossp";
CREATE EXTENSION

psql=> \dx
                     List of installed extensions
        Name        | Version |   Schema   |          Description
--------------------+---------+------------+-------------------------------
 pg_stat_statements | 1.10    | public     | track planning and execution…
 plpgsql            | 1.0     | pg_catalog | PL/pgSQL procedural language
 uuid-ossp          | 1.1     | public     | generate universally unique…

(3 rows)

サポートされている拡張機能とそのインストール方法については、「Heroku Postgres での拡張機能、PostGIS、フルテキスト検索辞書」を参照してください。

S3 内のファイルの署名付き URL を取得する

次に、pg_dump バックアップから新しい Heroku Postgres データベースにすべてのデータを復元します。これには、バックアップファイルを指す URL が必要です。作成した S3 バケットは公開されませんが、アップロードしたファイルを指す一時的な署名付き URL を生成できます。

AWS S3 で、適切なバケットとファイルに移動します。Object actions (オブジェクトアクション) の下で、Share with a presigned URL (署名付き URL でシェア) を選択します。

Aiven の署名付き URL

署名付き URL を適切な有効期限 (5 分など) で構成します。

Aiven 有効期限

署名付き URL を作成すると、それがクリップボードにコピーされます。URL にはクエリパラメータとしてトークンと署名が含まれます。次の例のようになります。

https://postgres-for-migration.s3.us-west-2.amazonaws.com/aiven-data-for-migration.sql?response-content-disposition=inline&X-Amz-Security-Token=IQoJb3JpZ2lu…&X-Amz-Algorithm=AWS4-HMAC-SHA256&X-Amz-Date=20241017T214313Z&X-Amz-SignedHeaders=host&X-Amz-Expires=300&X-Amz-Credential=ASIASHVRPOKPWCO2W6EQ%2F20241017%2Fus-west-2%2Fs3%2Faws4_request&X-Amz-Signature=15142ba…

Heroku で復元する

署名付き URL が取得できたら、Heroku pg:backups:restore コマンドを使用して、AWS S3 のファイルから Heroku Postgres データベースを復元します。コマンドは次のようになります。

$ heroku pg:backups:restore 'AWS-S3-PRESIGNED-URL-IN-QUOTES' \
    --app psql-migration-from-aiven \
    --confirm psql-migration-from-aiven

Use Ctrl-C at any time to stop monitoring progress; the backup will continue restoring.
Use heroku pg:backups to check progress.
Stop a running restore with heroku pg:backups:cancel.

Starting restore of [AWS-S3-PRESIGNED-URL] to postgresql-silhouetted-05205... done
Restoring... done

このコマンドでは次の点に留意してください。

AWS S3 の署名付き URL を貼り付ける場合は、必ず引用符で囲みます。
--app 引数を提供し、操作するアプリケーションと対応するデータベースを Heroku に指示します。
このコマンドは破壊的であるため、確認が必要です。--confirm 引数を提供しない場合は、続行する前に操作の確認を求められます。

カスタム設定を移行する

/tmp/settings_postgres.csv というファイルに Aiven Postgres の構成を保存したのと同様に、以下のコマンドを使用して、Heroku Postgres の構成も保存できます。

$ heroku pg:psql --app psql-migration-from-aiven \
    -c "\copy (select * from pg_settings) to '/tmp/settings_heroku.csv' with (format csv, header true);"

Heroku Postgres の設定と Aiven Postgres の設定を比較します。Aiven Postgres の設定から構成を見つけて、Heroku Postgres インスタンスに再適用します。

移行が完了したことをテストで検証する

テストを実施して、データが正常に移行されたことを検証することをお勧めします。テストでは以下のことを実施できます。

2 つのデータベース間でテーブル数を比較する。
2 つのデータベース間で各テーブルの行数を比較する。
2 つのデータベース間でクエリ結果を比較する。
新しいデータベースでさまざまな受け入れテストを実施し、適切な動作とパフォーマンスを検証する。

既存のアプリケーションとサービスを接続する

データベースの移行が完了したことを確認したら、既存のアプリケーションとサービスを新しいデータベースに接続します。

Heroku Postgres の資格情報を取得する

Heroku Postgres アドオンを作成すると、Heroku は DATABASE_URL という新しい環境変数を自動的に設定します。これには、新しいデータベースの資格情報と接続情報が含まれています。変数を取得するには、heroku config:get コマンドを実行します。

$ heroku config:get DATABASE_URL --app psql-migration-from-aiven

postgres://uetkc4dpd6ip4h:pda698cf23811351f8822912c3c89710e2bbe5689c2b5cf25db66db394a2d7406@cbhk6rs82poqi7.cluster-czrs8kj4isg7.us-east-1.rds.amazonaws.com:5432/dds18t6dm96a15

heroku:pg:credentials コマンドで資格情報を検索することもできます。

Postgres URI は次の形式に従うため、個々の部分を解析できます。

postgres://DB_USERNAME:DB_PASSWORD@DB_HOST:DB_PORT/DB_NAME

連動するシステムを更新してテストする

この情報を使用して、Heroku Postgres に接続するように既存のシステムを更新します。各システムをテストして、接続が完了したことを確認します。

この時点で、Aiven データベースサービスを一時停止することもできます。データベースサービスのメインページの右上にあるオプションで、Power off service (サービスをオフにする) をクリックします。

Aiven データベースを一時停止する

まとめ

アプリケーションとサービスが Heroku Postgres に接続され、想定どおりに実行されるようになったため、メンテナンスウィンドウを終了して、エンドユーザーの全面的なアクセスを復元できます。

移行が成功し、Aiven データベースが不要になったことが確認できたら、完全に削除できます。ページの右上にある Delete service (サービスを削除) をクリックし、データベースサービスを削除することを確認します。

Aiven でデータベースを削除する

移行が完了すると、Heroku Postgres の柔軟性と低コストの利便性を活用できるようになります。データベースの使用についての詳細は、Heroku Postgres のドキュメントを参照してください。

Categories