Cloud SQL for PostgreSQL への同種移行に関する問題を診断する

移行ジョブのプロセスで、実行時にエラーが発生することがあります。

  • ソース データベースのパスワードが間違っているなどの一部のエラーは、修正可能であり、修正すると移行ジョブが自動的に再開されます。
  • データ レプリケーションのエラーなど、一部のエラーは回復不能です。つまり、移行ジョブを最初からやり直す必要があります。

エラーが発生すると、移行ジョブのステータスが Failed に変わり、サブステータスに失敗前の最後のステータスが反映されます。

エラーのトラブルシューティングを行うには、失敗した移行ジョブに移動してエラーを表示し、エラー メッセージに記載されている手順に沿って操作します。

エラーの詳細を表示するには、移行ジョブのリンクを使用して Cloud Monitoring に移動します。ログは特定の移行ジョブにフィルタされます。

次の表に、問題の例とその解決方法を示します。

この問題については... 次のような問題が考えられます... 次のことを試します...
既存の宛先インスタンスに移行すると、次のエラー メッセージが表示されます。 The destination instance contains existing data or user defined entities (for example databases, tables, or functions). You can only migrate to empty instances. Clear your destination instance and retry the migration job. 移行先の Cloud SQL インスタンスに余分なデータが含まれています。移行できるのは、空の既存のインスタンスのみです。既知の制限事項をご覧ください。 移行先インスタンスを昇格させて読み取り/書き込みインスタンスにし、余分なデータを削除して、移行ジョブを再試行します。既存の宛先インスタンスから余分なデータを消去するをご覧ください。
ソース データベース インスタンスへの接続エラー。 移行元データベース インスタンスと移行先インスタンスの間に接続の問題がありました。 接続性のデバッグの手順に沿って操作します。
移行元データベースと移行先データベースのバージョンに互換性がないため、移行ジョブを実行できません。 移行元と移行先のデータベース バージョンの組み合わせがサポートされていません。具体的には、指定されたソース データベースのバージョンが、宛先データベースのバージョンと互換性がありません。 移行先データベースのバージョンが、移行元データベースのバージョンと同じか、1 つ上のメジャー バージョンであることを確認します。次に、新しい移行ジョブを作成します。
データ定義言語（DDL）またはデータ操作言語（DML）がソースでブロックされている。 ACCESS EXCLUSIVE ロックを必要とし、完全なダンプフェーズ中に実行されている DDL はブロックされます。

初期同期プロセス（フルダンプ）中は、テーブルで ACCESS EXCLUSIVE ロックを必要とする DDL やプログラム（ALTER TABLE や DROP TABLE など）を避ける必要があります。そうしないと、DDL またはプログラムは初期同期が完了するまで待機します。

たとえば、テーブルがまだ初期同期プロセスにあり、同じテーブルで ALTER TABLE コマンドが実行された場合、コマンドは実行されず、初期同期が完了するまで後続の DDL コマンドと DML コマンドはブロックされます。
エラー メッセージ: No pglogical extension installed on databases (X) 1 つ以上のソース データベースに pglogical がインストールされていません。 こちらのガイドラインに沿って、移行元インスタンスのデータベースに pglogical をインストールします。
PostgreSQL バージョン 15 に移行するときに、接続の再試行を複数回行った後、次のいずれかの症状が発生します。
  • Cannot connect to invalid database エラー メッセージが表示される。
  • 移行ジョブがデータベースの完全なダンプを実行しているときに、ストレージ使用量の移行ジョブ指標に長時間進行状況が表示されない。
 この問題は、pglogical 拡張機能のデッドロックの問題が原因であることがよくあります。詳細については、GitHub の pglogical Issue Tracker をご覧ください。 移行ジョブを再試行するか、まず PostgreSQL の中間バージョンに移行します。詳細については、エラー メッセージ: Cannot connect to invalid database をご覧ください。
エラー メッセージ: Replication user 'x' doesn't have sufficient privileges. Database Migration Service を使用しているユーザーに、指定されたオペレーションを実行するために必要な権限が付与されていません。 こちらのガイドラインに沿って、このユーザーに必要な権限が付与されていることを確認してください。
エラー メッセージ: Unable to connect to source database server. Database Migration Service が移行元データベース サーバーへの接続を確立できない。 移行元と移行先のデータベース インスタンスが相互に通信できること、および移行ジョブの設定を定義したときに表示された必要な前提条件をすべて完了していることを確認します。
エラー メッセージ: The source database 'wal_level' configuration must be equal to 'logical'. ソース データベースの wal_level が logical 以外の値に設定されている。 wal_level を logical に設定します。WAL レベルの構成をご覧ください。
エラー メッセージ: The source database 'max_replication_slots' configuration is not sufficient. max_replication_slots パラメータが正しく構成されていません。 このパラメータを正しく設定するには、こちらのガイドラインに沿って操作してください。
エラー メッセージ: The source database 'max_wal_senders' configuration is not sufficient. max_wal_senders パラメータが正しく構成されていません。 このパラメータを正しく設定するには、こちらのガイドラインに沿って操作してください。
エラー メッセージ: The source database 'max_worker_processes' configuration is not sufficient. max_worker_processes パラメータが正しく構成されていません。 このパラメータを正しく設定するには、こちらのガイドラインに沿って操作してください。

エラー メッセージ: Cleanup may have failed on source due to error: generic::unknown: failed to connect to on-premises database.

または

エラー メッセージ: Error promoting EM replica: finished drop replication with errors.

レプリケーションに必要な設定は、移行ジョブのプロモート中にクリーンアップできません。

データベースごとに、superuser 権限を持つユーザーとしてコマンドを実行します。

実行するコマンドの詳細については、レプリケーション スロットをクリーンアップするをご覧ください。

エラー メッセージ: x509 certificate signed by unknown authority.

Database Migration Service に提供されたソース CA 証明書に、ルート証明書のみが含まれている可能性があります。ただし、ソース証明書にはルート証明書と中間証明書の両方が必要です。

たとえば、Amazon Relational Database Service の場合、rds-ca-2019-root.pem 証明書を使用すると、この問題が発生することがあります。

ルート証明書と必要なすべての中間証明書の両方を含む、結合されたソース CA 証明書を作成します。

Amazon Relational Database Service のユースケースでは、rds-ca-2019-root.pem 証明書の代わりに rds-combined-ca-bundle.pem 証明書を使用します。

エラー メッセージ: ERROR: Out of shared memory HINT: You might need to increase max_locks_per_transaction.

max_locks_per_transaction パラメータに設定された値が十分ではありません。 このパラメータの値は、少なくとも {max_number_of_tables_per_database}/（max_connections + max_prepared_transactions）に設定してください。

エラー メッセージ: ERROR: no data left in message.

pglogical パッケージが移行元インスタンスに正しくインストールされていない。 このパッケージを適切にインストールする方法については、移行元インスタンスに pglogical パッケージをインストールするをご覧ください。

エラー メッセージ: Cannot assign TransactionIds during recovery.

構成されているソースがリカバリモードになっています。 リカバリモードでないソースを構成します。
完全なダンプが遅い。 Cloud SQL の移行先で、ソース データベースから大量のデータをインポートするのに時間がかかることがあります。
  • 移行先を作成するときに、データディスクのサイズを最終的なサイズに近づけるように設定します。フルダンプ フェーズでは、I/O 書き込み負荷の高いワークロードが使用されます。ディスクサイズが大きいほど、I/O パフォーマンスが向上します。詳細については、ブロック ストレージのパフォーマンスをご覧ください。
  • Cloud SQL 宛先により高い階層を選択して、利用可能なネットワークとディスクの帯域幅を最大化します。
  • Cloud SQL 移行先の max_wal_size フラグを調整します。通常、このフラグに設定する値は 32 GB または 64 GB が適しています。このフラグを更新しても、サーバーを再起動する必要はありません。
エラー メッセージ: subscriber {subscriber_name} initialization failed during nonrecoverable step (d), please try the setup again

完全ダンプフェーズ中に移行ジョブが失敗し、ジョブを復元できません。ソース データベース インスタンスが再起動されたか、リカバリモードになっているか、wal_sender_timeout パラメータに設定された値が不十分なため、レプリケーション接続が終了しました。

問題の根本原因を特定するには:

  1. Google Cloud コンソールの [ログ エクスプローラ] ページに移動します。
  2. リソースリストから Cloud SQL レプリカを選択します。レプリカの最新のログのリストが表示されます。
  3. ログファイル名から postgres.log を選択します。
  4. ログの重大度レベルを Warning より上のすべてのレベルに設定します。最初のエラーログが、障害の根本原因である可能性があります。
  • 完全ダンプフェーズ中に Database Migration Service がソース データベース インスタンスに常に接続できることを確認します。
  • ソース データベース インスタンスで、wal_sender_timeout パラメータの値がより大きな数値（0 など）に設定されているかどうかを確認します。
  • 移行ジョブを再起動してから、もう一度お試しください。
エラー メッセージ: ERROR: unknown column name {column_name}

プライマリ ノードのレプリケートされたテーブルに列が追加されたが、レプリカノードには追加されていない。

継続的な移行中に自動的に更新されるのは、データ操作言語（DML）の変更のみです。ソース データベースと宛先データベースの互換性を維持するために、データ定義言語（DDL）の変更を管理することはユーザーの責任です。これは次の 2 つの方法で実現できます。

  • 移行元データベースへの書き込みを停止し、移行元と移行先の両方で DDL コマンドを実行します。宛先で DDL コマンドを実行する前に、DDL の変更を適用する Cloud SQL ユーザーに cloudsqlexternalsync ロールを付与します。
  • pglogical.replicate_ddl_command を使用すると、DDL コマンドを移行元と移行先で一貫したポイントで実行できます。コマンドを実行するユーザーは、移行元と移行先の両方で同じユーザー名を使用する必要があります。また、移行するアーティファクト（テーブル、シーケンス、ビュー、データベースなど）のスーパーユーザーまたはオーナーである必要があります。

pglogical.replicate_ddl_command の使用例については、継続的な移行をご覧ください。
エラー メッセージ: ERROR: cannot truncate a table referenced in a foreign key constraint

ユーザーが外部キー制約のあるテーブルを切り捨てようとしました。

まず外部キー制約を削除してから、テーブルを切り捨てます。
エラー メッセージ: ERROR: connection to other side has died

wal_sender_timeout パラメータに設定された値が不十分なため、レプリケーション接続が終了しました。このエラーは通常、最初のダンプが成功した後のレプリケーション フェーズで発生します。

wal_sender_timeout パラメータ値を増やすか、ソース データベース インスタンスで値を 0 に設定してタイムアウト メカニズムを無効にすることを検討してください。
警告メッセージ: migration job test configuration has returned the following warnings: Some table(s) have limited support.

ソースに、サポートが制限されているテーブル（主キーのないテーブルなど）がある。

これは警告メッセージです。移行を続行できますが、サポートされていないエンティティ（主キーのないテーブルなど）は移行されません。詳細については、移行元データベースを構成するをご覧ください。
選択したデータベースを移行するときに、移行ジョブが 1 つ以上のデータベースにデータを複製できない場合、データベースのリストに [失敗] ステータスが表示されます。 さまざまな移行ジョブエラー。

[エラー] 列で [エラーを表示] をクリックし、エラーを修正します。失敗したデータベースを移行ジョブから削除することもできます。

移行ジョブから失敗したデータベースを削除する方法については、移行ジョブを管理するをご覧ください。

既存の宛先インスタンスから余分なデータを消去する

既存の宛先インスタンスに移行すると、次のエラー メッセージが表示されます。The destination instance contains existing data or user defined entities (for example databases, tables, or functions). You can only migrate to empty instances. Clear your destination instance and retry the migration job.

この問題は、移行先インスタンスに余分なデータが含まれている場合に発生することがあります。移行できるのは、空の既存のインスタンスのみです。既知の制限事項をご覧ください。

次の方法をお試しください

次の手順で、移行先インスタンスから余分なデータを消去し、移行ジョブを再度開始します。

  1. 移行ジョブを停止します。
  2. この時点で、移行先の Cloud SQL インスタンスは read-only モードになっています。移行先インスタンスをプロモートして、書き込みアクセス権を取得します。
  3. 移行先の Cloud SQL インスタンスに接続します。
  4. 移行先のインスタンス データベースから余分なデータを削除します。宛先にはシステム構成データのみを含めることができます。宛先データベースにユーザーデータ（テーブルなど）を含めることはできません。データベースで実行して、システム以外のデータを検索できる SQL ステートメントは、次のようにさまざまです。

    システム以外のデータベースを取得する SQL ステートメントの例（クリックして展開）

    SELECT datname FROM pg_catalog.pg_database
WHERE datname NOT IN ('cloudsqladmin', 'template1', 'template0', 'postgres');

    postgres データベース内の非システムデータを取得する SQL ステートメントの例（クリックして展開）

    postgres データベースはシステム データベースですが、システム以外のデータを含めることができます。これらのステートメントは、postgres データベースで実行してください。psql クライアントを使用して宛先インスタンスに接続する場合は、\connect {database_name_here} コマンドを使用して、接続をリセットせずに別のデータベースに切り替えることができます。

    SELECT table_schema, table_name FROM information_schema.tables
WHERE table_schema != 'information_schema' AND table_schema not like 'pg\_%';

SELECT routine_schema, routine_name FROM information_schema.routines
WHERE routine_schema != 'information_schema' AND routine_schema not like 'pg\_%';

SELECT extname FROM pg_extension WHERE extname != 'plpgsql';
  5. 移行ジョブを開始します。

レプリケーション スロットをクリーンアップする

次のいずれかのメッセージが表示されます。

  • Cleanup may have failed on source due to error: generic::unknown: failed to connect to on-premises database.
  • Error promoting EM replica: finished drop replication with errors.

次のような問題が考えられます

Cloud SQL インスタンスをプロモートするときに、Cloud SQL インスタンスからソース インスタンスにアクセスできない場合（ソース インスタンスが実行されていない、ソース インスタンスの許可リストから Cloud SQL インスタンスを削除したなど）、移行ジョブのプロモート中にレプリケーションに必要な設定をクリーンアップできません。レプリケーション スロットは手動でクリーンアップする必要があります。

次の方法をお試しください

各データベースで、superuser 権限を持つユーザーとして次のコマンドを実行します。

  1. エラー メッセージからレプリケーション スロット名を取得し、次のコマンドを実行してスロットを 1 つずつ削除します。

    SELECT pg_drop_replication_slot('slot_name');

  2. エラー メッセージにレプリケーション スロット名が表示されない場合は、次のコマンドを実行して、既存のレプリケーション スロットをクエリします。

    SELECT pg_drop_replication_slot(slot_name) FROM pg_replication_slots WHERE slot_name LIKE '%cloudsql%' AND active = 'f';

  3. ソース インスタンスを使用している Cloud SQL レプリカがない場合は、次のコマンドを実行して pglogical の設定をクリーンアップします。

    SELECT pglogical.drop_node(node_name) FROM pglogical.node WHERE node_name LIKE 'cloudsql';

  4. pglogical 拡張機能が不要になった場合は、次のコマンドを実行して拡張機能をアンインストールします。

    DROP EXTENSION IF EXISTS pglogical;

エラー メッセージ: Cannot connect to invalid database

PostgreSQL バージョン 15 に移行するときに、接続の再試行を複数回行った後、次のいずれかの症状が発生します。

  • Cannot connect to invalid database エラー メッセージが表示される。
  • 移行ジョブがデータベースの完全なダンプを実行しているときに、ストレージ使用量の移行ジョブ指標に長時間進行状況が表示されない。

次のような問題が考えられます

この問題は、pglogical 拡張機能のデッドロックの問題が原因であることがよくあります。詳細については、GitHub の pglogical Issue Tracker をご覧ください。

次の方法をお試しください

新しい移行先インスタンスで移行ジョブを再度実行する

問題が発生した移行先データベースを削除して、移行ジョブを再作成してみてください。手順は次のとおりです。

  1. 問題が発生した宛先インスタンスを削除します。Cloud SQL for PostgreSQL のドキュメントのインスタンスを削除するをご覧ください。
  2. 失敗した移行ジョブを削除します。移行ジョブを確認するをご覧ください。
  3. 移行ジョブを再作成します。移行ジョブを作成するをご覧ください。

中間バージョンに移行する

PostgreSQL 14 などの以前の PostgreSQL バージョンへの移行を検討してください。移行が正常に完了したら、目的の PostgreSQL 15 インスタンスにアップグレードできます。Cloud SQL for PostgreSQL のドキュメントのデータを移行してデータベースのメジャー バージョンをアップグレードするをご覧ください。

ユーザーとロールを管理する

既存のユーザーを移行する

現在、Database Migration Service は、移行元インスタンスから移行先 Cloud SQL インスタンスへの既存ユーザーの移行をサポートしていません。この移行を管理するには、Cloud SQL でユーザーを手動で作成します。

cloudsqlexternalsync ユーザーについて

移行中、Cloud SQL レプリカ上のすべてのオブジェクトは cloudsqlexternalsync ユーザーが所有します。データの移行後、次の手順でオブジェクトの所有権を他のユーザーに変更できます。

  • GRANT cloudsqlexternalsync to {USER} コマンドを実行します。
  • 各データベースで reassign owned by cloudsqlexternalsync to {USER}; コマンドを実行します。
  • cloudsqlexternalsync ユーザーを削除するには、drop role cloudsqlexternalsync コマンドを実行します。

新しい Cloud SQL インスタンスにデータをインポートする

Database Migration Service が Cloud Storage に移行した Cloud SQL インスタンスからデータをエクスポートし、Cloud Storage からスタンドアロンの Cloud SQL インスタンスにデータをインポートすると、移行先インスタンスに cloudsqlexternalsync ユーザーが存在しないため、インポートが失敗することがあります。

この問題を軽減するには、移行先インスタンスに cloudsqlexternalsync ユーザーを作成するか、移行されたインスタンスからユーザーを削除します。