診斷遷移至 PostgreSQL 適用的 Cloud SQL 的單一來源遷移作業問題

遷移工作程序在執行階段可能會發生錯誤。

  • 部分錯誤 (例如來源資料庫密碼錯誤) 可以復原，也就是說，修正錯誤後，遷移工作會自動恢復。
  • 有些錯誤無法復原，例如資料複製錯誤，這表示遷移工作必須從頭開始。

發生錯誤時，遷移工作狀態會變更為「Failed」，子狀態則會反映失敗前的最後狀態。

如要排解錯誤，請前往失敗的遷移工作查看錯誤，並按照錯誤訊息中的步驟操作。

如要查看錯誤的詳細資料，請使用遷移工作的連結前往 Cloud Monitoring。系統會篩選記錄，只顯示特定遷移工作的記錄。

下表列出一些問題範例和解決方法：

針對這個問題... 問題可能出在... 不如說
如果遷移至現有的目的地執行個體，會收到下列錯誤訊息： The destination instance contains existing data or user defined entities (for example databases, tables, or functions). You can only migrate to empty instances. Clear your destination instance and retry the migration job. 目的地 Cloud SQL 執行個體含有額外資料。您只能遷移至現有的空白執行個體。請參閱「已知限制」。 將目的地執行個體升級為讀寫執行個體、移除額外資料，然後重新嘗試遷移工作。請參閱「清除現有目的地執行個體中的多餘資料」。
無法連線至來源資料庫執行個體。 來源資料庫執行個體與目的地執行個體之間的連線發生問題。 請按照「偵錯連線能力」中的步驟操作。
來源和目的地資料庫版本不相容，因此無法執行遷移工作。 不支援來源和目的地資料庫版本的組合。具體來說，您提供的來源資料庫版本與目的地資料庫版本不相容。 確認目的地資料庫版本與來源資料庫版本相同，或高於來源資料庫一個主要版本。接著，建立新的遷移工作。
來源端封鎖了資料定義語言 (DDL) 或 data manipulation language (DML)。 如果 DDL 需要 ACCESS EXCLUSIVE 鎖定，且在完整 dump 階段執行，就會遭到封鎖。

在初始同步處理程序 (完整 dump) 期間，應避免在資料表上執行 DDL 或需要 ACCESS EXCLUSIVE 鎖定的程式，例如 ALTER TABLE 或 DROP TABLE。否則，DDL 或程式會等到初始同步作業完成後才執行。

舉例來說，如果資料表仍在初始同步處理程序中，且在同一個資料表上執行 ALTER TABLE 指令，則系統不會執行該指令，且後續的 DDL 和 DML 指令會遭到封鎖，直到初始同步處理完成為止。
錯誤訊息：No pglogical extension installed on databases (X) 一或多個來源資料庫未安裝 pglogical。 請按照這些指南，在來源執行個體的資料庫上安裝 pglogical。
遷移至 PostgreSQL 15 版時，如果多次嘗試連線後仍失敗，會發生下列其中一種情況：
  • 您收到 Cannot connect to invalid database 錯誤訊息。
  • 遷移工作執行完整資料庫轉儲作業時，儲存空間用量遷移工作指標在很長一段時間後仍未顯示進度。
 這個問題通常是因為 pglogical 擴充功能發生死結。詳情請參閱 GitHub 中的 pglogical Issue Tracker。 請重試遷移工作，或先遷移至中繼 PostgreSQL 版本。詳情請參閱「錯誤訊息：Cannot connect to invalid database」。
錯誤訊息：Replication user 'x' doesn't have sufficient privileges. 使用資料庫遷移服務的使用者沒有必要權限，無法執行指定作業。 請按照這些指南操作，確保這位使用者具備必要權限。
錯誤訊息：Unable to connect to source database server. 資料庫遷移服務無法連線至來源資料庫伺服器。 請確認來源和目的地資料庫執行個體可以互相通訊，且您已完成定義遷移工作設定時顯示的所有必要條件。
錯誤訊息：The source database 'wal_level' configuration must be equal to 'logical'. 來源資料庫的 wal_level 設為 logical 以外的值。 將 wal_level 設為 logical。請參閱「WAL 層級設定」。
錯誤訊息：The source database 'max_replication_slots' configuration is not sufficient. max_replication_slots 參數設定有誤。 請按照這些規範正確設定這項參數。
錯誤訊息：The source database 'max_wal_senders' configuration is not sufficient. max_wal_senders 參數設定有誤。 請按照這些規範正確設定這項參數。
錯誤訊息：The source database 'max_worker_processes' configuration is not sufficient. max_worker_processes 參數設定有誤。 請按照這些規範正確設定這項參數。

錯誤訊息：Cleanup may have failed on source due to error: generic::unknown: failed to connect to on-premises database.

或

錯誤訊息：Error promoting EM replica: finished drop replication with errors.

在遷移工作升級期間，無法清除複製作業所需的設定。

以具備 superuser 權限的使用者身分，對每個資料庫執行指令。

如要進一步瞭解要執行的指令，請參閱「清除複製運算單元」。

錯誤訊息：x509 certificate signed by unknown authority.

提供給資料庫遷移服務的來源 CA 憑證可能只包含根憑證。不過，來源憑證需要根憑證和任何中繼憑證。

舉例來說，如果使用 Amazon Relational Database Service，採用 rds-ca-2019-root.pem 憑證可能會導致這個問題。

建立合併的來源 CA 憑證，其中包含根憑證和所有必要的中繼憑證。

如果是 Amazon 關聯式資料庫服務，請使用 rds-combined-ca-bundle.pem 憑證，而非 rds-ca-2019-root.pem 憑證。

錯誤訊息：ERROR: Out of shared memory HINT: You might need to increase max_locks_per_transaction.

max_locks_per_transaction 參數設定的值不夠。 請將這個參數的值設為至少 {max_number_of_tables_per_database}/(max_connections + max_prepared_transactions)。

錯誤訊息：ERROR: no data left in message.

來源執行個體未正確安裝 pglogical 套件。 如要進一步瞭解如何正確安裝這個套件，請參閱「在來源執行個體上安裝 pglogical 套件」。

錯誤訊息：Cannot assign TransactionIds during recovery.

設定的來源處於復原模式。 請設定非復原模式的來源。
完整轉儲作業速度緩慢。 Cloud SQL 目的地從來源資料庫匯入大量資料的速度可能較慢。
  • 建立目的地時，請將資料磁碟大小設為接近最終大小。完整傾印階段會使用 I/O 寫入密集型工作負載，而較大的磁碟大小可提供較佳的 I/O 效能。詳情請參閱「區塊儲存空間效能」。
  • 為 Cloud SQL 目的地選擇較高的級別，即可取得最大可用網路和磁碟頻寬。
  • 調整 Cloud SQL 目的地的 max_wal_size 旗標。一般來說，建議將這個旗標設為 32 GB 或 64 GB。更新這個旗標時，不需要重新啟動伺服器。
錯誤訊息：subscriber {subscriber_name} initialization failed during nonrecoverable step (d), please try the setup again

遷移工作在完整 dump 階段失敗，且無法復原。來源資料庫執行個體已重新啟動或處於復原模式，或 wal_sender_timeout 參數設定的值不足，導致複製連線終止。

如要找出問題的根本原因，請按照下列步驟操作：

  1. 前往 Google Cloud 控制台的「Logs Explorer」頁面。
  2. 從資源清單中選取 Cloud SQL 副本。系統會顯示副本的最新記錄清單。
  3. 從記錄檔名稱中選取 postgres.log。
  4. 將記錄的嚴重性等級設為高於 Warning 的所有等級。第一個錯誤記錄可能是失敗的根本原因。
  • 在完整轉儲階段，請確保資料庫遷移服務一律能連線至來源資料庫執行個體。
  • 檢查來源資料庫執行個體的 wal_sender_timeout 參數值是否設為較大的數字 (例如 0)。
  • 重新啟動遷移工作，然後再試一次。
錯誤訊息：ERROR: unknown column name {column_name}

資料欄已新增至主要節點上的複製資料表，但未新增至副本節點。

在連續遷移期間，只有 data manipulation language (DML) 變更會自動更新。使用者必須負責管理資料定義語言 (DDL) 變更，確保來源和目的地資料庫保持相容，這可以透過兩種方式達成：

  • 停止寫入來源資料庫，並在來源和目的地執行 DDL 指令。在目的地執行 DDL 指令前，請先將 cloudsqlexternalsync 角色授予套用 DDL 變更的 Cloud SQL 使用者。
  • 使用 pglogical.replicate_ddl_command，允許在來源和目的地的一致時間點執行 DDL 指令。執行指令的使用者在來源和目的地必須使用相同的使用者名稱，且應為超級使用者或要遷移的構件 (例如資料表、序列、檢視表或資料庫) 的擁有者。

如需 pglogical.replicate_ddl_command 的使用範例，請參閱「持續遷移」。
錯誤訊息：ERROR: cannot truncate a table referenced in a foreign key constraint

使用者嘗試截斷具有外鍵限制的資料表。

請先移除外鍵限制，再截斷資料表。
錯誤訊息：ERROR: connection to other side has died

wal_sender_timeout 參數的值設定不足，因此複製連線已結束。這項錯誤通常會在初始轉儲成功後的複製階段發生。

建議您提高 wal_sender_timeout 參數值，或在來源資料庫執行個體上將該值設為 0，停用逾時機制。
警告訊息：migration job test configuration has returned the following warnings: Some table(s) have limited support.

來源資料表僅提供部分支援，例如沒有主鍵的資料表。

這是一則警告訊息。您可以繼續遷移，但請注意，系統不會遷移不支援的實體 (例如沒有主鍵的資料表)。詳情請參閱「設定來源資料庫」。

如果遷移所選資料庫時，遷移工作無法將資料複製到一或多個資料庫，資料庫清單中會顯示「失敗」狀態。 各種遷移工作錯誤。

在「錯誤」欄中，按一下「查看錯誤」並修正錯誤。您也可以從遷移工作中移除失敗的資料庫。

如要進一步瞭解如何從遷移工作中移除失敗的資料庫，請參閱「管理遷移工作」。

清除現有目的地執行個體中的額外資料

遷移至現有目的地執行個體時，會收到下列錯誤訊息：The destination instance contains existing data or user defined entities (for example databases, tables, or functions). You can only migrate to empty instances. Clear your destination instance and retry the migration job.

如果目的地執行個體含有額外資料，就可能發生這個問題。只能遷移至空白的現有執行個體。請參閱「已知限制」。

試試這些建議

請按照下列步驟，清除目的地執行個體中的額外資料，然後重新啟動遷移工作：

  1. 停止遷移工作。
  2. 此時，目的地 Cloud SQL 執行個體會處於read-only模式。升級目的地執行個體，取得寫入權限。
  3. 連線至目的地 Cloud SQL 執行個體。
  4. 從目的地執行個體資料庫中移除多餘資料。目的地只能包含系統設定資料。目的地資料庫不得包含使用者資料 (例如資料表)。您可以在資料庫中執行不同的 SQL 陳述式，找出非系統資料，例如：

    用於擷取非系統資料庫的 SQL 陳述式範例 (點選即可展開)

    SELECT datname FROM pg_catalog.pg_database
WHERE datname NOT IN ('cloudsqladmin', 'template1', 'template0', 'postgres');

    用來擷取 postgres 資料庫中非系統資料的 SQL 陳述式範例 (點選即可展開)

    postgres 資料庫是系統資料庫，但可以包含非系統資料。請務必在 postgres 資料庫中執行這些陳述式。如果您使用 psql 用戶端連線至目的地執行個體，可以使用 \connect {database_name_here} 指令切換至其他資料庫，而不必重設連線。

    SELECT table_schema, table_name FROM information_schema.tables
WHERE table_schema != 'information_schema' AND table_schema not like 'pg\_%';

SELECT routine_schema, routine_name FROM information_schema.routines
WHERE routine_schema != 'information_schema' AND routine_schema not like 'pg\_%';

SELECT extname FROM pg_extension WHERE extname != 'plpgsql';
  5. 啟動遷移工作。

清理複製運算單元

您會看到下列其中一則訊息：

  • Cleanup may have failed on source due to error: generic::unknown: failed to connect to on-premises database.
  • Error promoting EM replica: finished drop replication with errors.

問題可能在於

升級 Cloud SQL 執行個體時，如果 Cloud SQL 執行個體無法連線至來源執行個體 (例如來源執行個體未運作，或您已將 Cloud SQL 執行個體從來源執行個體的許可清單中移除)，則在升級遷移工作期間，系統無法清除複製作業所需的設定。您必須手動清除。

試試這些建議

針對每個資料庫，以具備 superuser 權限的使用者身分執行下列指令：

  1. 從錯誤訊息中取得複製運算單元名稱，然後執行下列指令，逐一捨棄運算單元：

    SELECT pg_drop_replication_slot('slot_name');

  2. 如果錯誤訊息中未提供複製運算單元名稱，請執行下列指令，查詢現有的複製運算單元：

    SELECT pg_drop_replication_slot(slot_name) FROM pg_replication_slots WHERE slot_name LIKE '%cloudsql%' AND active = 'f';

  3. 如果沒有 Cloud SQL 副本使用來源執行個體，請執行下列指令來清除 pglogical 設定：

    SELECT pglogical.drop_node(node_name) FROM pglogical.node WHERE node_name LIKE 'cloudsql';

  4. 如果不再需要 pglogical 擴充功能，請執行下列指令來解除安裝：

    DROP EXTENSION IF EXISTS pglogical;

錯誤訊息：Cannot connect to invalid database

遷移至 PostgreSQL 15 版時，在多次嘗試重新連線後，會發生下列其中一種情況：

  • 您會收到 Cannot connect to invalid database 錯誤訊息。
  • 遷移工作執行完整資料庫轉儲作業時，儲存空間用量遷移工作指標在長時間後仍未顯示進度。

問題可能在於

這個問題通常是因為 pglogical 擴充功能中的死結問題所致。詳情請參閱 GitHub 中的 pglogical Issue Tracker。

試試這些建議

使用新的目的地執行個體再次執行遷移工作

請嘗試刪除發生問題的目的地資料庫，然後重新建立遷移工作。步驟如下：

  1. 刪除發生問題的目的地執行個體。請參閱 PostgreSQL 適用的 Cloud SQL 說明文件中的「刪除執行個體」。
  2. 刪除失敗的遷移工作。請參閱「查看遷移工作」。
  3. 重新建立遷移工作。請參閱「建立遷移工作」。

遷移至中繼版本

建議您改用較舊的 PostgreSQL 版本，例如 PostgreSQL 14。成功遷移後，您可以升級至所需的 PostgreSQL 15 執行個體。請參閱 PostgreSQL 適用的 Cloud SQL 說明文件中的「透過遷移資料升級資料庫主要版本」。

管理使用者和角色

遷移現有使用者

資料庫遷移服務目前不支援將現有使用者從來源執行個體遷移至目的地 Cloud SQL 執行個體。您可以手動在 Cloud SQL 中建立使用者，管理這項遷移作業。

關於 cloudsqlexternalsync 使用者

遷移期間，Cloud SQL 副本上的所有物件都歸 cloudsqlexternalsync 使用者所有。資料遷移完成後，您可以按照下列步驟，將物件擁有權轉移給其他使用者：

  • 請執行 GRANT cloudsqlexternalsync to {USER} 指令。
  • 在每個資料庫上執行 reassign owned by cloudsqlexternalsync to {USER}; 指令。
  • 如要移除 cloudsqlexternalsync 使用者，請執行 drop role cloudsqlexternalsync 指令。

將資料匯入新的 Cloud SQL 執行個體

如果您先從資料庫遷移服務遷移至 Cloud Storage 的 Cloud SQL 執行個體匯出資料，然後將資料從 Cloud Storage 匯入獨立 Cloud SQL 執行個體，匯入作業可能會失敗，因為目的地執行個體中沒有 cloudsqlexternalsync 使用者。

如要解決這個問題，請在目的地執行個體建立 cloudsqlexternalsync 使用者，或從遷移的執行個體移除使用者。