BigQuery 資料移轉服務簡介
BigQuery 資料移轉服務可讓您自動執行排定的代管資料移轉作業,將資料移轉至 BigQuery。設定資料移轉作業後,BigQuery 資料移轉服務會定期自動將資料載入 BigQuery。您也可以主動執行資料補充作業,以填補任何中斷或缺漏、複製資料集,以及執行排定的查詢。您無法使用 BigQuery 資料移轉服務將資料從 BigQuery 移出。
如要設定及管理移轉作業,可以使用 Google Cloud 控制台、bq 指令列工具或 BigQuery 資料移轉服務 API。「Pipelines & Connections」(管道與連線) 頁面也提供簡化的工作流程 (預先發布版),可用於建立移轉作業。如要接收服務更新,請訂閱 BigQuery DTS 公告群組。
支援的資料來源
BigQuery 資料移轉服務支援從下列資料來源載入資料:
- SaaS 平台:
- 行銷平台:
- 付款平台:
- 資料庫和資料倉儲:
- Amazon Redshift
- Apache Hive metastore
- Microsoft SQL Server (預先發布版)
- MySQL
- Oracle
- PostgreSQL
- Snowflake
- Teradata
- 雲端儲存空間:
- Google 服務:
- Campaign Manager
- 購物比較服務 (CSS) 中心 (預先發布版)
- Display & Video 360
- Google Ads
- Google Ad Manager
- Google Analytics 4
- Google Merchant Center (預先發布版)
- Search Ads 360
- Google Play
- YouTube 頻道
- YouTube 內容擁有者
- 使用
QUERY查詢工作 - 使用
PIPELINE載入工作 - 如要瞭解如何建立移轉作業,請參閱資料來源的說明文件。
資料傳送服務等級目標注意事項
資料傳送服務等級目標適用於使用 BigQuery 資料移轉服務,從 Google Cloud內來源自動排定的資料移轉作業。
如果資料移轉作業涉及第三方或非Google Cloud 來源,這些來源的服務中斷可能會影響 BigQuery 資料移轉服務的效能。因此,資料傳送服務等級目標不適用於從非Google Cloud 來源移轉 BigQuery 資料移轉服務資料。
支援的地區
與 BigQuery 相同,BigQuery 資料移轉服務也是多區域資源,並提供許多額外的單一區域。
建立目的地資料集來儲存 BigQuery 資料移轉服務移轉的資料時,您要指定 BigQuery 資料集的所在位置。設定移轉作業時,移轉設定本身會設為與目的地資料集相同的位置。BigQuery 資料移轉服務會在與目的地資料集相同的位置處理及暫存資料。
BigQuery 資料移轉服務支援從任何資料儲存區域,將資料移轉至目的地資料集所在的任何位置。
如要進一步瞭解 BigQuery 資料移轉服務的移轉作業和區域相容性,請參閱「資料集位置和移轉作業」。如要瞭解 BigQuery 支援的區域,請參閱「資料集位置」。
使用預留項目運算單元進行資料移轉
只有在專案、資料夾或組織指派給具有下列任一工作類型的預留項目時,BigQuery 資料移轉服務觸發的工作才會使用預留項目運算單元:
定價
如要瞭解 BigQuery 資料移轉服務的定價,請參閱「定價」頁面。
資料移轉至 BigQuery 後,適用標準 BigQuery 儲存空間和查詢定價。
配額
如要瞭解 BigQuery 資料移轉服務配額,請參閱「配額與限制」頁面。
排解移轉設定問題
如要瞭解如何解決 BigQuery 資料移轉服務的問題,請參閱「排解移轉設定問題」。