本頁面提供架構指南和遷移策略,說明如何將非結構化資料集、物件儲存庫和檔案共用區轉移至 Google Cloud上的 Cloud Storage。
如果您是雲端架構師、資料工程師或儲存空間管理員,請參考本頁資訊,評估資料移轉方法、選擇線上或離線移轉工具、確保資料完整性,以及在遷移期間最佳化網路頻寬。
閱讀本頁面之前,您應先瞭解來源資料集的總大小、可用的網路傳輸頻寬,以及目標遷移時間表。
選擇資料移轉方法
規劃資料移轉時,請根據資料集大小和網路頻寬,參考下表選擇移轉方法:
| 情境 | 資料集大小 | 建議解決方案 | 注意事項 |
|---|---|---|---|
| 透過高頻寬網路線上移轉資料 | TB 至 PB | Storage 移轉服務 | 自動持續線上移轉,並進行核對和驗證。 |
| 在頻寬有限的情況下離線移轉資料 | 數 PB | Transfer Appliance | 安全運送實體設備,不受網路限制。 |
使用 Storage 移轉服務線上移轉資料
Storage 移轉服務可自動將線上資料從地端部署儲存空間、POSIX 檔案系統或第三方雲端服務供應商移轉至 Cloud Storage。
Storage 移轉服務的主要功能
Storage 移轉服務提供下列功能:
- 代管擴充性:自動擴充移轉作業,無須佈建或管理本機伺服器。
- 資料完整性驗證:使用端對端 MD5 核對和,在傳輸期間自動驗證資料準確性。
- 持續增量同步:持續同步處理修改過的檔案,盡可能縮短轉換停機時間。
如要瞭解端對端移轉工作流程,請參閱「建立移轉作業」。
使用 Transfer Appliance 離線移轉資料
如果資料集很大,但網路頻寬有限,請使用 Transfer Appliance 將資料實體運送至 Google Cloud。