Pengantar BigQuery Data Transfer Service
BigQuery Data Transfer Service memungkinkan Anda mengotomatiskan transfer data terjadwal dan terkelola ke BigQuery. Setelah mengonfigurasi transfer data, BigQuery Data Transfer Service secara otomatis akan memuat data ke BigQuery secara rutin. Anda juga dapat melakukan pengisian ulang data untuk melengkapi data yang kurang atau hilang karena gangguan layanan, melakukan salinan set data, dan menjalankan kueri terjadwal. Anda tidak dapat menggunakan BigQuery Data Transfer Service untuk mentransfer data keluar dari BigQuery.
Untuk mengonfigurasi dan mengelola transfer, Anda dapat menggunakan Google Cloud konsol, alat command line bq, atau BigQuery Data Transfer Service API. Halaman Pipelines & Connections juga menyediakan alur kerja yang disederhanakan (pratinjau) untuk membuat transfer. Untuk menerima update layanan, berlanggananlah ke grup pengumuman DTS BigQuery.
Sumber data yang didukung
BigQuery Data Transfer Service mendukung pemuatan data dari sumber data berikut:
- Platform SaaS:
- Platform pemasaran:
- Platform pembayaran:
- Database dan data warehouse:
- Amazon Redshift
- Apache Hive Metastore
- Microsoft SQL Server (Pratinjau)
- MySQL
- Oracle
- PostgreSQL
- Snowflake
- Teradata
- Penyimpanan cloud:
- Layanan Google:
- Campaign Manager
- Comparison Shopping Service (CSS) Center (Pratinjau)
- Display & Video 360
- Google Ads
- Google Ad Manager
- Google Analytics 4
- Google Merchant Center (Pratinjau)
- Search Ads 360
- Google Play
- Channel YouTube
- Pemilik Konten YouTube
- Tugas kueri menggunakan
QUERY - Tugas pemuatan menggunakan
PIPELINE - Untuk mempelajari cara melakukan transfer, lihat dokumentasi untuk sumber data Anda.
Pertimbangan SLO pengiriman data
SLO Pengiriman Data berlaku untuk transfer data yang dijadwalkan secara otomatis menggunakan BigQuery Data Transfer Service dari sumber dalam Google Cloud.
Untuk transfer data yang melibatkan sumber pihak ketiga atau non-Google Cloud , pemadaman layanan dengan sumber ini dapat memengaruhi performa BigQuery Data Transfer Service. Oleh karena itu, SLO Pengiriman Data tidak berlaku untuk transfer data BigQuery Data Transfer Service dari sumber non-Google Cloud .
Region yang didukung
Seperti BigQuery, BigQuery Data Transfer Service adalah resource multi-regional, dengan banyak region tunggal tambahan yang tersedia.
Lokalitas set data BigQuery ditentukan saat Anda membuat set data tujuan untuk menyimpan data yang ditransfer oleh BigQuery Data Transfer Service. Saat menyiapkan transfer, konfigurasi transfer itu sendiri ditetapkan ke lokasi yang sama dengan set data tujuan. BigQuery Data Transfer Service memproses dan menata data di lokasi yang sama dengan set data tujuan.
BigQuery Data Transfer Service mendukung transfer data dari region mana pun tempat data Anda disimpan ke lokasi mana pun tempat set data tujuan Anda berada.
Untuk mengetahui informasi selengkapnya tentang transfer dan kompatibilitas region untuk BigQuery Data Transfer Service, baca Lokasi dan transfer set data. Guna mengetahui wilayah yang didukung untuk BigQuery, lihat Lokasi set data.
Menggunakan slot pemesanan dengan transfer data
Tugas yang dipicu oleh BigQuery Data Transfer Service hanya menggunakan slot pemesanan jika project, folder, atau organisasi ditetapkan ke pemesanan dengan salah satu jenis pekerjaan berikut:
Harga
Untuk mengetahui informasi tentang harga BigQuery Data Transfer Service, lihat halaman Harga.
Setelah data ditransfer ke BigQuery, harga standar penyimpanan dan kueri BigQuery berlaku.
Kuota
Untuk mengetahui informasi tentang kuota BigQuery Data Transfer Service, lihat halaman Kuota dan batas.
Memecahkan masalah konfigurasi transfer
Untuk mengetahui informasi tentang cara menyelesaikan masalah terkait BigQuery Data Transfer Service, lihat Memecahkan masalah konfigurasi transfer.