Ringkasan Datastream

Datastream adalah layanan replikasi dan change data capture (CDC) serverless yang memungkinkan Anda menyinkronkan data di berbagai database dan aplikasi heterogen dengan latensi minimal. Karena Datastream bersifat serverless, Datastream akan diskalakan secara otomatis tanpa mengharuskan Anda menyediakan atau mengelola resource.

Anda dapat mereplikasi data ke BigQuery untuk analisis hampir real-time atau menulis aliran peristiwa perubahan ke Cloud Storage untuk arsitektur berbasis peristiwa. Integrasi dengan template Pub/Sub dan Dataflow memungkinkan Anda memuat data ke tujuan seperti Cloud SQL dan Spanner. Datastream juga terintegrasi dengan Knowledge Catalog untuk pengelolaan metadata dan silsilah terpusat di seluruh Google Cloud.

Datastream mendukung sumber database termasuk MySQL, Oracle, PostgreSQL, AlloyDB untuk PostgreSQL, SQL Server, MongoDB, dan Spanner. Anda juga dapat melakukan streaming data dari Salesforce dan dari sumber Pratinjau seperti Salesforce Marketing Cloud, Microsoft Dataverse, ServiceNow, dan Workday. Opsi konektivitas pribadi, pelaporan status, dan penanganan perubahan skema mendukung replikasi yang andal untuk migrasi dan deployment hybrid cloud.

Kasus penggunaan

Kemampuan streaming Datastream memungkinkan berbagai kasus penggunaan:

  • Mereplikasi dan menyinkronkan data di seluruh organisasi Anda dengan latensi minimal

    Anda dapat menyinkronkan data di berbagai database dan aplikasi heterogen dengan andal, dengan latensi rendah, dan dengan dampak minimal terhadap performa sumber Anda. Manfaatkan keandalan aliran data untuk analisis, replikasi database, migrasi cloud, dan arsitektur berbasis peristiwa di seluruh lingkungan hybrid.

  • Tingkatkan atau turunkan skala dengan arsitektur serverless secara lancar

    Siapkan dan jalankan secara cepat dengan layanan serverless dan mudah digunakan yang dapat diskalakan dengan lancar seiring perubahan volume data Anda. Fokus pada mendapatkan insight terbaru dari data Anda dan merespons masalah berprioritas tinggi, bukan mengelola infrastruktur, penyesuaian performa, atau penyediaan resource.

  • Berintegrasi dengan Google Cloud suite integrasi data

    Hubungkan data di seluruh organisasi Anda dengan rangkaian produk integrasi data Google Cloud . Integrasikan Datastream dengan template tugas Dataflow untuk membaca data dari bucket Cloud Storage dan memuatnya ke berbagai tujuan, seperti BigQuery, Spanner, dan Cloud SQL.

Elemen pengalaman

Ada tiga elemen utama di Datastream:

  • Konfigurasi konektivitas pribadi memungkinkan Datastream berkomunikasi dengan sumber data melalui jaringan pribadi (secara internal dalamGoogle Cloud, atau dengan sumber eksternal yang terhubung melalui VPN atau Interconnect). Komunikasi ini terjadi melalui koneksi peering Virtual Private Cloud (VPC).
  • Profil koneksi mewakili informasi konektivitas ke sumber dan tujuan. Informasi ini akan digunakan oleh aliran data.
  • Aliran data menggunakan informasi dalam profil koneksi untuk mentransfer data CDC dan pengisian ulang dari sumber ke tujuan.

Langkah berikutnya