Halaman ini menyediakan link ke artikel, video, dan podcast publik yang terkait dengan Dataflow.
Pengumuman
Untuk membaca pengumuman dan info terbaru, lihat referensi berikut:
- Berita Dataflow: Google Cloud blog
- Pembaruan Dataflow: Catatan rilis Dataflow
- Info terbaru Apache Beam: Catatan rilis Apache Beam SDK
Ekosistem Dataflow
- Dataflow, tulang punggung analisis data
- Dataflow Under the Hood: the origin story: Part 1, Part 2, Part 3
- Buka dokumen open source Apache Beam untuk mempelajari lebih lanjut cara mengembangkan model terpadu, menentukan pipeline, dan menjalankan pipeline di Dataflow atau salah satu backend terdistribusi yang didukung Apache Beam.
Kisah pelanggan
Artikel publik
- Kumpulan cerita Dataflow - Publikasi Medium
- Dataflow sebagai Pemimpin dalam Streaming Analytics 2021 - Forrester Wave
- Membangun alat yang memberikan masukan real-time tentang audiens live - ITV
- Memantau pipeline Dataflow - Publikasi Medium
- Model Eksekusi untuk Pemrosesan Data Berlatensi Rendah dan Sangat Scalable - Publikasi Medium
- Mempercepat Inferensi Model Machine Learning di Dataflow dengan GPU - Nvidia
- Menjalankan komputasi terhadap set data besar - Pandora
- Mengoptimalkan Tugas Dataflow Terbesar yang Pernah Ada untuk Wrapped 2020 - Spotify
- Processing billions of events in real time using Dataflow - Twitter
- Dataflow di Smart Home Data Pipeline - Nest
- Streaming pesan JSON ke kolom jenis JSON BigQuery - Medium
Studi kasus
- AXA Swiss: Menggunakan Google Cloud solusi analisis untuk meningkatkan proses internal dan mengembangkan layanan
- Bayer Crop: Meningkatkan kualitas kesehatan tanah dan pengelolaan tanaman dengan analisis geospasial di BigQuery dan Dataflow
- Dow Jones: Membangun Grafik Pengetahuan tentang peristiwa penting yang didokumentasikan dalam konten berita selama lebih dari 30 tahun
- HSBC: Memanfaatkan cloud untuk mengurangi eksposur risiko melalui kemampuan insight dan analisis yang cepat
- Nintendo: Menggunakan Dataflow dan Pub/Sub untuk mengumpulkan dan menganalisis log penggunaan game di BigQuery
- Quantiphi: Membangun solusi deteksi penipuan kartu kredit real-time tanpa server
- SoFi Stadium: Membangun aplikasi concierge pribadi yang siap digunakan penggemar untuk menyesuaikan pengalaman hari pertandingan bagi setiap pengguna
- Spotify: Eksperimen dengan stream processing di Dataflow
- Subaru Corporation: Menggunakan Google Cloud AI dan Machine Learning untuk mempercepat pengembangan
- Telus: Mempercepat modernisasi dengan ilmu data
- Tokopedia: Membuat Platform Data Pelanggan di Google Cloud
- Tyson Foods: Merancang ulang Platform Data mereka dengan mengembangkan Ingestion as a Service
- Vodafone: Menggunakan Google Cloud untuk membagikan data ponsel dengan aman
Video
Panduan teknis
Video Intro
Artikel
- Membangun organisasi yang didorong oleh data engineering
- Membuat template dari pipeline Dataflow apa pun
- Template Dataflow untuk Elastic Cloud
- Pipeline Dataflow: men-deploy dan mengelola pipeline data dalam skala besar
- Penskalaan Otomatis Dataflow untuk BigQuery memberikan performa 3x lebih baik
- Mengekspor Google Cloud data ke Elastic Stack dengan template Dataflow
- Memperluas template Dataflow dengan UDF
- Pemrosesan tepat satu kali di Dataflow: Bagian 1, Bagian 2, Bagian 3
- Meningkatkan pemrosesan data dengan GPU Dataflow
- Menangani data duplikat di pipeline streaming menggunakan Dataflow & Pub/Sub
- Mempelajari pola Apache Beam dengan pemrosesan Clickstream data Google Tag Manager
- Pola machine learning dengan Apache Beam dan Dataflow Runner
- Mengalirkan data ke BigQuery menggunakan BigQuery Storage Write API (gRPC)
- Menyederhanakan dan mengotomatiskan pemrosesan data dengan Dataflow Prime
- Tiga cara Dataflow memberikan ROI kepada Pelanggan
- Menggunakan pola referensi deteksi anomali real-time untuk memberantas penipuan
- Menggunakan inferensi TFX dengan Dataflow untuk pola inferensi ML skala besar
- Alasan Anda harus menggunakan template Flex untuk deployment Dataflow
- Menulis pipeline Dataflow dengan mempertimbangkan skalabilitas
- Panduan untuk pola kasus penggunaan Dataflow umum: Bagian 1, Bagian 2
Video Data & Analisis
Pemecahan masalah dan pemantauan
Video
Artikel
Podcast
- Google Cloud Episode Podcast 81 - Dataflow dengan Frances Perry
- Software Engineering Daily Podcast - Dataflow with Eric Anderson
- Software Engineering Radio Podcast Episode 272: Apache Beam