Halaman ini menyediakan link ke artikel, video, dan podcast publik yang terkait dengan Dataflow.
Pengumuman
Untuk membaca pengumuman dan pembaruan, lihat referensi berikut:
- Berita Dataflow: Google Cloud blog
- Pembaruan Dataflow: Catatan rilis Dataflow
- Pembaruan Apache Beam: Catatan rilis Apache Beam SDK
Ekosistem Dataflow
- Dataflow, tulang punggung analisis data
- Dataflow Under the Hood: the origin story: Part 1, Part 2, Part 3
- Buka dokumen open source Apache Beam untuk mempelajari lebih lanjut cara mengembangkan model terpadu, menentukan pipeline, danmenjalankan pipeline di Dataflow atau salah satu backend terdistribusi yang didukung Apache Beam.
Kisah pelanggan
Artikel publik
- Kumpulan kisah Dataflow - Publikasi Medium
- Dataflow a Leader in 2021 Streaming Analytics - Forrester Wave
- Membangun alat yang memberikan masukan real-time tentang audiens live - ITV
- Memantau pipeline Dataflow - Publikasi Medium
- Execution Model for Highly Scalable, Low-Latency Data Processing - Publikasi Medium
- Mempercepat Inferensi Model Machine Learning di Dataflow dengan GPU - Nvidia
- Menjalankan komputasi terhadap set data besar - Pandora
- Mengoptimalkan Tugas Dataflow Terbesar untuk Wrapped 2020 - Spotify
- Memproses miliaran peristiwa secara real time menggunakan Dataflow - Twitter
- Dataflow In the Smart Home Data Pipeline - Nest
- Streaming pesan JSON ke kolom jenis JSON BigQuery - Medium
Studi kasus
- AXA Switzerland: Menggunakan Google Cloud solusi analisis untuk meningkatkan proses internal dan mengembangkan layanan
- Bayer Crop: Meningkatkan kesehatan tanah dan pengelolaan tanaman dengan analisis geospasial di BigQuery dan Dataflow
- Dow Jones: Membangun Knowledge Graph peristiwa utama yang didokumentasikan dalam lebih dari 30 tahun konten berita
- HSBC: Memanfaatkan cloud untuk mengurangi eksposur risiko melalui kemampuan insight dan analisis yang cepat
- Nintendo: Menggunakan Dataflow dan Pub/Sub untuk mengumpulkan dan menganalisis log penggunaan game di BigQuery
- Quantiphi: Membangun solusi deteksi penipuan kartu kredit real-time tanpa server
- SoFi Stadium: Membangun aplikasi concierge pribadi yang siap digunakan penggemar untuk menyesuaikan pengalaman hari pertandingan bagi setiap pengguna
- Spotify: Bereksperimen dengan pemrosesan streaming di Dataflow
- Subaru Corporation: Menggunakan Google Cloud AI dan Machine learning untuk mempercepat pengembangan
- Telus: Mempercepat modernisasi dengan ilmu data
- Tokopedia: Membuat Platform Data Pelanggan di Google Cloud
- Tyson Foods: Merancang ulang Platform Data mereka dengan mengembangkan Ingestion as a Service
- Vodafone: Menggunakan Google Cloud untuk berbagi data ponsel dengan aman
Video
Panduan teknis
Video Pengantar
Artikel
- Membangun organisasi yang didorong oleh data engineering
- Membuat template dari pipeline Dataflow apa pun
- Template Dataflow untuk Elastic Cloud
- Pipeline Dataflow: men-deploy dan mengelola pipeline data dalam skala besar
- Dataflow Auto Sharding untuk BigQuery memberikan performa 3x
- Mengekspor Google Cloud data ke Elastic Stack dengan template Dataflow
- Memperluas template Dataflow dengan UDF
- Pemrosesan tepat satu kali di Dataflow: Bagian 1, Bagian 2, Bagian 3
- Meningkatkan pemrosesan data dengan Dataflow GPU
- Menangani data duplikat di pipeline streaming menggunakan Dataflow &Pub/Sub
- Mempelajari pola Apache Beam dengan pemrosesan Clickstream data Google Tag Manager
- Pola machine learning dengan Apache Beam dan Dataflow Runner
- Streaming data ke BigQuery menggunakan BigQuery Storage Write API
- Menyederhanakan dan mengotomatiskan pemrosesan data dengan Dataflow Prime
- Tiga cara Dataflow memberikan ROI kepada Pelanggan
- Menggunakan pola referensi deteksi anomali real-time untuk memerangi penipuan
- Menggunakan inferensi TFX dengan Dataflow untuk pola inferensi ML skala besar
- Alasan Anda harus menggunakan template Flex untuk deployment Dataflow
- Menulis pipeline Dataflow dengan mempertimbangkan skalabilitas
- Panduan untuk pola kasus penggunaan Dataflow umum: Bagian 1, Bagian 2
Video Data &Analisis
Pemecahan masalah dan pemantauan
Video
Artikel
Podcast
- Google Cloud Episode Podcast 81 - Dataflow dengan Frances Perry
- Software Engineering Daily Podcast - Dataflow dengan Eric Anderson
- Software Engineering Radio Podcast Episode 272: Apache Beam