Mengumpulkan log DNS Pasif
Dokumen ini menjelaskan cara menyerap log DNS Pasif ke Google Security Operations menggunakan Google Cloud Storage V2.
DNS pasif adalah sumber data kecerdasan DNS yang menangkap data resolusi DNS historis untuk analisis ancaman dan investigasi domain. Karena data biasanya dikumpulkan dan disimpan sebagai file, Anda harus mengupload file tersebut ke bucket Google Cloud Storage (GCS), lalu mengonfigurasi feed Google SecOps untuk menyerapnya.
Sebelum memulai
Pastikan Anda memiliki prasyarat berikut:
- Instance Google SecOps.
- Project Google Cloud dengan Cloud Storage API yang diaktifkan.
- Izin untuk membuat dan mengelola bucket GCS.
- Izin untuk mengelola kebijakan IAM di bucket GCS.
- Akses ke file data DNS Pasif (misalnya, DNSDB, Farsight, atau penyedia DNS Pasif lainnya).
- Data DNS pasif yang diekspor dalam format yang didukung (misalnya, JSON atau CSV).
Membuat bucket Google Cloud Storage
- Buka Konsol Google Cloud.
- Pilih project Anda atau buat project baru.
- Di menu navigasi, buka Cloud Storage > Buckets.
- Klik Create bucket.
Berikan detail konfigurasi berikut:
Setelan Nilai Memberi nama bucket Anda Masukkan nama yang unik secara global (misalnya, passive-dns-logs)Location type Pilih sesuai kebutuhan Anda (Region, Dual-region, Multi-region) Location Pilih lokasi yang paling dekat dengan instance Google SecOps Anda (misalnya, us-central1)Storage class Standard (direkomendasikan untuk log yang sering diakses) Kontrol akses Seragam (direkomendasikan) Alat perlindungan Opsional: Mengaktifkan pembuatan versi objek atau kebijakan retensi Klik Create.
Mengonfigurasi ekspor otomatis data DNS Pasif ke GCS
Data DNS pasif biasanya tersedia sebagai file yang diekspor dari penyedia kecerdasan DNS (misalnya, Farsight DNSDB, DomainTools, atau Cisco Umbrella Investigate). Agar data di GCS tetap aktual, konfigurasikan pipeline ekspor otomatis menggunakan salah satu pendekatan berikut.
Opsi 1: Cloud Scheduler dengan Cloud Build (direkomendasikan)
Gunakan Cloud Build yang dipicu oleh Cloud Scheduler untuk menjalankan tugas dalam container yang mengambil data DNS Pasif dari penyedia Anda dan menulisnya ke GCS.
Buat akun layanan untuk tugas ekspor:
- Di Konsol GCP, buka IAM & Admin > Service Accounts.
- Klik Create Service Account.
- Berikan detail konfigurasi berikut:
- Service account name: Masukkan
passive-dns-export-sa - Service account description: Masukkan
Service account for automated Passive DNS data export to GCS
- Service account name: Masukkan
- Klik Create and Continue.
- Tambahkan peran berikut:
- Storage Object Admin (untuk menulis file ke GCS)
- Cloud Build Editor (untuk menjalankan tugas Cloud Build)
- Klik Done.
Buat file konfigurasi Cloud Build (
cloudbuild.yaml):steps: - name: 'gcr.io/cloud-builders/gcloud' entrypoint: 'bash' args: - '-c' - | apt-get update && apt-get install -y curl jq # Fetch Passive DNS data from your provider # Replace with the actual API call for your provider # Example for Farsight DNSDB: TIMESTAMP=$(date -u +%Y%m%d_%H%M%S) curl -s -H "X-API-Key: $${PDNS_API_KEY}" \ "https://api.dnsdb.info/dnsdb/v2/lookup/rrset/name/*.example.com" \ -o /workspace/passive_dns_$${TIMESTAMP}.json # Upload to GCS gcloud storage cp /workspace/passive_dns_$${TIMESTAMP}.json \ gs://${_BUCKET_NAME}/passive-dns/ substitutions: _BUCKET_NAME: 'passive-dns-logs'Simpan kunci API sebagai secret Secret Manager:
- Di Konsol GCP, buka Security > Secret Manager.
- Klik Buat Secret.
- Masukkan
pdns-api-keysebagai nama secret. - Masukkan kunci API penyedia Passive DNS Anda sebagai nilai rahasia.
- Klik Create.
Buat tugas Cloud Scheduler untuk memicu build:
- Di Konsol GCP, buka Cloud Scheduler.
- Klik Create Job.
Berikan detail konfigurasi berikut:
Setelan Nilai Nama passive-dns-export-dailyRegion Pilih region yang sama dengan bucket GCS Anda Frekuensi 0 3 * * *(setiap hari pukul 03.00 UTC)Zona Waktu UTC (direkomendasikan) Jenis target HTTP URL https://cloudbuild.googleapis.com/v1/projects/YOUR_PROJECT_ID/buildsMetode HTTP POST Header autentikasi Tambahkan token OAuth Service account passive-dns-export-sa@YOUR_PROJECT_ID.iam.gserviceaccount.comKlik Create.
Opsi 2: Storage Transfer Service (untuk penyimpanan data lokal)
Jika data DNS Pasif disimpan di sistem file lokal, gunakan Storage Transfer Service dengan Agen Transfer.
- Di Konsol GCP, buka Storage Transfer Service.
- Klik Buat tugas transfer.
- Pilih POSIX filesystem sebagai sumber.
- Ikuti petunjuk untuk menginstal Storage Transfer Agent di komputer yang memiliki akses ke file data DNS Pasif.
Konfigurasikan tugas transfer:
Setelan Nilai Direktori sumber Jalur ke direktori yang berisi file data DNS Pasif Bucket tujuan passive-dns-logsJalur tujuan passive-dns/Jadwal Menetapkan jadwal berulang (misalnya, harian) Klik Create.
Mengambil akun layanan Google SecOps
- Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
- Klik Tambahkan Feed Berita Baru.
- Klik Konfigurasi satu feed.
- Di kolom Nama feed, masukkan nama untuk feed (misalnya,
Passive DNS Logs). - Pilih Google Cloud Storage V2 sebagai Source type.
- Pilih Passive DNS sebagai Log type.
- Klik Get Service Account.
Email akun layanan yang unik akan ditampilkan, misalnya:
chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.comSalin alamat email ini untuk digunakan di langkah berikutnya.
Memberikan izin IAM ke akun layanan Google SecOps
Akun layanan Google SecOps memerlukan peran Storage Object Viewer di bucket GCS Anda.
- Buka Cloud Storage > Buckets.
- Klik nama bucket Anda (misalnya,
passive-dns-logs). - Buka tab Izin.
- Klik Grant access.
- Berikan detail konfigurasi berikut:
- Add principals: Tempel email akun layanan Google SecOps (misalnya,
chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.com). - Assign roles: Pilih Storage Object Viewer.
- Add principals: Tempel email akun layanan Google SecOps (misalnya,
Klik Simpan.
Mengonfigurasi feed Google SecOps
- Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
- Klik Tambahkan Feed Berita Baru.
- Klik Konfigurasi satu feed.
- Di kolom Nama feed, masukkan nama untuk feed (misalnya,
Passive DNS Logs). - Pilih Google Cloud Storage V2 sebagai Source type.
- Pilih Passive DNS sebagai Log type.
- Klik Berikutnya.
Tentukan nilai untuk parameter input berikut:
Storage bucket URL: Masukkan URI bucket GCS:
gs://passive-dns-logs/passive-dns/- Ganti
passive-dns-logsdengan nama bucket GCS Anda. - Ganti
passive-dnsdengan jalur awalan yang Anda konfigurasi.
- Ganti
Opsi penghapusan sumber: Pilih opsi penghapusan sesuai preferensi Anda:
- Never: Tidak pernah menghapus file apa pun setelah transfer (direkomendasikan untuk pengujian).
- Delete transferred files: Menghapus file setelah transfer berhasil.
Delete transferred files and empty directories: Menghapus file dan direktori kosong setelah transfer berhasil.
Usia File Maksimum: Sertakan file yang diubah dalam jumlah hari terakhir (defaultnya adalah 180 hari).
Namespace aset: Namespace aset.
Label penyerapan: Label yang akan diterapkan ke peristiwa dari feed ini.
Klik Berikutnya.
Tinjau konfigurasi feed berita baru Anda di layar Finalize, lalu klik Submit.
Tabel pemetaan UDM
| Kolom Log | Pemetaan UDM | Logika |
|---|---|---|
| hostname | intermediary.hostname | Nilai disalin langsung |
| timestamp_s | metadata.event_timestamp | Diuraikan sebagai stempel waktu UNIX |
| metadata.event_type | Tetapkan ke "NETWORK_DNS" | |
| network.application_protocol | Tetapkan ke "DNS" | |
| jawab | network.dns.answers.data | Nilai dari jawaban setelah menghapus titik di akhir |
| ttl | network.dns.answers.ttl | Dikonversi ke bilangan bulat |
| class | network.dns.questions.class | Dipetakan ke nilai numerik (1 untuk IN, 3 untuk CH, 4 untuk HS) |
| query | network.dns.questions.name | Nilai dari kueri setelah menghapus titik di akhir |
| jenis | network.dns.questions.type | Dipetakan dari jenis (huruf besar) ke nilai numerik menggunakan pemetaan jenis DNS |
| klien | principal.ip | Nilai disalin langsung |
| server | target.ip | Nilai disalin langsung |
| metadata.product_name | Setel ke "Passive DNS" |
Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.