Mengumpulkan log DNS Pasif

Didukung di:

Dokumen ini menjelaskan cara menyerap log DNS Pasif ke Google Security Operations menggunakan Google Cloud Storage V2.

DNS pasif adalah sumber data kecerdasan DNS yang menangkap data resolusi DNS historis untuk analisis ancaman dan investigasi domain. Karena data biasanya dikumpulkan dan disimpan sebagai file, Anda harus mengupload file tersebut ke bucket Google Cloud Storage (GCS), lalu mengonfigurasi feed Google SecOps untuk menyerapnya.

Sebelum memulai

Pastikan Anda memiliki prasyarat berikut:

  • Instance Google SecOps.
  • Project Google Cloud dengan Cloud Storage API yang diaktifkan.
  • Izin untuk membuat dan mengelola bucket GCS.
  • Izin untuk mengelola kebijakan IAM di bucket GCS.
  • Akses ke file data DNS Pasif (misalnya, DNSDB, Farsight, atau penyedia DNS Pasif lainnya).
  • Data DNS pasif yang diekspor dalam format yang didukung (misalnya, JSON atau CSV).

Membuat bucket Google Cloud Storage

  1. Buka Konsol Google Cloud.
  2. Pilih project Anda atau buat project baru.
  3. Di menu navigasi, buka Cloud Storage > Buckets.
  4. Klik Create bucket.
  5. Berikan detail konfigurasi berikut:

    Setelan Nilai
    Memberi nama bucket Anda Masukkan nama yang unik secara global (misalnya, passive-dns-logs)
    Location type Pilih sesuai kebutuhan Anda (Region, Dual-region, Multi-region)
    Location Pilih lokasi yang paling dekat dengan instance Google SecOps Anda (misalnya, us-central1)
    Storage class Standard (direkomendasikan untuk log yang sering diakses)
    Kontrol akses Seragam (direkomendasikan)
    Alat perlindungan Opsional: Mengaktifkan pembuatan versi objek atau kebijakan retensi
  6. Klik Create.

Mengonfigurasi ekspor otomatis data DNS Pasif ke GCS

Data DNS pasif biasanya tersedia sebagai file yang diekspor dari penyedia kecerdasan DNS (misalnya, Farsight DNSDB, DomainTools, atau Cisco Umbrella Investigate). Agar data di GCS tetap aktual, konfigurasikan pipeline ekspor otomatis menggunakan salah satu pendekatan berikut.

Gunakan Cloud Build yang dipicu oleh Cloud Scheduler untuk menjalankan tugas dalam container yang mengambil data DNS Pasif dari penyedia Anda dan menulisnya ke GCS.

  1. Buat akun layanan untuk tugas ekspor:

    1. Di Konsol GCP, buka IAM & Admin > Service Accounts.
    2. Klik Create Service Account.
    3. Berikan detail konfigurasi berikut:
      • Service account name: Masukkan passive-dns-export-sa
      • Service account description: Masukkan Service account for automated Passive DNS data export to GCS
    4. Klik Create and Continue.
    5. Tambahkan peran berikut:
      • Storage Object Admin (untuk menulis file ke GCS)
      • Cloud Build Editor (untuk menjalankan tugas Cloud Build)
    6. Klik Done.
  2. Buat file konfigurasi Cloud Build (cloudbuild.yaml):

    steps:
      - name: 'gcr.io/cloud-builders/gcloud'
        entrypoint: 'bash'
        args:
          - '-c'
          - |
            apt-get update && apt-get install -y curl jq
            # Fetch Passive DNS data from your provider
            # Replace with the actual API call for your provider
            # Example for Farsight DNSDB:
            TIMESTAMP=$(date -u +%Y%m%d_%H%M%S)
            curl -s -H "X-API-Key: $${PDNS_API_KEY}" \
              "https://api.dnsdb.info/dnsdb/v2/lookup/rrset/name/*.example.com" \
              -o /workspace/passive_dns_$${TIMESTAMP}.json
            # Upload to GCS
            gcloud storage cp /workspace/passive_dns_$${TIMESTAMP}.json \
              gs://${_BUCKET_NAME}/passive-dns/
    substitutions:
      _BUCKET_NAME: 'passive-dns-logs'
    
  3. Simpan kunci API sebagai secret Secret Manager:

    1. Di Konsol GCP, buka Security > Secret Manager.
    2. Klik Buat Secret.
    3. Masukkan pdns-api-key sebagai nama secret.
    4. Masukkan kunci API penyedia Passive DNS Anda sebagai nilai rahasia.
    5. Klik Create.
  4. Buat tugas Cloud Scheduler untuk memicu build:

    1. Di Konsol GCP, buka Cloud Scheduler.
    2. Klik Create Job.
    3. Berikan detail konfigurasi berikut:

      Setelan Nilai
      Nama passive-dns-export-daily
      Region Pilih region yang sama dengan bucket GCS Anda
      Frekuensi 0 3 * * * (setiap hari pukul 03.00 UTC)
      Zona Waktu UTC (direkomendasikan)
      Jenis target HTTP
      URL https://cloudbuild.googleapis.com/v1/projects/YOUR_PROJECT_ID/builds
      Metode HTTP POST
      Header autentikasi Tambahkan token OAuth
      Service account passive-dns-export-sa@YOUR_PROJECT_ID.iam.gserviceaccount.com
    4. Klik Create.

Opsi 2: Storage Transfer Service (untuk penyimpanan data lokal)

Jika data DNS Pasif disimpan di sistem file lokal, gunakan Storage Transfer Service dengan Agen Transfer.

  1. Di Konsol GCP, buka Storage Transfer Service.
  2. Klik Buat tugas transfer.
  3. Pilih POSIX filesystem sebagai sumber.
  4. Ikuti petunjuk untuk menginstal Storage Transfer Agent di komputer yang memiliki akses ke file data DNS Pasif.
  5. Konfigurasikan tugas transfer:

    Setelan Nilai
    Direktori sumber Jalur ke direktori yang berisi file data DNS Pasif
    Bucket tujuan passive-dns-logs
    Jalur tujuan passive-dns/
    Jadwal Menetapkan jadwal berulang (misalnya, harian)
  6. Klik Create.

Mengambil akun layanan Google SecOps

  1. Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
  2. Klik Tambahkan Feed Berita Baru.
  3. Klik Konfigurasi satu feed.
  4. Di kolom Nama feed, masukkan nama untuk feed (misalnya, Passive DNS Logs).
  5. Pilih Google Cloud Storage V2 sebagai Source type.
  6. Pilih Passive DNS sebagai Log type.
  7. Klik Get Service Account.
  8. Email akun layanan yang unik akan ditampilkan, misalnya:

    chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.com
    
  9. Salin alamat email ini untuk digunakan di langkah berikutnya.

Memberikan izin IAM ke akun layanan Google SecOps

Akun layanan Google SecOps memerlukan peran Storage Object Viewer di bucket GCS Anda.

  1. Buka Cloud Storage > Buckets.
  2. Klik nama bucket Anda (misalnya, passive-dns-logs).
  3. Buka tab Izin.
  4. Klik Grant access.
  5. Berikan detail konfigurasi berikut:
    • Add principals: Tempel email akun layanan Google SecOps (misalnya, chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.com).
    • Assign roles: Pilih Storage Object Viewer.
  6. Klik Simpan.

Mengonfigurasi feed Google SecOps

  1. Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
  2. Klik Tambahkan Feed Berita Baru.
  3. Klik Konfigurasi satu feed.
  4. Di kolom Nama feed, masukkan nama untuk feed (misalnya, Passive DNS Logs).
  5. Pilih Google Cloud Storage V2 sebagai Source type.
  6. Pilih Passive DNS sebagai Log type.
  7. Klik Berikutnya.
  8. Tentukan nilai untuk parameter input berikut:

    • Storage bucket URL: Masukkan URI bucket GCS:

      gs://passive-dns-logs/passive-dns/
      
      • Ganti passive-dns-logs dengan nama bucket GCS Anda.
      • Ganti passive-dns dengan jalur awalan yang Anda konfigurasi.
    • Opsi penghapusan sumber: Pilih opsi penghapusan sesuai preferensi Anda:

      • Never: Tidak pernah menghapus file apa pun setelah transfer (direkomendasikan untuk pengujian).
      • Delete transferred files: Menghapus file setelah transfer berhasil.
      • Delete transferred files and empty directories: Menghapus file dan direktori kosong setelah transfer berhasil.

    • Usia File Maksimum: Sertakan file yang diubah dalam jumlah hari terakhir (defaultnya adalah 180 hari).

    • Namespace aset: Namespace aset.

    • Label penyerapan: Label yang akan diterapkan ke peristiwa dari feed ini.

  9. Klik Berikutnya.

  10. Tinjau konfigurasi feed berita baru Anda di layar Finalize, lalu klik Submit.

Tabel pemetaan UDM

Kolom Log Pemetaan UDM Logika
hostname intermediary.hostname Nilai disalin langsung
timestamp_s metadata.event_timestamp Diuraikan sebagai stempel waktu UNIX
metadata.event_type Tetapkan ke "NETWORK_DNS"
network.application_protocol Tetapkan ke "DNS"
jawab network.dns.answers.data Nilai dari jawaban setelah menghapus titik di akhir
ttl network.dns.answers.ttl Dikonversi ke bilangan bulat
class network.dns.questions.class Dipetakan ke nilai numerik (1 untuk IN, 3 untuk CH, 4 untuk HS)
query network.dns.questions.name Nilai dari kueri setelah menghapus titik di akhir
jenis network.dns.questions.type Dipetakan dari jenis (huruf besar) ke nilai numerik menggunakan pemetaan jenis DNS
klien principal.ip Nilai disalin langsung
server target.ip Nilai disalin langsung
metadata.product_name Setel ke "Passive DNS"

Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.