Raccogli i log DNS passivi
Questo documento spiega come importare i log DNS passivi in Google Security Operations utilizzando Google Cloud Storage V2.
Il DNS passivo è un'origine dati di intelligence DNS che acquisisce i record di risoluzione DNS storici per l'analisi delle minacce e l'indagine sui domini. Poiché i dati vengono in genere raccolti e archiviati come file, devi caricarli in un bucket Google Cloud Storage (GCS) e poi configurare un feed Google SecOps per l'importazione.
Prima di iniziare
Assicurati di soddisfare i seguenti prerequisiti:
- Un'istanza Google SecOps.
- Un progetto Google Cloud con l'API Cloud Storage abilitata.
- Autorizzazioni per creare e gestire bucket GCS.
- Autorizzazioni per gestire le policy IAM sui bucket GCS.
- Accesso ai file di dati DNS passivi (ad esempio DNSDB, Farsight o un altro provider DNS passivo).
- Dati DNS passivi esportati in un formato supportato (ad esempio JSON o CSV).
Crea un bucket Google Cloud Storage
- Vai alla console Google Cloud.
- Seleziona il tuo progetto o creane uno nuovo.
- Nel menu di navigazione, vai a Cloud Storage > Bucket.
- Fai clic su Crea bucket.
Fornisci i seguenti dettagli di configurazione:
Impostazione Valore Assegna un nome al bucket Inserisci un nome globalmente univoco (ad esempio passive-dns-logs)Tipo di località Scegli in base alle tue esigenze (Regione, a due regioni, multiregionale) Località Seleziona la località più vicina alla tua istanza Google SecOps (ad esempio us-central1)Classe di archiviazione Standard (consigliato per i log ad accesso frequente) Controllo degli accessi Uniforme (consigliato) Strumenti di protezione (Facoltativo) Abilita il controllo delle versioni degli oggetti o la policy di conservazione Fai clic su Crea.
Configura l'esportazione automatica dei dati DNS passivi in GCS
I dati DNS passivi sono in genere disponibili come file esportati da un provider di intelligence DNS (ad esempio Farsight DNSDB, DomainTools o Cisco Umbrella Investigate). Per mantenere aggiornati i dati in GCS, configura una pipeline di esportazione automatizzata utilizzando uno dei seguenti approcci.
Opzione 1: Cloud Scheduler con Cloud Build (consigliata)
Utilizza Cloud Build attivato da un trigger di Cloud Build pianificato da Cloud Scheduler per eseguire un job containerizzato che recupera i dati DNS passivi dal tuo provider e li scrive in GCS.
Crea un account di servizio per il job di esportazione:
- Nella console Google Cloud, vai a IAM e amministrazione > Account di servizio.
- Fai clic su Crea account di servizio.
- Fornisci i seguenti dettagli di configurazione:
- Nome del service account: inserisci
passive-dns-export-sa - Descrizione account di servizio: inserisci
Service account for automated Passive DNS data export to GCS
- Nome del service account: inserisci
- Fai clic su Crea e continua.
- Aggiungi i seguenti ruoli:
- Storage Object Admin (per scrivere file in GCS)
- Cloud Build Editor (per eseguire i job Cloud Build)
- Fai clic su Fine.
Crea un file di configurazione di Cloud Build (
cloudbuild.yaml):steps: - name: 'gcr.io/cloud-builders/gcloud' entrypoint: 'bash' args: - '-c' - | apt-get update && apt-get install -y curl jq # Fetch Passive DNS data from your provider # Replace with the actual API call for your provider # Example for Farsight DNSDB: TIMESTAMP=$(date -u +%Y%m%d_%H%M%S) curl -s -H "X-API-Key: $${PDNS_API_KEY}" \ "https://api.dnsdb.info/dnsdb/v2/lookup/rrset/name/*.example.com" \ -o /workspace/passive_dns_$${TIMESTAMP}.json # Upload to GCS gcloud storage cp /workspace/passive_dns_$${TIMESTAMP}.json \ gs://${_BUCKET_NAME}/passive-dns/ substitutions: _BUCKET_NAME: 'passive-dns-logs'Archivia la chiave API come secret di Secret Manager:
- Nella console Google Cloud, vai a Sicurezza > Secret Manager.
- Fai clic su Crea secret.
- Inserisci
pdns-api-keycome nome del secret. - Inserisci la chiave API del tuo provider DNS passivo come valore del secret.
- Fai clic su Crea.
Crea un job Cloud Scheduler per attivare la build:
- Nella console Google Cloud, vai a Cloud Scheduler.
- Fai clic su Crea job.
Fornisci i seguenti dettagli di configurazione:
Impostazione Valore Nome passive-dns-export-dailyRegione Seleziona la stessa regione del bucket GCS Frequenza 0 3 * * *(ogni giorno alle 03:00 UTC)Fuso orario UTC (consigliato) Tipo di target HTTP URL https://cloudbuild.googleapis.com/v1/projects/YOUR_PROJECT_ID/buildsMetodo HTTP POST Intestazione Auth Aggiungi un token OAuth Service account passive-dns-export-sa@YOUR_PROJECT_ID.iam.gserviceaccount.comFai clic su Crea.
Opzione 2: Storage Transfer Service (per datastore on-premise)
Se i dati DNS passivi sono archiviati in un file system on-premise, utilizza Storage Transfer Service con un agente di trasferimento.
- Nella console GCP, vai a Storage Transfer Service.
- Fai clic su Crea job di trasferimento.
- Seleziona File system POSIX come origine.
- Segui le istruzioni per installare l'agente di Storage Transfer su una macchina con accesso ai file di dati DNS passivi.
Configura il job di trasferimento:
Impostazione Valore Directory di origine Percorso della directory contenente i file di dati DNS passivi Bucket di destinazione passive-dns-logsPercorso di destinazione passive-dns/Programmazione Imposta una pianificazione ricorrente (ad esempio, giornaliera) Fai clic su Crea.
Recupera il account di servizio Google SecOps
- Vai a Impostazioni > Gestione dei dati > Feed. Se utilizzi una piattaforma solo SIEM, vai a Impostazioni > Feed.
- Fai clic su Aggiungi nuovo feed.
- Fai clic su Configura un singolo feed.
- Nel campo Nome feed, inserisci un nome per il feed (ad es.
Passive DNS Logs). - Seleziona Google Cloud Storage V2 come Tipo di origine.
- Seleziona Passive DNS (DNS passivo) come Log type (Tipo di log).
- Fai clic su Ottieni service account.
Verrà visualizzato un indirizzo email univoco del account di servizio, ad esempio:
chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.comCopia questo indirizzo email per utilizzarlo nel passaggio successivo.
Concedi le autorizzazioni IAM al account di servizio Google SecOps
Il account di servizio Google SecOps deve avere il ruolo Storage Object Viewer nel bucket GCS.
- Vai a Cloud Storage > Bucket.
- Fai clic sul nome del bucket (ad esempio
passive-dns-logs). - Vai alla scheda Autorizzazioni.
- Fai clic su Concedi l'accesso.
- Fornisci i seguenti dettagli di configurazione:
- Aggiungi entità: incolla l'indirizzo email del account di servizio Google SecOps (ad esempio,
chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.com). - Assegna ruoli: seleziona Visualizzatore oggetti Storage.
- Aggiungi entità: incolla l'indirizzo email del account di servizio Google SecOps (ad esempio,
Fai clic su Salva.
Configura il feed di Google SecOps
- Vai a Impostazioni > Gestione dei dati > Feed. Se utilizzi una piattaforma solo SIEM, vai a Impostazioni > Feed.
- Fai clic su Aggiungi nuovo feed.
- Fai clic su Configura un singolo feed.
- Nel campo Nome feed, inserisci un nome per il feed (ad es.
Passive DNS Logs). - Seleziona Google Cloud Storage V2 come Tipo di origine.
- Seleziona Passive DNS (DNS passivo) come Log type (Tipo di log).
- Fai clic su Avanti.
Specifica i valori per i seguenti parametri di input:
URL bucket di archiviazione: inserisci l'URI del bucket GCS:
gs://passive-dns-logs/passive-dns/- Sostituisci
passive-dns-logscon il nome del tuo bucket GCS. - Sostituisci
passive-dnscon il percorso del prefisso configurato.
- Sostituisci
Opzione di eliminazione dell'origine: seleziona l'opzione di eliminazione in base alle tue preferenze:
- Mai: non elimina mai i file dopo i trasferimenti (opzione consigliata per i test).
- Elimina i file trasferiti: elimina i file dopo il trasferimento riuscito.
Elimina i file trasferiti e le directory vuote: elimina i file e le directory vuote dopo il trasferimento riuscito.
Età massima del file: includi i file modificati negli ultimi giorni (il valore predefinito è 180 giorni).
Spazio dei nomi dell'asset: lo spazio dei nomi dell'asset.
Etichette di importazione: l'etichetta da applicare agli eventi di questo feed.
Fai clic su Avanti.
Controlla la nuova configurazione del feed di notizie nella schermata Finalizza, quindi fai clic su Invia.
Tabella di mappatura UDM
| Campo log | Mappatura UDM | Logica |
|---|---|---|
| nome host | intermediary.hostname | Valore copiato direttamente |
| timestamp_s | metadata.event_timestamp | Analizzato come timestamp UNIX |
| metadata.event_type | Imposta su "NETWORK_DNS" | |
| network.application_protocol | Imposta su "DNS" | |
| rispondi | network.dns.answers.data | Valore ottenuto dalla risposta dopo aver rimosso il punto finale |
| ttl | network.dns.answers.ttl | Convertito in numero intero |
| classe | network.dns.questions.class | Mappato al valore numerico (1 per IN, 3 per CH, 4 per HS) |
| query | network.dns.questions.name | Valore della query dopo la rimozione del punto finale |
| tipo | network.dns.questions.type | Mappato dal tipo (in lettere maiuscole) al valore numerico utilizzando la mappatura dei tipi DNS |
| client | principal.ip | Valore copiato direttamente |
| server | target.ip | Valore copiato direttamente |
| metadata.product_name | Impostato su "DNS passivo" |
Hai bisogno di ulteriore assistenza? Ricevi risposte dai membri della community e dai professionisti di Google SecOps.