Raccogli i log di Apache Cassandra

Versione parser: 4.0

Supportata in:

Questo documento spiega come importare i log di Apache Cassandra in Google Security Operations utilizzando l'agente Bindplane.

Apache Cassandra genera log per le operazioni del database, gli eventi del cluster e l'attività di sistema. Il parser estrae i campi utilizzando pattern grok e filtri JSON, quindi li mappa al modello UDM (Unified Data Model).

Prima di iniziare

Assicurati di soddisfare i seguenti prerequisiti:

  • Un'istanza Google SecOps
  • Windows Server 2016 o versioni successive oppure host Linux con systemd
  • Connettività di rete tra l'agente Bindplane e l'host Apache Cassandra
  • Se l'agente viene eseguito dietro un proxy, assicurati che le porte del firewall siano aperte in base ai requisiti dell'agente Bindplane.
  • Accesso amministrativo (SSH) all'host Apache Cassandra

Ottieni le credenziali di Google SecOps per l'agente Bindplane

Per autenticare l'agente Bindplane in Google SecOps, scegli uno dei seguenti metodi:

  • Nuove implementazioni: utilizza l'API Chronicle (opzione 1).
  • Deployment legacy: continua a utilizzare il file di autenticazione dell'acquisizione (opzione 2) fino al ritiro dell'API Ingestion il 20 luglio 2027.
  1. Accedi alla consoleGoogle Cloud e seleziona il progetto Google Cloud collegato alla tua istanza Google SecOps.
  2. Vai a IAM e amministrazione > Service account.
  3. Fai clic su Crea service account.
  4. Fornisci i seguenti dettagli di configurazione:
    • Nome service account: inserisci un nome per l'account (ad esempio bindplane-ingest).
    • Descrizione del service account: inserisci una descrizione (ad esempio, Bindplane agent log ingestion).
  5. Fai clic su Crea e continua.
  6. Nella sezione Concedi a questo account di servizio l'accesso al progetto, fai clic su Seleziona un ruolo e seleziona Editor Chronicle.
  7. Fai clic su Continua e poi su Fine.
  8. Fai clic sul account di servizio che hai creato, quindi vai alla scheda Chiavi.
  9. Fai clic su Aggiungi chiave > Crea nuova chiave.
  10. Seleziona JSON e fai clic su Crea. Il file della chiave viene scaricato sul tuo computer.
  11. Salva il file della chiave come ingestion-auth.json nella directory del raccoglitore Bindplane (/opt/observiq-otel-collector/ingestion-auth.json su Linux o C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json su Windows) o aggiorna creds_file_path in config.yaml in modo che corrisponda al percorso in cui lo salvi.
  12. Vai a IAM e amministrazione > Impostazioni e copia il Numero progetto. Ti servirà per la configurazione dell'esportatore.

Opzione 2: scarica il file di autenticazione dell'acquisizione (legacy)

  1. Accedi alla console Google SecOps.
  2. Vai a Impostazioni SIEM > Agenti di raccolta.
  3. Scarica il file di autenticazione dell'acquisizione.
  4. Salva il file in modo sicuro sul sistema in cui verrà installato l'agente Bindplane.

Ottieni l'ID cliente Google SecOps

  1. Accedi alla console Google SecOps.
  2. Vai a Impostazioni SIEM > Profilo.

  3. Copia e salva l'ID cliente dalla sezione Dettagli dell'organizzazione.

Installa l'agente Bindplane

Installa l'agente Bindplane sul tuo sistema operativo Windows o Linux seguendo le istruzioni riportate di seguito.

Installazione di finestre

  1. Apri Prompt dei comandi o PowerShell come amministratore.

  2. Esegui questo comando:

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet

  3. Attendi il completamento dell'installazione.

  4. Verifica l'installazione eseguendo:

    sc query observiq-otel-collector

    Il servizio dovrebbe essere visualizzato come RUNNING.

Installazione di Linux

  1. Apri un terminale con privilegi root o sudo.

  2. Esegui questo comando:

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh

  3. Attendi il completamento dell'installazione.

  4. Verifica l'installazione eseguendo:

    sudo systemctl status observiq-otel-collector

    Il servizio dovrebbe essere visualizzato come attivo (in esecuzione).

Risorse aggiuntive per l'installazione

Per ulteriori opzioni di installazione e risoluzione dei problemi, consulta la guida all'installazione dell'agente Bindplane.

Configura l'agente Bindplane per importare il syslog e inviarlo a Google SecOps

Individua il file di configurazione

  • Linux:

    sudo nano /opt/observiq-otel-collector/config.yaml

  • Windows:

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"

Modifica il file di configurazione

  • Sostituisci l'intero contenuto di config.yaml con la seguente configurazione:

    receivers:
  udplog:
    listen_address: "0.0.0.0:514"

exporters:
  chronicle/cassandra:
    protocol: https
    # Region of your instance, for example us, europe, asia-southeast1
    location: <LOCATION>
    # Project number of the Google Cloud project linked to the instance
    project: '<PROJECT_NUMBER>'
    compression: gzip
    creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
    customer_id: '<customer_id>'
    endpoint: chronicle.googleapis.com
    log_type: CASSANDRA
    raw_log_field: body

service:
  pipelines:
    logs/cassandra_to_chronicle:
      receivers:
        - udplog
      exporters:
        - chronicle/cassandra

Parametri di configurazione

Sostituisci i seguenti segnaposto:

  • Configurazione del destinatario:

    • listen_address: Indirizzo IP e porta da ascoltare:
      • 0.0.0.0 per ascoltare su tutte le interfacce (consigliato)
      • La porta 514 è la porta syslog standard (richiede l'accesso root su Linux; utilizza 1514 per l'accesso non root)

  • Configurazione dell'esportatore:

    • creds_file_path: percorso completo del file della chiave JSON del account di servizio (opzione 1):
      • Linux: /opt/observiq-otel-collector/ingestion-auth.json
      • Windows: C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
    • customer_id: ID cliente copiato dalla console Google SecOps
    • location: sostituisci <LOCATION> con la regione della tua istanza Google SecOps (ad esempio us, europe o asia-southeast1). L'esportatore antepone chronicle.googleapis.com a questo valore. Per l'elenco completo, consulta Endpoint regionali.
    • project: sostituisci <PROJECT_NUMBER> con il numero di progetto da IAM e amministrazione > Impostazioni.
    • endpoint: mantieni l'impostazione chronicle.googleapis.com.

Esportatore dell'API di importazione precedente

  • Se utilizzi il file di autenticazione dell'importazione dell'opzione 2, sostituisci il blocco exporters con il seguente. Imposta creds_file_path sul percorso del file di autenticazione dell'importazione e, se la tua istanza si trova al di fuori degli Stati Uniti, sostituisci malachiteingestion-pa.googleapis.com con l'endpoint regionale (ad esempio, europe-malachiteingestion-pa.googleapis.com).

    exporters:
  chronicle/cassandra:
    compression: gzip
    creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
    customer_id: '<customer_id>'
    endpoint: malachiteingestion-pa.googleapis.com
    log_type: CASSANDRA
    raw_log_field: body

Salva il file di configurazione

  • Dopo la modifica, salva il file:
    • Linux: premi Ctrl+O, poi Enter e infine Ctrl+X.
    • Windows: fai clic su File > Salva

Riavvia l'agente Bindplane per applicare le modifiche

  • Per riavviare l'agente Bindplane in Linux, esegui questo comando:

    sudo systemctl restart observiq-otel-collector

    1. Verifica che il servizio sia in esecuzione:

      ```bash
sudo systemctl status observiq-otel-collector
```

    2. Controlla i log per individuare eventuali errori:

      ```bash
sudo journalctl -u observiq-otel-collector -f
```

  • Per riavviare l'agente Bindplane in Windows, scegli una delle seguenti opzioni:

    • Prompt dei comandi o PowerShell come amministratore:

      net stop observiq-otel-collector && net start observiq-otel-collector

    • Console dei servizi:

      1. Premi Win+R, digita services.msc e premi Invio.
      2. Individua observIQ OpenTelemetry Collector.
      3. Fai clic con il tasto destro del mouse e seleziona Riavvia.

      4. Verifica che il servizio sia in esecuzione:

        sc query observiq-otel-collector

      5. Controlla i log per verificare la presenza di errori:

        type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"

Configurare l'esportazione di syslog in Apache Cassandra

  1. Accedi all'host Apache Cassandra utilizzando SSH.

  2. Apri il file di configurazione logback.xml:

    • Apache Cassandra (maggior parte delle versioni): $(CASSANDRA_HOME)/conf
    • Datastax Enterprise (installazione del pacchetto): /etc/dse
    • Datastax Enterprise (installazione tar): $(TARBALL_ROOT)/resources/cassandra/conf

  3. Aggiungi la seguente definizione di Appender al file logback.xml alla riga 28:

    <appender name="SYSLOG" class="ch.qos.logback.classic.net.SyslogAppender">
    <syslogHost>BINDPLANE_IP</syslogHost>
    <port>BINDPLANE_PORT</port>
    <facility>LOCAL7</facility>
    <throwableExcluded>true</throwableExcluded>
    <suffixPattern>%thread:%level:%logger{36}:%msg</suffixPattern>
</appender>

  4. Sostituisci BINDPLANE_IP e BINDPLANE_PORT con l'indirizzo IP e la porta effettivi dell'agente Bindplane.

  5. Aggiungi il seguente codice al blocco del logger principale <root level="INFO"> nel file logback.xml:

    La posizione in cui viene inserita questa riga dipende dalla tua versione di Apache Cassandra:

    • Apache Cassandra 5.0.x, riga 123
    • Apache Cassandra 4.0.x e 4.1.x, riga 115
    • Apache Cassandra 3.11.x e 3.0.x, riga 92
    • Datastax Enterprise (tutte le versioni), riga 121
    <appender-ref ref="SYSLOG" />

Tabella di mappatura UDM

Campo log Mappatura UDM Logica
agent.ephemeral_id observer.labels.value Valore di agent.ephemeral_id dal messaggio JSON interno.
agent.hostname observer.hostname Valore di agent.hostname dal messaggio JSON interno.
agent.id observer.asset_id Concatenazione di filebeat: e del valore di agent.id dal messaggio JSON interno.
agent.name observer.user.userid Valore di agent.name dal messaggio JSON interno.
agent.type observer.application Valore di agent.type dal messaggio JSON interno.
agent.version observer.platform_version Valore di agent.version dal messaggio JSON interno.
cloud.availability_zone principal.cloud.availability_zone Valore di cloud.availability_zone dal messaggio JSON interno.
cloud.instance.id principal.resource.product_object_id Valore di cloud.instance.id dal messaggio JSON interno.
cloud.instance.name principal.resource.name Valore di cloud.instance.name dal messaggio JSON interno.
cloud.machine.type principal.resource.attribute.labels.value Valore di cloud.machine.type dal messaggio JSON interno, dove il valore key corrispondente è machine_type.
cloud.provider principal.resource.attribute.labels.value Valore di cloud.provider dal messaggio JSON interno, dove il key corrispondente è provider.
event_metadata._id metadata.product_log_id Valore di event_metadata._id dal messaggio JSON interno.
event_metadata.version metadata.product_version Valore di event_metadata.version dal messaggio JSON interno.
host.architecture target.asset.hardware.cpu_platform Valore di host.architecture dal messaggio JSON interno.
host.fqdn target.administrative_domain Valore di host.fqdn dal messaggio JSON interno.
host.hostname target.hostname Valore di host.hostname dal messaggio JSON interno.
host.id target.asset.asset_id Concatenazione di Host Id: e del valore di host.id dal messaggio JSON interno.
host.ip target.asset.ip Array di indirizzi IP da host.ip nel messaggio JSON interno.
host.mac target.mac Array di indirizzi MAC da host.mac nel messaggio JSON interno.
host.os.kernel target.platform_patch_level Valore di host.os.kernel dal messaggio JSON interno.
host.os.platform target.platform Imposta su LINUX se host.os.platform è debian.
host.os.version target.platform_version Valore di host.os.version dal messaggio JSON interno.
hostname principal.hostname Valore di hostname estratto dal campo message utilizzando grok.
key security_result.detection_fields.value Valore di key estratto dal campo message utilizzando grok, dove il key corrispondente è key.
log.file.path principal.process.file.full_path Valore di log.file.path dal messaggio JSON interno.
log_level security_result.severity Mappato in base al valore di log_level: DEBUG, INFO, AUDIT mappano a INFORMATIONAL; ERROR mappa a ERROR; WARNING mappa a MEDIUM.
log_level security_result.severity_details Valore di log_level estratto dal campo message utilizzando grok.
log_type metadata.log_type Valore di log_type dal log non elaborato.
message security_result.description Descrizione estratta dal campo message utilizzando grok.
message target.process.command_line Riga di comando estratta dal campo message utilizzando grok.
now security_result.detection_fields.value Valore di now estratto dal campo message utilizzando grok, dove il key corrispondente è now. Analizzato dal campo event_time estratto dal campo message utilizzando grok. Imposta su USER_RESOURCE_ACCESS se sono presenti sia hostname che host.hostname, altrimenti imposta su GENERIC_EVENT. Da impostare su CASSANDRA. Imposta su CASSANDRA. Da impostare su ephemeral_id. Imposta su VIRTUAL_MACHINE se cloud.instance.name è presente. Imposta su key e now per i campi di rilevamento corrispondenti.
timestamp timestamp Dal campo create_time del log non elaborato.
authenticated_var event.idm.read_only_udm.principal.user.userid Mappato dal log delle modifiche
authenticated_var event.idm.read_only_udm.target.user.userid Mappato dal log delle modifiche
user_var event.idm.read_only_udm.target.user.userid Mappato dal log delle modifiche
operation event.idm.read_only_udm.security_result.description Mappato dal log delle modifiche
operation event.idm.read_only_udm.target.process.command_line Mappato dal log delle modifiche

Log delle modifiche

Visualizza il log delle modifiche per questo parser

Hai bisogno di ulteriore assistenza? Ricevi risposte dai membri della community e dai professionisti di Google SecOps.