Apache Cassandra-Logs erfassen

Parserversion:4.0

Unterstützt in:

In diesem Dokument wird beschrieben, wie Sie Apache Cassandra-Logs mit dem Bindplane-Agent in Google Security Operations aufnehmen.

Apache Cassandra generiert Logs für Datenbankvorgänge, Clusterereignisse und Systemaktivitäten. Der Parser extrahiert Felder mithilfe von Grok-Mustern und JSON-Filtern und ordnet sie dann dem Unified Data Model (UDM) zu.

Hinweis

Prüfen Sie, ob folgende Voraussetzungen erfüllt sind:

  • Eine Google SecOps-Instanz
  • Windows Server 2016 oder höher oder Linux-Host mit systemd
  • Netzwerkverbindung zwischen dem Bindplane-Agent und dem Apache Cassandra-Host
  • Wenn Sie den Agent hinter einem Proxy ausführen, müssen die Firewallports gemäß den Anforderungen des Bindplane-Agents geöffnet sein.
  • Administratorzugriff (SSH) auf den Apache Cassandra-Host

Google SecOps-Anmeldedaten für den Bindplane-Agenten abrufen

Wählen Sie eine der folgenden Methoden aus, um den Bindplane-Agenten bei Google SecOps zu authentifizieren:

  • Neue Bereitstellungen: Verwenden Sie die Chronicle API (Option 1).
  • Alte Bereitstellungen: Verwenden Sie die Datei für die Authentifizierung bei der Aufnahme (Option 2) weiterhin, bis die Ingestion API am 20. Juli 2027 eingestellt wird.
  1. Melden Sie sich in der Google Cloud -Konsole an und wählen Sie das Google Cloud -Projekt aus, das mit Ihrer Google SecOps-Instanz verknüpft ist.
  2. Rufen Sie IAM und Verwaltung > Dienstkonten auf.
  3. Klicken Sie auf Dienstkonto erstellen.
  4. Geben Sie die folgenden Konfigurationsdetails an:
    • Name des Dienstkontos: Geben Sie einen Namen für das Konto ein, z. B. bindplane-ingest.
    • Dienstkontobeschreibung: Geben Sie eine Beschreibung ein (z. B. Bindplane agent log ingestion).
  5. Klicken Sie auf Erstellen und fortfahren.
  6. Klicken Sie im Abschnitt Diesem Dienstkonto Zugriff auf das Projekt erteilen auf Rolle auswählen und wählen Sie Chronicle Editor aus.
  7. Klicken Sie auf Weiter und dann auf Fertig.
  8. Klicken Sie auf das von Ihnen erstellte Dienstkonto und rufen Sie den Tab Schlüssel auf.
  9. Klicken Sie auf Schlüssel hinzufügen > Neuen Schlüssel erstellen.
  10. Wählen Sie JSON aus und klicken Sie auf Erstellen. Die Schlüsseldatei wird auf Ihren Computer heruntergeladen.
  11. Speichern Sie die Schlüsseldatei als ingestion-auth.json im Bindplane-Collector-Verzeichnis (/opt/observiq-otel-collector/ingestion-auth.json unter Linux oder C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json unter Windows) oder aktualisieren Sie creds_file_path in config.yaml, sodass der Pfad mit dem Pfad übereinstimmt, unter dem Sie die Datei speichern.
  12. Rufen Sie IAM und Verwaltung > Einstellungen auf und kopieren Sie die Projektnummer. Sie benötigen sie für die Exporter-Konfiguration.

Option 2: Authentifizierungsdatei für die Aufnahme herunterladen (Legacy)

  1. Melden Sie sich in der Google SecOps-Konsole an.
  2. Rufen Sie die SIEM-Einstellungen > Collection Agents auf.
  3. Laden Sie die Authentifizierungsdatei für die Aufnahme herunter.
  4. Speichern Sie die Datei sicher auf dem System, auf dem der Bindplane-Agent installiert wird.

Google SecOps-Kundennummer abrufen

  1. Melden Sie sich in der Google SecOps-Konsole an.
  2. Rufen Sie die SIEM-Einstellungen > Profile auf.

  3. Kopieren und speichern Sie die Kundennummer aus dem Bereich Organisationsdetails.

BindPlane-Agent installieren

Installieren Sie den Bindplane-Agent auf Ihrem Windows- oder Linux-Betriebssystem gemäß der folgenden Anleitung.

Windows-Installation

  1. Öffnen Sie die Eingabeaufforderung oder PowerShell als Administrator.

  2. Führen Sie dazu diesen Befehl aus:

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet

  3. Warte, bis die Installation abgeschlossen ist.

  4. Überprüfen Sie die Installation mit folgendem Befehl:

    sc query observiq-otel-collector

    Der Dienst sollte als RUNNING (WIRD AUSGEFÜHRT) angezeigt werden.

Linux-Installation

  1. Öffnen Sie ein Terminal mit Root- oder Sudo-Berechtigungen.

  2. Führen Sie dazu diesen Befehl aus:

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh

  3. Warte, bis die Installation abgeschlossen ist.

  4. Überprüfen Sie die Installation mit folgendem Befehl:

    sudo systemctl status observiq-otel-collector

    Der Dienst sollte als active (running) angezeigt werden.

Zusätzliche Installationsressourcen

Weitere Installationsoptionen und Informationen zur Fehlerbehebung finden Sie im Installationsanleitung für den Bindplane-Agenten.

Bindplane-Agent zum Erfassen von Syslog-Daten und Senden an Google SecOps konfigurieren

Konfigurationsdatei suchen

  • Linux:

    sudo nano /opt/observiq-otel-collector/config.yaml

  • Windows:

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"

Konfigurationsdatei bearbeiten

  • Ersetzen Sie den gesamten Inhalt von config.yaml durch die folgende Konfiguration:

    receivers:
  udplog:
    listen_address: "0.0.0.0:514"

exporters:
  chronicle/cassandra:
    protocol: https
    # Region of your instance, for example us, europe, asia-southeast1
    location: <LOCATION>
    # Project number of the Google Cloud project linked to the instance
    project: '<PROJECT_NUMBER>'
    compression: gzip
    creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
    customer_id: '<customer_id>'
    endpoint: chronicle.googleapis.com
    log_type: CASSANDRA
    raw_log_field: body

service:
  pipelines:
    logs/cassandra_to_chronicle:
      receivers:
        - udplog
      exporters:
        - chronicle/cassandra

Konfigurationsparameter

Ersetzen Sie die folgenden Platzhalter:

  • Empfängerkonfiguration:

    • listen_address: IP-Adresse und Port, auf die gewartet werden soll:
      • 0.0.0.0, um auf allen Schnittstellen zuzuhören (empfohlen)
      • Port 514 ist der Standard-Syslog-Port (erfordert Root unter Linux; verwenden Sie 1514 für Nicht-Root).

  • Exporter-Konfiguration:

    • creds_file_path: Vollständiger Pfad zur JSON-Schlüsseldatei des Dienstkontos (Option 1):
      • Linux: /opt/observiq-otel-collector/ingestion-auth.json
      • Windows: C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
    • customer_id: Kundennummer, die aus der Google SecOps-Konsole kopiert wurde
    • location: Ersetzen Sie <LOCATION> durch die Region Ihrer Google SecOps-Instanz (z. B. us, europe oder asia-southeast1). Der Exporteur stellt diesem Wert das Präfix chronicle.googleapis.com voran. Eine vollständige Liste finden Sie unter Regionale Endpunkte.
    • project: Ersetzen Sie <PROJECT_NUMBER> durch die Projektnummer unter IAM & Verwaltung > Einstellungen.
    • endpoint: Behalten Sie die Einstellung chronicle.googleapis.com bei.

Legacy-Ingestion-API-Exporter

  • Wenn Sie die Authentifizierungsdatei für die Datenaufnahme aus Option 2 verwenden, ersetzen Sie den Block exporters durch Folgendes. Legen Sie für creds_file_path den Pfad zur Authentifizierungsdatei für die Datenaufnahme fest. Wenn sich Ihre Instanz außerhalb der USA befindet, ersetzen Sie malachiteingestion-pa.googleapis.com durch Ihren regionalen Endpunkt (z. B. europe-malachiteingestion-pa.googleapis.com).

    exporters:
  chronicle/cassandra:
    compression: gzip
    creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
    customer_id: '<customer_id>'
    endpoint: malachiteingestion-pa.googleapis.com
    log_type: CASSANDRA
    raw_log_field: body

Konfigurationsdatei speichern

  • Speichern Sie die Datei nach der Bearbeitung:
    • Linux: Drücken Sie Ctrl+O, dann Enter und dann Ctrl+X.
    • Windows: Klicken Sie auf Datei > Speichern.

Starten Sie den Bindplane-Agent neu, um die Änderungen zu übernehmen.

  • Führen Sie den folgenden Befehl aus, um den Bindplane-Agent unter Linux neu zu starten:

    sudo systemctl restart observiq-otel-collector

    1. Prüfen Sie, ob der Dienst ausgeführt wird:

      ```bash
sudo systemctl status observiq-otel-collector
```

    2. Logs auf Fehler prüfen:

      ```bash
sudo journalctl -u observiq-otel-collector -f
```

  • Wählen Sie eine der folgenden Optionen aus, um den Bindplane-Agenten unter Windows neu zu starten:

    • Eingabeaufforderung oder PowerShell als Administrator:

      net stop observiq-otel-collector && net start observiq-otel-collector

    • Dienstkonsole:

      1. Drücken Sie Win+R, geben Sie services.msc ein und drücken Sie die Eingabetaste.
      2. Suchen Sie nach observIQ OpenTelemetry Collector.
      3. Klicken Sie mit der rechten Maustaste und wählen Sie Neu starten aus.

      4. Prüfen Sie, ob der Dienst ausgeführt wird:

        sc query observiq-otel-collector

      5. Logs auf Fehler prüfen:

        type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"

Syslog-Export in Apache Cassandra konfigurieren

  1. Melden Sie sich über SSH auf dem Apache Cassandra-Host an.

  2. Öffnen Sie die Konfigurationsdatei logback.xml:

    • Apache Cassandra (die meisten Versionen): $(CASSANDRA_HOME)/conf
    • Datastax Enterprise (Paketinstallation): /etc/dse
    • Datastax Enterprise (TAR-Installation): $(TARBALL_ROOT)/resources/cassandra/conf

  3. Fügen Sie der Datei logback.xml in Zeile 28 die folgende Appender-Definition hinzu:

    <appender name="SYSLOG" class="ch.qos.logback.classic.net.SyslogAppender">
    <syslogHost>BINDPLANE_IP</syslogHost>
    <port>BINDPLANE_PORT</port>
    <facility>LOCAL7</facility>
    <throwableExcluded>true</throwableExcluded>
    <suffixPattern>%thread:%level:%logger{36}:%msg</suffixPattern>
</appender>

  4. Ersetzen Sie BINDPLANE_IP und BINDPLANE_PORT durch die tatsächliche IP-Adresse und den Port des Bindplane-Agents.

  5. Fügen Sie den folgenden Code in den Root-Logger-Block <root level="INFO"> in der Datei logback.xml ein:

    Der Speicherort, an dem diese Zeile eingefügt wird, hängt von Ihrer Version von Apache Cassandra ab:

    • Apache Cassandra 5.0.x, Zeile 123
    • Apache Cassandra 4.0.x und 4.1.x, Zeile 115
    • Apache Cassandra 3.11.x und 3.0.x, Zeile 92
    • Datastax Enterprise (alle Versionen), Zeile 121
    <appender-ref ref="SYSLOG" />

UDM-Zuordnungstabelle

Logfeld UDM-Zuordnung Logik
agent.ephemeral_id observer.labels.value Wert von agent.ephemeral_id aus der inneren JSON-Nachricht.
agent.hostname observer.hostname Wert von agent.hostname aus der inneren JSON-Nachricht.
agent.id observer.asset_id Verkettung von filebeat: und dem Wert von agent.id aus der inneren JSON-Nachricht.
agent.name observer.user.userid Wert von agent.name aus der inneren JSON-Nachricht.
agent.type observer.application Wert von agent.type aus der inneren JSON-Nachricht.
agent.version observer.platform_version Wert von agent.version aus der inneren JSON-Nachricht.
cloud.availability_zone principal.cloud.availability_zone Wert von cloud.availability_zone aus der inneren JSON-Nachricht.
cloud.instance.id principal.resource.product_object_id Wert von cloud.instance.id aus der inneren JSON-Nachricht.
cloud.instance.name principal.resource.name Wert von cloud.instance.name aus der inneren JSON-Nachricht.
cloud.machine.type principal.resource.attribute.labels.value Wert von cloud.machine.type aus der inneren JSON-Nachricht, wobei der entsprechende key machine_type ist.
cloud.provider principal.resource.attribute.labels.value Wert von cloud.provider aus der inneren JSON-Nachricht, wobei der entsprechende key-Wert provider ist.
event_metadata._id metadata.product_log_id Wert von event_metadata._id aus der inneren JSON-Nachricht.
event_metadata.version metadata.product_version Wert von event_metadata.version aus der inneren JSON-Nachricht.
host.architecture target.asset.hardware.cpu_platform Wert von host.architecture aus der inneren JSON-Nachricht.
host.fqdn target.administrative_domain Wert von host.fqdn aus der inneren JSON-Nachricht.
host.hostname target.hostname Wert von host.hostname aus der inneren JSON-Nachricht.
host.id target.asset.asset_id Verkettung von Host Id: und dem Wert von host.id aus der inneren JSON-Nachricht.
host.ip target.asset.ip Array von IP-Adressen aus host.ip in der inneren JSON-Nachricht.
host.mac target.mac Array von MAC-Adressen von host.mac in der inneren JSON-Nachricht.
host.os.kernel target.platform_patch_level Wert von host.os.kernel aus der inneren JSON-Nachricht.
host.os.platform target.platform Wird auf LINUX gesetzt, wenn host.os.platform gleich debian ist.
host.os.version target.platform_version Wert von host.os.version aus der inneren JSON-Nachricht.
hostname principal.hostname Der Wert von hostname wird mit grok aus dem Feld message extrahiert.
key security_result.detection_fields.value Der Wert von key, der mit Grok aus dem Feld message extrahiert wurde, wobei der entsprechende key key ist.
log.file.path principal.process.file.full_path Wert von log.file.path aus der inneren JSON-Nachricht.
log_level security_result.severity Zuordnung basierend auf dem Wert von log_level: DEBUG, INFO, AUDIT werden INFORMATIONAL zugeordnet; ERROR wird ERROR zugeordnet; WARNING wird MEDIUM zugeordnet.
log_level security_result.severity_details Wert von log_level, der mit Grok aus dem Feld message extrahiert wurde.
log_type metadata.log_type Wert von log_type aus dem Rohlog.
message security_result.description Die Beschreibung wird mit grok aus dem Feld message extrahiert.
message target.process.command_line Befehlszeile, die mit grok aus dem Feld message extrahiert wurde.
now security_result.detection_fields.value Wert von now, der mit Grok aus dem Feld message extrahiert wurde, wobei der entsprechende key now ist. Wird aus dem Feld event_time geparst, das mit grok aus dem Feld message extrahiert wird. Wird auf USER_RESOURCE_ACCESS gesetzt, wenn sowohl hostname als auch host.hostname vorhanden sind. Andernfalls wird der Wert auf GENERIC_EVENT gesetzt. Setze dies auf CASSANDRA. Setze dies auf CASSANDRA. Setze dies auf ephemeral_id. Wird auf VIRTUAL_MACHINE gesetzt, wenn cloud.instance.name vorhanden ist. Legen Sie für die entsprechenden Erkennungsfelder key und now fest.
timestamp timestamp Aus dem Feld create_time des Rohlogs.
authenticated_var event.idm.read_only_udm.principal.user.userid Aus Änderungsprotokoll zugeordnet
authenticated_var event.idm.read_only_udm.target.user.userid Aus Änderungsprotokoll zugeordnet
user_var event.idm.read_only_udm.target.user.userid Aus Änderungsprotokoll zugeordnet
operation event.idm.read_only_udm.security_result.description Aus Änderungsprotokoll zugeordnet
operation event.idm.read_only_udm.target.process.command_line Aus Änderungsprotokoll zugeordnet

Änderungsprotokoll

Änderungsprotokoll für diesen Parser ansehen

Benötigen Sie weitere Hilfe? Antworten von Community-Mitgliedern und Google SecOps-Experten erhalten