pfSense-Logs erfassen

Unterstützt in:

In diesem Dokument wird beschrieben, wie Sie pfSense-Logs mit Bindplane in Google Security Operations aufnehmen.

pfSense ist eine Open-Source-Firewall- und Router-Software-Distribution, die auf FreeBSD basiert. Sie bietet zustandsbehaftete Paketfilterung, VPN, Traffic Shaping, NAT, DHCP-Server, DNS-Weiterleitung und Funktionen zur Erkennung von Eindringlingen, die alle über eine webbasierte Schnittstelle verwaltet werden. Der Parser extrahiert Felder aus pfSense-Syslog-formatierten Logs. Die Logeinträge werden mit Grok geparst und die Werte dann dem Unified Data Model (UDM) zugeordnet. Außerdem werden Standardmetadatenwerte für die Ereignisquelle und den Ereignistyp festgelegt.

Hinweis

Prüfen Sie, ob folgende Voraussetzungen erfüllt sind:

  • Eine Google SecOps-Instanz
  • Windows Server 2016 oder höher oder Linux-Host mit systemd
  • Wenn Sie den Agent hinter einem Proxy ausführen, müssen die Firewallports gemäß den Anforderungen des Bindplane-Agents geöffnet sein.
  • Privilegierter Zugriff auf die pfSense-Weboberfläche

Authentifizierungsdatei für die Google SecOps-Datenaufnahme abrufen

  1. Melden Sie sich in der Google SecOps-Konsole an.
  2. Rufen Sie die SIEM-Einstellungen > Collection Agents auf.
  3. Laden Sie die Authentifizierungsdatei für die Datenaufnahme herunter. Speichern Sie die Datei sicher auf dem System, auf dem Bindplane installiert wird.

Google SecOps-Kundennummer abrufen

  1. Melden Sie sich in der Google SecOps-Konsole an.
  2. Rufen Sie die SIEM-Einstellungen > Profile auf.
  3. Kopieren und speichern Sie die Kunden-ID aus dem Bereich Organisationsdetails.

Bindplane-Agent installieren

Installieren Sie den Bindplane-Agent auf Ihrem Windows- oder Linux-Betriebssystem gemäß der folgenden Anleitung.

Windows-Installation

  1. Öffnen Sie die Eingabeaufforderung oder PowerShell als Administrator.

  2. Führen Sie dazu diesen Befehl aus:

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet

  3. Warte, bis die Installation abgeschlossen ist.

  4. Überprüfen Sie die Installation mit folgendem Befehl:

    sc query observiq-otel-collector

Der Dienst sollte als RUNNING angezeigt werden.

Linux-Installation

  1. Öffnen Sie ein Terminal mit Root- oder Sudo-Berechtigungen.

  2. Führen Sie dazu diesen Befehl aus:

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh

  3. Warte, bis die Installation abgeschlossen ist.

  4. Überprüfen Sie die Installation mit folgendem Befehl:

    sudo systemctl status observiq-otel-collector

Der Dienst sollte als aktiv (wird ausgeführt) angezeigt werden.

Zusätzliche Installationsressourcen

Weitere Installationsoptionen und Informationen zur Fehlerbehebung finden Sie im Installationsleitfaden für den Bindplane-Agent.

Bindplane-Agent zum Erfassen von Syslog-Daten und Senden an Google SecOps konfigurieren

Konfigurationsdatei suchen

  • Linux:

    sudo nano /etc/bindplane-agent/config.yaml

  • Windows:

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"

Konfigurationsdatei bearbeiten

  • Ersetzen Sie den gesamten Inhalt von config.yaml durch die folgende Konfiguration:

    receivers:
    udplog:
        listen_address: "0.0.0.0:514"

exporters:
    chronicle/chronicle_w_labels:
        compression: gzip
        creds_file_path: '/path/to/ingestion-authentication-file.json'
        customer_id: 'YOUR_CUSTOMER_ID'
        endpoint: malachiteingestion-pa.googleapis.com
        log_type: 'PFSENSE'
        raw_log_field: body
        ingestion_labels:

service:
    pipelines:
        logs/source0__chronicle_w_labels-0:
            receivers:
                - udplog
            exporters:
                - chronicle/chronicle_w_labels

Konfigurationsparameter

  • Ersetzen Sie die folgenden Platzhalter:

    • Empfängerkonfiguration:

      • udplog: Verwenden Sie udplog für UDP-Syslog oder tcplog für TCP-Syslog.
      • 0.0.0.0: IP-Adresse, auf der gelauscht werden soll (0.0.0.0, um auf allen Schnittstellen zu lauschen)
      • 514: Portnummer, an der gelauscht werden soll (Standard-Syslog-Port)

    • Exporter-Konfiguration:

      • creds_file_path: Vollständiger Pfad zur Datei für die Authentifizierung bei der Aufnahme:
        • Linux: /etc/bindplane-agent/ingestion-auth.json
        • Windows: C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
      • YOUR_CUSTOMER_ID: Kundennummer aus dem Abschnitt „Kundennummer abrufen“
      • endpoint: Regionale Endpunkt-URL:
        • USA: malachiteingestion-pa.googleapis.com
        • Europa: europe-malachiteingestion-pa.googleapis.com
        • Asien: asia-southeast1-malachiteingestion-pa.googleapis.com
        • Eine vollständige Liste finden Sie unter Regionale Endpunkte.
      • log_type: Logtyp genau wie in Chronicle (PFSENSE)

Konfigurationsdatei speichern

  • Speichern Sie die Datei nach der Bearbeitung:
    • Linux: Drücken Sie Ctrl+O, dann Enter und dann Ctrl+X.
    • Windows: Klicken Sie auf Datei > Speichern.

Bindplane-Agent neu starten, um die Änderungen zu übernehmen

  • Führen Sie den folgenden Befehl aus, um den Bindplane-Agent unter Linux neu zu starten:

    sudo systemctl restart observiq-otel-collector

    1. Prüfen Sie, ob der Dienst ausgeführt wird:

        sudo systemctl status observiq-otel-collector

    2. Prüfen Sie die Logs auf Fehler:

        sudo journalctl -u observiq-otel-collector -f

  • Wählen Sie eine der folgenden Optionen aus, um den Bindplane-Agenten unter Windows neu zu starten:

    • Eingabeaufforderung oder PowerShell als Administrator:

      net stop observiq-otel-collector && net start observiq-otel-collector

    • Dienstkonsole:

      1. Drücken Sie Win+R, geben Sie services.msc ein und drücken Sie die Eingabetaste.
      2. Suchen Sie nach observIQ OpenTelemetry Collector.

      3. Klicken Sie mit der rechten Maustaste und wählen Sie Neu starten aus.

      4. Prüfen Sie, ob der Dienst ausgeführt wird:

        sc query observiq-otel-collector

      5. Prüfen Sie die Logs auf Fehler:

        type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"

Syslog-Weiterleitung auf pfSense konfigurieren

pfSense wird unter FreeBSD ausgeführt und bietet eine webbasierte Oberfläche für alle Konfigurationsaufgaben, einschließlich der Remote-Syslog-Weiterleitung.

  1. Melden Sie sich in der Weboberfläche von pfSense an.
  2. Gehen Sie zu Status> Systemprotokolle> Einstellungen.
  3. Rufen Sie den Bereich Optionen für die Remote-Protokollierung auf.
  4. Wählen Sie Remote-Logging aktivieren aus.
  5. Geben Sie die folgenden Konfigurationsdetails an:
    • Quelladresse: Wählen Sie Beliebig (oder eine bestimmte Schnittstelle) aus.
    • IP-Protokoll: Wählen Sie IPv4 aus.
    • Remote-Log-Server: Geben Sie BINDPLANE_IP:514 in das erste verfügbare Feld ein. Ersetzen Sie BINDPLANE_IP durch die IP-Adresse des Bindplane-Agent-Hosts.
  6. Wählen Sie im Bereich Remote Syslog Contents die Logkategorien aus, die weitergeleitet werden sollen:
    • Systemereignisse
    • Firewallereignisse
    • DNS-Ereignisse (Resolver/unbound, Forwarder/dnsmasq)
    • DHCP-Ereignisse (DHCP-Dienst)
    • PPP-Ereignisse
    • Authentifizierungsereignisse (Portal Auth, RADIUS)
    • VPN-Ereignisse (IPsec, OpenVPN, L2TP)
    • Gateway-Ereignisse (Gateway-Monitor)
    • Routing-Ereignisse (Routing-Daemon)
    • NTP-Ereignisse
    • Pakete (installierte Pakete)
  7. Klicken Sie auf Speichern.
  8. Prüfen Sie die Bindplane-Agent-Logs, um festzustellen, ob Syslog-Nachrichten gesendet werden.

UDM-Zuordnungstabelle

Logfeld UDM-Zuordnung Logik
Anwendung principal.application Der Wert wird aus dem Logeintrag mithilfe von Grok-Mustern extrahiert. Bei Syslog-Nachrichten befindet sich der Anwendungsname in der Regel nach dem Hostnamen und dem Zeitstempel.
Befehl principal.process.command_line Wird aus dem Feld „description“ extrahiert, wenn das Protokoll auf die Ausführung eines Befehls hinweist.
Beschreibung metadata.description Das Beschreibungsfeld wird der UDM-Metadatenbeschreibung zugeordnet, mit Ausnahme von syslog-ng-Anwendungslogs, bei denen es „metadata.description“ zugeordnet wird. Bei DHCP-Ereignissen wird der Beschreibung der dhcp_type vorangestellt.
dhcp_type metadata.product_event_type Der DHCP-Nachrichtentyp (z.B. DHCPDISCOVER, DHCPOFFER) wird extrahiert und zugeordnet.
Host intermediary.hostname ODER intermediary.ip Wenn der Hostwert eine gültige IP-Adresse ist, wird er intermediary.ip zugeordnet. Andernfalls wird sie intermediary.hostname zugeordnet.
Host hauptkonto.hostname, hauptkonto.asset.hostname Wenn keine Hauptkonto-IP vorhanden ist, wird der Host als Hauptkonto-Hostname behandelt.
mac principal.mac, network.dhcp.chaddr Die MAC-Adresse, die mit einer DHCP-Anfrage verknüpft ist, wird extrahiert und zugeordnet.
src_ip principal.ip, principal.asset.ip Aus bestimmten Logformaten mit einem Grok-Muster extrahiert.
src_mac principal.mac Aus bestimmten Logformaten mit einem Grok-Muster extrahiert.
dst_mac target.mac Aus bestimmten Logformaten mit einem Grok-Muster extrahiert.
timestamp metadata.event_timestamp Der Zeitstempel wird aus dem Logeintrag extrahiert und in ein UDM-Zeitstempelformat konvertiert. Die Zeitzoneninformationen (tz) werden dem Zeitstempel vor der Konvertierung angehängt, sofern verfügbar.
timestamp_no_year metadata.event_timestamp Wenn ein Zeitstempel ohne Jahr vorhanden ist, wird er geparst und das aktuelle Jahr wird während des Parsens hinzugefügt.
Nutzer principal.user.userid Der mit einem Ereignis verknüpfte Nutzername wird extrahiert und zugeordnet.
Spalte1 security_result.rule_id Wird aus der ersten CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt.
column6 security_result.rule_type Wird aus der sechsten CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt.
column7 security_result.action Wird aus der siebten CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt. In „BLOCK“ oder „ALLOW“ geändert.
column8 network.direction Wird aus der achten CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt. In „INBOUND“ oder „OUTBOUND“ konvertiert.
column13 network.ip_protocol (bei UDP oder ICMP) Wird aus der dreizehnten CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt und das Protokoll UDP oder ICMP ist. Bei TCP/UDP-Ereignissen wird damit ein zusätzliches Feld mit dem Schlüssel „Id“ erstellt.
column16 principal.ip, principal.asset.ip (wenn IPv6 und column9 = 6) Wird aus der sechzehnten CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt und column9 den Wert 6 hat. Bei TCP/UDP-Ereignissen wird sie zur Protokollidentifikation verwendet, wenn column9 den Wert 4 hat.
column17 target.ip, target.asset.ip (bei IPv6 und nicht ip_failure) Wird aus der siebzehnten CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt, column9 den Wert 6 hat und der Wert eine gültige IP-Adresse ist. Bei TCP/UDP-Ereignissen wird sie zur Protokollidentifizierung verwendet.
column18 principal.port (wenn UDP) Wird aus der 18. CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt und das Protokoll UDP ist. Bei TCP/UDP-Ereignissen wird sie network.received_bytes zugeordnet.
column19 target.port (bei UDP) Wird aus der 19. CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt und das Protokoll UDP ist. Bei DHCP-Ereignissen wird es network.dhcp.yiaddr zugeordnet. Bei anderen Ereignissen wird es „principal.ip“ oder „principal.asset.ip“ zugeordnet.
column20 additional.fields (Schlüssel: „data_length“) (wenn UDP) Wird aus der zwanzigsten CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt und das Protokoll UDP ist. Bei anderen Ereignissen wird es target.ip, target.asset.ip zugeordnet.
column21 principal.port (bei TCP/UDP) Wird aus der 21. CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt und das Protokoll TCP oder UDP ist.
column22 target.port (bei TCP/UDP) Wird aus der zweiundzwanzigsten CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt und das Protokoll TCP oder UDP ist.
column23 additional.fields (key: „data_length“) (bei TCP/UDP) Wird aus der 23. CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt und das Protokoll TCP oder UDP ist.
column24 additional.fields (key: "tcp_flags") (bei TCP) Wird aus der 24. CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt und das Protokoll TCP ist.
column25 additional.fields (Schlüssel: „sequence_number“) (wenn TCP/UDP) Wird aus der 25. CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt und das Protokoll TCP oder UDP ist.
column29 additional.fields (key: "tcp_options") (bei TCP) Wird aus der 29. CSV-Spalte zugeordnet, wenn die Beschreibung im CSV-Format vorliegt und das Protokoll TCP ist.
compression_algo additional.fields (key: "Compression Algorithm") Aus dem Feld „Beschreibung“ extrahiert und als zusätzliches Feld hinzugefügt.
Ab metadata.description Aus dem Nachrichtenfeld extrahiert und als Beschreibung verwendet.
principal_ip principal.ip, principal.asset.ip Wird aus dem Beschreibungsfeld extrahiert und stellt die primäre IP-Adresse dar.
principal_username principal.user.userid Wird aus dem Beschreibungsfeld extrahiert und stellt den Hauptkonto-Nutzernamen dar.
Status security_result.detection_fields (key: "status") Aus dem Beschreibungsfeld extrahiert und als Erkennungsfeld im Sicherheitsergebnis hinzugefügt.
target_host target.hostname, target.asset.hostname Wird aus dem Feld „Beschreibung“ extrahiert und stellt den Ziel-Hostname dar.
src_port principal.port Aus dem Beschreibungsfeld extrahiert und stellt den Quellport dar. Wird anhand verschiedener Protokollfelder und der Parserlogik ermittelt. Kann NETWORK_CONNECTION, NETWORK_DHCP, STATUS_UPDATE oder GENERIC_EVENT sein. Fest codiert auf „PFSENSE“. Fest codiert auf „PFSENSE“. Fest codiert auf „PFSENSE“. Legen Sie für DHCP-Ereignisse „DHCP“ fest. Auf „BOOTREQUEST“ für DHCPDISCOVER und DHCPREQUEST und auf „BOOTREPLY“ für DHCPOFFER und DHCPACK festlegen. Wird basierend auf dem Feld „dhcp_type“ auf „DISCOVER“, „REQUEST“, „OFFER“ oder „ACK“ festgelegt.
pid intermediary.process.pid Aus dem Änderungsprotokoll zugeordnet
application intermediary.application Aus dem Änderungsprotokoll zugeordnet
ipv4" and "ipv6 principal.ip Aus dem Änderungsprotokoll zugeordnet
security_result.category AUTH_VIOLATION Aus dem Änderungsprotokoll zugeordnet
method network.http.method Aus dem Änderungsprotokoll zugeordnet
referer network.http.referral_url Aus dem Änderungsprotokoll zugeordnet
response_code network.http.response_code Aus dem Änderungsprotokoll zugeordnet
user_agent network.http.user_agent Aus dem Änderungsprotokoll zugeordnet
sent_bytes network.sent_bytes Aus dem Änderungsprotokoll zugeordnet
url target.url Aus dem Änderungsprotokoll zugeordnet
http_version additional.fields Aus dem Änderungsprotokoll zugeordnet
column19" which is "source-address network.dhcp.yiaddr Aus dem Änderungsprotokoll zugeordnet
column17" which is "destination-address target.ip Aus dem Änderungsprotokoll zugeordnet
column16" which is "source-address principal.ip Aus dem Änderungsprotokoll zugeordnet
column12" which is "hop_limit additional.fields Aus dem Änderungsprotokoll zugeordnet
column13" which is "ip_protocol network.ip_protocol Aus dem Änderungsprotokoll zugeordnet
ttl additional.fields Aus dem Änderungsprotokoll zugeordnet
Offset additional.fields Aus dem Änderungsprotokoll zugeordnet
Data length additional.fields Aus dem Änderungsprotokoll zugeordnet
Length additional.fields Aus dem Änderungsprotokoll zugeordnet
Sequence-number additional.fields Aus Änderungsprotokoll zugeordnet

Änderungsprotokoll

Änderungsprotokoll für diesen Parser ansehen

Benötigen Sie weitere Hilfe? Antworten von Community-Mitgliedern und Google SecOps-Experten erhalten