Fastly Next-Gen WAF-Logs (powered by Signal Sciences) erfassen

Parserversion: 1.0

Unterstützt in:

In diesem Dokument wird beschrieben, wie Sie Fastly Next-Gen WAF-Logs (powered by Signal Sciences) mit Google Cloud Storage V2 in Google Security Operations aufnehmen.

Fastly Next-Gen WAF (powered by Signal Sciences) ist eine cloudbasierte Web Application Firewall, die Bedrohungen für Webanwendungen, APIs und Mikrodienste in Echtzeit erkennt und blockiert. Es verwendet einen signalbasierten Ansatz, um Angriffe wie SQL-Injection, Cross-Site-Scripting, Kontoübernahme und Anwendungsmissbrauch zu erkennen und abzuwehren. Die Signal Sciences REST API bietet programmatischen Zugriff auf Anfragefeeddaten, die detaillierte Informationen zu gekennzeichneten und blockierten Anfragen enthalten.

Hinweis

Folgende Voraussetzungen müssen erfüllt sein:

  • Eine Google SecOps-Instanz
  • Ein GCP-Projekt mit aktivierter Cloud Storage API
  • Berechtigungen zum Erstellen und Verwalten von GCS-Buckets
  • Berechtigungen zum Verwalten von IAM-Richtlinien für GCS-Buckets
  • Berechtigungen zum Erstellen von Cloud Run-Diensten, Pub/Sub-Themen und Cloud Scheduler-Jobs
  • Privilegierter Zugriff auf das Fastly WAF-Dashboard der nächsten Generation mit API-Zugriffsberechtigungen
  • Ein Fastly WAF-Konto der nächsten Generation mit einem Unternehmensnamen und mindestens einer konfigurierten Website

Google Cloud Storage-Bucket erstellen

  1. Gehen Sie zur Google Cloud Console.
  2. Wählen Sie Ihr Projekt aus oder erstellen Sie ein neues.
  3. Rufen Sie im Navigationsmenü Cloud Storage > Buckets auf.
  4. Klicken Sie auf Bucket erstellen.
  5. Geben Sie die folgenden Konfigurationsdetails an:

    Einstellung Wert
    Bucket benennen Geben Sie einen global eindeutigen Namen ein (z. B. fastly-waf-logs).
    Standorttyp Wählen Sie die Option, die am besten zu Ihren Anforderungen passt (Region, Dual-Region, Multi-Region).
    Standort Wählen Sie den Standort aus (z. B. us-central1).
    Speicherklasse Standard (empfohlen für Logs, auf die häufig zugegriffen wird)
    Zugriffssteuerung Einheitlich (empfohlen)
    Schutztools Optional: Objektversionsverwaltung oder Aufbewahrungsrichtlinie aktivieren
  6. Klicken Sie auf Erstellen.

Fastly Next-Gen WAF API-Anmeldedaten erfassen

API-Zugriffstoken abrufen

  1. Melden Sie sich im Fastly WAF-Dashboard der nächsten Generation an.
  2. Wählen Sie im Menü Mein Profil die Option API-Zugriffstokens aus.
  3. Klicken Sie auf API-Zugriffstoken hinzufügen.
  4. Geben Sie im Feld Tokenname einen Namen ein, um das Token zu identifizieren (z. B. SIEM Integration).
  5. Klicken Sie auf API-Zugriffstoken erstellen.
  6. Kopieren und speichern Sie die folgenden Details an einem sicheren Ort:

    • API-Token: Der generierte Tokenwert (wird nur einmal angezeigt)
    • E-Mail-Adresse: Die E-Mail-Adresse Ihres Kontos, die für die Authentifizierung verwendet wird.

Unternehmens- und Standortnamen abrufen

  1. Melden Sie sich im Fastly WAF-Dashboard der nächsten Generation an.
  2. Klicken Sie auf Verwalten > Corp > Corp-Übersicht.
  3. Notieren Sie sich den Kurznamen des Unternehmens, der auf der Seite angezeigt wird (z. B. my_corp).
  4. Gehen Sie zu Verwalten > Websites.
  5. Notieren Sie sich den Kurznamen des Standorts, von dem Sie Logs erfassen möchten (z. B. my_site).

Berechtigungen prüfen

So prüfen Sie, ob das Konto die erforderlichen Berechtigungen hat:

  1. Melden Sie sich im Fastly WAF-Dashboard der nächsten Generation an.
  2. Wählen Sie im Menü Corp Manage die Option Corp Users aus.
  3. Suchen Sie Ihr Nutzerkonto in der Liste.
  4. Prüfen Sie, ob Sie die Rolle Administrator, Inhaber oder Beobachter haben. Diese Rollen haben den erforderlichen API-Zugriff, um Daten aus dem Anfragefeed abzurufen.
  5. Wenn Ihre Rolle keinen API-Zugriff hat, wenden Sie sich an Ihren Fastly WAF der nächsten Generation-Administrator, um die entsprechende Rolle zu erhalten.

API-Zugriff testen

  • Testen Sie Ihre Anmeldedaten, bevor Sie mit der Integration fortfahren:

    # Replace with your actual credentials
    SIGSCI_EMAIL="your-email@example.com"
    SIGSCI_TOKEN="your-api-token"
    SIGSCI_CORP="your-corp-name"
    SIGSCI_SITE="your-site-name"
    
    # Test API access - get site overview
    curl -v \
        -H "x-api-user:${SIGSCI_EMAIL}" \
        -H "x-api-token:${SIGSCI_TOKEN}" \
        "https://dashboard.signalsciences.net/api/v0/corps/${SIGSCI_CORP}/sites/${SIGSCI_SITE}"
    

Dienstkonto für die Cloud Run-Funktion erstellen

Die Cloud Run-Funktion benötigt ein Dienstkonto mit Berechtigungen zum Schreiben in den GCS-Bucket und zum Aufrufen durch Pub/Sub.

Dienstkonto erstellen

  1. Rufen Sie in der GCP Console die Seite IAM und Verwaltung > Dienstkonten auf.
  2. Klicken Sie auf Dienstkonto erstellen.
  3. Geben Sie die folgenden Konfigurationsdetails an:
    • Name des Dienstkontos: Geben Sie fastly-waf-collector-sa ein.
    • Beschreibung des Dienstkontos: Geben Sie Service account for Cloud Run function to collect Fastly Next-Gen WAF logs ein.
  4. Klicken Sie auf Erstellen und fortfahren.
  5. Fügen Sie im Abschnitt Diesem Dienstkonto Zugriff auf das Projekt erteilen die folgenden Rollen hinzu:
    1. Klicken Sie auf Rolle auswählen.
    2. Suchen Sie nach Storage Object Admin und wählen Sie die Rolle aus.
    3. Klicken Sie auf + Weitere Rolle hinzufügen.
    4. Suchen Sie nach Cloud Run Invoker und wählen Sie die Rolle aus.
    5. Klicken Sie auf + Weitere Rolle hinzufügen.
    6. Suchen Sie nach Cloud Functions-Aufrufer und wählen Sie die Rolle aus.
  6. Klicken Sie auf Weiter.
  7. Klicken Sie auf Fertig.

Diese Rollen sind erforderlich für:

  • Storage-Objekt-Administrator: Logs in den GCS-Bucket schreiben und Statusdateien verwalten
  • Cloud Run-Aufrufer: Pub/Sub erlauben, die Funktion aufzurufen
  • Cloud Functions-Invoker: Funktionsaufruf zulassen

IAM-Berechtigungen für GCS-Bucket gewähren

Gewähren Sie dem Dienstkonto Schreibberechtigungen für den GCS-Bucket:

  1. Rufen Sie Cloud Storage > Buckets auf.
  2. Klicken Sie auf den Namen Ihres Buckets (z. B. fastly-waf-logs).
  3. Wechseln Sie zum Tab Berechtigungen.
  4. Klicken Sie auf Zugriff erlauben.
  5. Geben Sie die folgenden Konfigurationsdetails an:
    • Hauptkonten hinzufügen: Geben Sie die E-Mail-Adresse des Dienstkontos ein (z. B. fastly-waf-collector-sa@PROJECT_ID.iam.gserviceaccount.com).
    • Rollen zuweisen: Wählen Sie Storage-Objekt-Administrator aus.
  6. Klicken Sie auf Speichern.

Pub/Sub-Thema erstellen

Erstellen Sie ein Pub/Sub-Thema, in dem Cloud Scheduler Nachrichten veröffentlicht und das die Cloud Run-Funktion abonniert.

  1. Wechseln Sie in der GCP Console zu Pub/Sub > Themen.
  2. Klicken Sie auf Thema erstellen.
  3. Geben Sie die folgenden Konfigurationsdetails an:
    • Themen-ID: Geben Sie fastly-waf-logs-trigger ein.
    • Übernehmen Sie die anderen Einstellungen.
  4. Klicken Sie auf Erstellen.

Cloud Run-Funktion zum Erfassen von Logs erstellen

Die Cloud Run-Funktion wird durch Pub/Sub-Nachrichten von Cloud Scheduler ausgelöst, um Anfragefeeddaten von der Fastly WAF der nächsten Generation API abzurufen und die Logs in GCS zu schreiben.

  1. Rufen Sie in der GCP Console Cloud Run auf.
  2. Klicken Sie auf Dienst erstellen.
  3. Wählen Sie Funktion aus (Funktion mit einem Inline-Editor erstellen).
  4. Geben Sie im Abschnitt Konfigurieren die folgenden Konfigurationsdetails an:

    Einstellung Wert
    Dienstname fastly-waf-collector
    Region Wählen Sie die Region aus, die Ihrem GCS-Bucket entspricht (z. B. us-central1).
    Laufzeit Wählen Sie Python 3.12 oder höher aus.
  5. Im Abschnitt Trigger (optional):

    1. Klicken Sie auf + Trigger hinzufügen.
    2. Wählen Sie Cloud Pub/Sub aus.
    3. Wählen Sie unter Cloud Pub/Sub-Thema auswählen das Thema fastly-waf-logs-trigger aus.
    4. Klicken Sie auf Speichern.
  6. Im Abschnitt Authentifizierung:

    1. Wählen Sie Authentifizierung erforderlich aus.
    2. Prüfen Sie Identity and Access Management (IAM).
  7. Scrollen Sie nach unten und maximieren Sie Container, Netzwerk, Sicherheit.

  8. Rufen Sie den Tab Sicherheit auf:

    • Dienstkonto: Wählen Sie das Dienstkonto fastly-waf-collector-sa aus.
  9. Rufen Sie den Tab Container auf:

    1. Klicken Sie auf Variablen und Secrets.
    2. Klicken Sie für jede Umgebungsvariable auf + Variable hinzufügen:
    Variablenname Beispielwert Beschreibung
    GCS_BUCKET fastly-waf-logs Name des GCS-Buckets
    GCS_PREFIX fastly-waf Präfix für Logdateien
    STATE_KEY fastly-waf/state.json Pfad der Statusdatei
    SIGSCI_EMAIL your-email@example.com E-Mail-Adresse für die Signal Sciences API
    SIGSCI_TOKEN your-api-token Signal Sciences-API-Token
    SIGSCI_CORP your-corp-name Signal Sciences Corp – Kurzname
    SIGSCI_SITE your-site-name Kurzname der Signal Sciences-Website
    MAX_RECORDS 10000 Maximale Anzahl von Datensätzen pro Ausführung
    PAGE_SIZE 1000 Einträge pro Seite (max. 1.000)
    LOOKBACK_HOURS 24 Anfänglicher Rückschauzeitraum
  10. Scrollen Sie im Bereich Variablen und Secrets nach unten zu Anfragen:

    • Zeitüberschreitung bei Anfrage: Geben Sie 600 Sekunden (10 Minuten) ein.
  11. Rufen Sie den Tab Einstellungen auf:

    • Im Abschnitt Ressourcen:
      • Arbeitsspeicher: Wählen Sie 512 MiB oder höher aus.
      • CPU: Wählen Sie 1 aus.
  12. Im Abschnitt Versionsskalierung:

    • Mindestanzahl von Instanzen: Geben Sie 0 ein.
    • Maximale Anzahl von Instanzen: Geben Sie 100 ein (oder passen Sie den Wert an die erwartete Last an).
  13. Klicken Sie auf Erstellen.

  14. Warten Sie ein bis zwei Minuten, bis der Dienst erstellt wurde.

  15. Nachdem der Dienst erstellt wurde, wird der Inline-Code-Editor automatisch geöffnet.

Funktionscode hinzufügen

  1. Geben Sie main in das Feld Einstiegspunkt ein.
  2. Erstellen Sie im Inline-Code-Editor zwei Dateien:

    • main.py:

      import functions_framework
      from google.cloud import storage
      import json
      import os
      import urllib3
      from datetime import datetime, timezone, timedelta
      import time
      
      # Initialize HTTP client with timeouts
      http = urllib3.PoolManager(
          timeout=urllib3.Timeout(connect=5.0, read=30.0),
          retries=False,
      )
      
      # Initialize Storage client
      storage_client = storage.Client()
      
      # Environment variables
      GCS_BUCKET = os.environ.get('GCS_BUCKET')
      GCS_PREFIX = os.environ.get('GCS_PREFIX', 'fastly-waf')
      STATE_KEY = os.environ.get('STATE_KEY', 'fastly-waf/state.json')
      SIGSCI_EMAIL = os.environ.get('SIGSCI_EMAIL')
      SIGSCI_TOKEN = os.environ.get('SIGSCI_TOKEN')
      SIGSCI_CORP = os.environ.get('SIGSCI_CORP')
      SIGSCI_SITE = os.environ.get('SIGSCI_SITE')
      MAX_RECORDS = int(os.environ.get('MAX_RECORDS', '10000'))
      PAGE_SIZE = int(os.environ.get('PAGE_SIZE', '1000'))
      LOOKBACK_HOURS = int(os.environ.get('LOOKBACK_HOURS', '24'))
      
      # Signal Sciences API base URL
      API_BASE = 'https://dashboard.signalsciences.net/api/v0'
      
      @functions_framework.cloud_event
      def main(cloud_event):
          """
          Cloud Run function triggered by Pub/Sub to fetch Fastly Next-Gen WAF
          request feed data and write to GCS.
      
          Args:
              cloud_event: CloudEvent object containing Pub/Sub message
          """
      
          if not all([GCS_BUCKET, SIGSCI_EMAIL, SIGSCI_TOKEN, SIGSCI_CORP, SIGSCI_SITE]):
              print('Error: Missing required environment variables')
              return
      
          try:
              bucket = storage_client.bucket(GCS_BUCKET)
      
              # Load state
              state = load_state(bucket, STATE_KEY)
      
              # Determine time window
              now = datetime.now(timezone.utc)
              last_time = None
      
              if isinstance(state, dict) and state.get("last_event_time"):
                  try:
                      last_time = datetime.fromisoformat(state["last_event_time"])
                      # Overlap by 2 minutes to catch any delayed events
                      last_time = last_time - timedelta(minutes=2)
                  except Exception as e:
                      print(f"Warning: Could not parse last_event_time: {e}")
      
              if last_time is None:
                  last_time = now - timedelta(hours=LOOKBACK_HOURS)
      
              # Convert to Unix epoch seconds (Signal Sciences API uses seconds)
              from_epoch = int(last_time.timestamp())
              until_epoch = int(now.timestamp())
      
              print(f"Fetching request feed from {last_time.isoformat()} to {now.isoformat()}")
              print(f"Corp: {SIGSCI_CORP}, Site: {SIGSCI_SITE}")
      
              # Fetch request feed
              records, newest_event_time = fetch_request_feed(
                  corp=SIGSCI_CORP,
                  site=SIGSCI_SITE,
                  from_epoch=from_epoch,
                  until_epoch=until_epoch,
                  page_size=PAGE_SIZE,
                  max_records=MAX_RECORDS,
              )
      
              if not records:
                  print("No new request feed records found.")
                  save_state(bucket, STATE_KEY, now.isoformat())
                  return
      
              # Write to GCS as NDJSON
              timestamp = now.strftime('%Y%m%d_%H%M%S')
              object_key = f"{GCS_PREFIX}/logs_{timestamp}.ndjson"
              blob = bucket.blob(object_key)
      
              ndjson = '\n'.join([json.dumps(record, ensure_ascii=False) for record in records]) + '\n'
              blob.upload_from_string(ndjson, content_type='application/x-ndjson')
      
              print(f"Wrote {len(records)} records to gs://{GCS_BUCKET}/{object_key}")
      
              # Update state with newest event time
              if newest_event_time:
                  save_state(bucket, STATE_KEY, newest_event_time)
              else:
                  save_state(bucket, STATE_KEY, now.isoformat())
      
              print(f"Successfully processed {len(records)} records")
      
          except Exception as e:
              print(f'Error processing logs: {str(e)}')
              raise
      
      def load_state(bucket, key):
          """Load state from GCS."""
          try:
              blob = bucket.blob(key)
              if blob.exists():
                  state_data = blob.download_as_text()
                  return json.loads(state_data)
          except Exception as e:
              print(f"Warning: Could not load state: {e}")
      
          return {}
      
      def save_state(bucket, key, last_event_time_iso: str):
          """Save the last event timestamp to GCS state file."""
          try:
              state = {'last_event_time': last_event_time_iso}
              blob = bucket.blob(key)
              blob.upload_from_string(
                  json.dumps(state, indent=2),
                  content_type='application/json'
              )
              print(f"Saved state: last_event_time={last_event_time_iso}")
          except Exception as e:
              print(f"Warning: Could not save state: {e}")
      
      def fetch_request_feed(corp: str, site: str, from_epoch: int, until_epoch: int, page_size: int, max_records: int):
          """
          Fetch request feed from Fastly Next-Gen WAF (Signal Sciences) API
          with cursor-based pagination and rate limiting.
      
          Args:
              corp: Signal Sciences corp short name
              site: Signal Sciences site short name
              from_epoch: Start time as Unix epoch seconds
              until_epoch: End time as Unix epoch seconds
              page_size: Number of records per page (max 1000)
              max_records: Maximum total records to fetch (max 10000)
      
          Returns:
              Tuple of (records list, newest_event_time ISO string)
          """
          headers = {
              'x-api-user': SIGSCI_EMAIL,
              'x-api-token': SIGSCI_TOKEN,
              'Accept': 'application/json',
              'User-Agent': 'GoogleSecOps-FastlyWAFCollector/1.0'
          }
      
          records = []
          newest_time = None
          page_num = 0
          backoff = 1.0
      
          # Initial URL with time range parameters
          url = f"{API_BASE}/corps/{corp}/sites/{site}/feed/requests?from={from_epoch}&until={until_epoch}&limit={min(page_size, 1000)}"
      
          while url:
              page_num += 1
      
              if len(records) >= max_records:
                  print(f"Reached max_records limit ({max_records})")
                  break
      
              try:
                  response = http.request('GET', url, headers=headers)
      
                  # Handle rate limiting with exponential backoff
                  if response.status == 429:
                      retry_after = int(response.headers.get('Retry-After', str(int(backoff))))
                      print(f"Rate limited (429). Retrying after {retry_after}s...")
                      time.sleep(retry_after)
                      backoff = min(backoff * 2, 30.0)
                      continue
      
                  backoff = 1.0
      
                  if response.status != 200:
                      print(f"HTTP Error: {response.status}")
                      response_text = response.data.decode('utf-8')
                      print(f"Response body: {response_text}")
                      return [], None
      
                  data = json.loads(response.data.decode('utf-8'))
      
                  page_results = data.get('data', [])
      
                  if not page_results:
                      print(f"No more results (empty page)")
                      break
      
                  print(f"Page {page_num}: Retrieved {len(page_results)} events")
                  records.extend(page_results)
      
                  # Track newest event time
                  for event in page_results:
                      try:
                          event_timestamp = event.get('timestamp')
                          if event_timestamp:
                              event_dt = datetime.fromtimestamp(event_timestamp, tz=timezone.utc)
                              event_time = event_dt.isoformat()
                              if newest_time is None or event_dt > datetime.fromisoformat(newest_time):
                                  newest_time = event_time
                      except Exception as e:
                          print(f"Warning: Could not parse event time: {e}")
      
                  # Cursor-based pagination using next URI
                  next_url = data.get('next', {}).get('uri', '')
                  if next_url:
                      url = f"https://dashboard.signalsciences.net{next_url}"
                  else:
                      print("No more pages (no next cursor)")
                      break
      
              except Exception as e:
                  print(f"Error fetching request feed: {e}")
                  return [], None
      
          print(f"Retrieved {len(records)} total records from {page_num} pages")
          return records, newest_time
      
    • requirements.txt:

      functions-framework==3.*
      google-cloud-storage==2.*
      urllib3>=2.0.0
      
  3. Klicken Sie auf Bereitstellen, um die Funktion zu speichern und bereitzustellen.

  4. Warten Sie, bis die Bereitstellung abgeschlossen ist (2–3 Minuten).

Cloud Scheduler-Job erstellen

Cloud Scheduler veröffentlicht in regelmäßigen Abständen Nachrichten im Pub/Sub-Thema und löst so die Cloud Run-Funktion aus.

  1. Rufen Sie in der GCP Console die Option Cloud Scheduler auf.
  2. Klicken Sie auf Job erstellen.
  3. Geben Sie die folgenden Konfigurationsdetails an:

    Einstellung Wert
    Name fastly-waf-collector-hourly
    Region Wählen Sie dieselbe Region wie für die Cloud Run-Funktion aus.
    Frequenz 0 * * * * (stündlich zur vollen Stunde)
    Zeitzone Zeitzone auswählen (UTC empfohlen)
    Zieltyp Pub/Sub
    Thema Wählen Sie das Thema fastly-waf-logs-trigger aus.
    Inhalt der Nachricht {} (leeres JSON-Objekt)
  4. Klicken Sie auf Erstellen.

Optionen für die Häufigkeit des Zeitplans

Wählen Sie die Häufigkeit basierend auf dem Logvolumen und den Latenzanforderungen aus:

Häufigkeit Cron-Ausdruck Anwendungsfall
Alle 5 Minuten */5 * * * * Hohes Volumen, niedrige Latenz
Alle 15 Minuten */15 * * * * Mittleres Suchvolumen
Stündlich 0 * * * * Standard (empfohlen)
Alle 6 Stunden 0 */6 * * * Batchverarbeitung mit geringem Volumen
Täglich 0 0 * * * Erhebung von Verlaufsdaten

Integration testen

  1. Suchen Sie in der Cloud Scheduler-Konsole nach Ihrem Job.
  2. Klicken Sie auf Ausführung erzwingen, um den Job manuell auszulösen.
  3. Warte einige Sekunden.
  4. Rufen Sie Cloud Run > Dienste auf.
  5. Klicken Sie auf fastly-waf-collector.
  6. Klicken Sie auf den Tab Logs.
  7. Prüfen Sie, ob die Funktion erfolgreich ausgeführt wurde. Achte dabei auf Folgendes:

    Fetching request feed from YYYY-MM-DDTHH:MM:SS+00:00 to YYYY-MM-DDTHH:MM:SS+00:00
    Corp: my_corp, Site: my_site
    Page 1: Retrieved X events
    Wrote X records to gs://fastly-waf-logs/fastly-waf/logs_YYYYMMDD_HHMMSS.ndjson
    Successfully processed X records
    
  8. Rufen Sie Cloud Storage > Buckets auf.

  9. Klicken Sie auf den Namen Ihres Buckets (fastly-waf-logs).

  10. Rufen Sie den Ordner fastly-waf/ auf.

  11. Prüfen Sie, ob eine neue .ndjson-Datei mit dem aktuellen Zeitstempel erstellt wurde.

Wenn Sie Fehler in den Logs sehen:

  • HTTP 401: Prüfen Sie die API-E-Mail-Adresse und das API-Token in den Umgebungsvariablen.
  • HTTP 403: Prüfen Sie, ob das Konto im Fastly Next-Gen WAF-Dashboard die Rolle „Admin“, „Owner“ oder „Observer“ hat.
  • HTTP 429: Ratenbegrenzung – die Funktion wird automatisch mit Backoff wiederholt.
  • Fehlende Umgebungsvariablen: Prüfen Sie, ob alle erforderlichen Variablen festgelegt sind.

Feed in Google SecOps konfigurieren, um Fastly Next-Gen WAF-Logs aufzunehmen

  1. Rufen Sie die Einstellungen > Datenverwaltung > Feeds auf. Wenn Sie eine reine SIEM-Plattform verwenden, rufen Sie die Einstellungen > Feeds auf.
  2. Klicken Sie auf Neuen Feed hinzufügen.
  3. Klicken Sie auf Einzelnen Feed konfigurieren.
  4. Geben Sie im Feld Feedname einen Namen für den Feed ein, z. B. Fastly WAF Logs.
  5. Wählen Sie Google Cloud Storage V2 als Quelltyp aus.
  6. Wählen Sie Fastly WAF als Protokolltyp aus.
  7. Klicken Sie auf Dienstkonto abrufen. Eine eindeutige E-Mail-Adresse für das Dienstkonto wird angezeigt, z. B.:

    chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.com
    
  8. Kopieren Sie diese E-Mail-Adresse.

  9. Klicken Sie auf Weiter.

  10. Geben Sie Werte für die folgenden Eingabeparameter an:

    • Storage-Bucket-URL: Geben Sie den GCS-Bucket-URI mit dem Präfixpfad ein:

      gs://fastly-waf-logs/fastly-waf/
      
      • Ersetzen Sie:
        • fastly-waf-logs: Der Name Ihres GCS-Buckets.
        • fastly-waf: Optionaler Präfix-/Ordnerpfad, in dem Logs gespeichert werden (leer lassen für Stammverzeichnis).
    • Option zum Löschen der Quelle: Wählen Sie die gewünschte Löschoption aus:

      • Nie: Nach Übertragungen werden keine Dateien gelöscht (empfohlen für Tests).
      • Übertragene Dateien löschen: Dateien werden nach erfolgreicher Übertragung gelöscht.
      • Übertragene Dateien und leere Verzeichnisse löschen: Dateien und leere Verzeichnisse werden nach erfolgreicher Übertragung gelöscht.

    • Maximales Dateialter: Dateien einschließen, die in den letzten Tagen geändert wurden (Standardwert: 180 Tage)

    • Asset-Namespace: Der Asset-Namespace

    • Labels für Datenaufnahme: Das Label, das auf die Ereignisse aus diesem Feed angewendet werden soll.

  11. Klicken Sie auf Weiter.

  12. Prüfen Sie die neue Feedkonfiguration auf dem Bildschirm Abschließen und klicken Sie dann auf Senden.

Dem Google SecOps-Dienstkonto IAM-Berechtigungen gewähren

Das Google SecOps-Dienstkonto benötigt die Rolle Storage-Objekt-Betrachter für Ihren GCS-Bucket.

  1. Rufen Sie Cloud Storage > Buckets auf.
  2. Klicken Sie auf den Namen Ihres Buckets.
  3. Wechseln Sie zum Tab Berechtigungen.
  4. Klicken Sie auf Zugriff erlauben.
  5. Geben Sie die folgenden Konfigurationsdetails an:
    • Hauptkonten hinzufügen: Fügen Sie die E‑Mail-Adresse des Google SecOps-Dienstkontos ein.
    • Rollen zuweisen: Wählen Sie Storage Object Viewer aus.
  6. Klicken Sie auf Speichern.

UDM-Zuordnungstabelle

Logfeld UDM-Zuordnung Logik
metadata.event_type Legen Sie „NETWORK_HTTP“ fest.
metadata.vendor_name Legen Sie diesen Wert auf „Fastly“ fest.
metadata.product_name Legen Sie „WAF der nächsten Generation“ fest.
id metadata.product_log_id Wert direkt kopiert
timestamp metadata.event_timestamp Aus Unix-Epochensekunden konvertiert
remoteIP principal.ip Wert direkt kopiert
remoteHostname principal.hostname Wert direkt kopiert
remoteCountryCode principal.location.country_or_region Wert direkt kopiert
serverHostname target.hostname Wert direkt kopiert
serverName target.asset.hostname Wert direkt kopiert
method network.http.method Wert direkt kopiert
Protokoll network.application_protocol Wert direkt kopiert
Pfad target.url Wert direkt kopiert
uri network.http.referral_url Wert direkt kopiert
userAgent network.http.user_agent Wert direkt kopiert
responseCode network.http.response_code In Ganzzahl umgewandelt
responseSize network.received_bytes In vorzeichenlose Ganzzahl konvertiert
responseMillis additional.fields Als „response_millis“-Label zugeordnet
Tags security_result.category_details Array von Tag-Objekten, die Kategorien zugeordnet sind
headersIn additional.fields Anfrageheader, die als Schlüssel/Wert-Paare zugeordnet sind
headersOut additional.fields Antwortheader, die als Schlüssel/Wert-Paare zugeordnet sind
Content-Length event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
Accept-Language event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
CDN-Loop event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
Cloud-WAF-Key event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
Fastly-Client event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
Keep-Alive event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
Content-Type event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
Fastly-Orig-Accept-Encoding event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
Fastly-SSL event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
Via event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
X-Cloud-Trace-Context event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
X-Forwarded-Server event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
fastly_csi_request_id event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
x-sigsci-traceid event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.responseMillis event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
X_Varnish event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
X_Timer event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
type event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
payload.id event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.id event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
payload.type event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
Connection event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
created event.idm.read_only_udm.additional.fields Aus Änderungsprotokoll zugeordnet
Host event.idm.read_only_udm.principal.hostname Aus Änderungsprotokoll zugeordnet
Host event.idm.read_only_udm.principal.asset.hostname Aus Änderungsprotokoll zugeordnet
User_Agent event.idm.read_only_udm.network.http.user_agent Aus Änderungsprotokoll zugeordnet
link event.idm.read_only_udm.network.http.referral_url Aus Änderungsprotokoll zugeordnet
x-sigsci-tlscipher event.idm.read_only_udm.network.tls.cipher Aus Änderungsprotokoll zugeordnet
x-sigsci-tlsprotocol event.idm.read_only_udm.network.tls.version Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.serverHostname event.idm.read_only_udm.target.hostname Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.serverHostname event.idm.read_only_udm.target.asset.hostname Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.method event.idm.read_only_udm.network.http.method Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.path event.idm.read_only_udm.principal.file.full_path Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.responseCode event.idm.read_only_udm.network.http.response_code Aus Änderungsprotokoll zugeordnet
proto event.idm.read_only_udm.network.application_protocol Aus Änderungsprotokoll zugeordnet
proto_version event.idm.read_only_udm.network.application_protocol_version Aus Änderungsprotokoll zugeordnet
x-request-id event.idm.read_only_udm.metadata.product_log_id Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.responseSize event.idm.read_only_udm.network.received_bytes Aus Änderungsprotokoll zugeordnet
X_Forwarded_For event.idm.read_only_udm.principal.ip Aus Änderungsprotokoll zugeordnet
X_Forwarded_For event.idm.read_only_udm.principal.asset.ip Aus Änderungsprotokoll zugeordnet
payload.source event.idm.read_only_udm.principal.ip Aus Änderungsprotokoll zugeordnet
payload.source event.idm.read_only_udm.principal.asset.ip Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.remoteIP event.idm.read_only_udm.principal.ip Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.remoteIP event.idm.read_only_udm.principal.asset.ip Aus Änderungsprotokoll zugeordnet
payload.action event.idm.read_only_udm.security_result.action_details Aus Änderungsprotokoll zugeordnet
payload.remoteCountryCode event.idm.read_only_udm.principal.location.country_or_region Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.tags.detector event.idm.read_only_udm.security_result.detection_fields Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.tags.link event.idm.read_only_udm.security_result.detection_fields Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.tags.location event.idm.read_only_udm.security_result.detection_fields Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.tags.readaction event.idm.read_only_udm.security_result.detection_fields Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.tags.type event.idm.read_only_udm.security_result.detection_fields Aus Änderungsprotokoll zugeordnet
payload.exampleRequest.tags.value event.idm.read_only_udm.security_result.detection_fields Aus Änderungsprotokoll zugeordnet
payload.timestamp event.idm.read_only_udm.metadata.event_timestamp Aus Änderungsprotokoll zugeordnet
RL-orig-url event.idm.read_only_udm.target.url Aus Änderungsprotokoll zugeordnet

Änderungsprotokoll

Änderungsprotokoll für diesen Parser ansehen

Benötigen Sie weitere Hilfe? Antworten von Community-Mitgliedern und Google SecOps-Experten erhalten