Collecter les journaux de renseignements sur les menaces STIX

Compatible avec :

Ce document explique comment ingérer des journaux de renseignements sur les menaces STIX dans Google Security Operations à l'aide de l'agent Bindplane.

STIX (Structured Threat Information Expression) est un langage et un format normalisés permettant de partager des indicateurs de compromission (IOC) et des données de renseignement sur les menaces entre les organisations. Les données STIX sont généralement reçues sous forme de fichiers JSON ou XML provenant de serveurs TAXII ou de plates-formes de renseignement sur les menaces. L'agent Bindplane collecte les fichiers de données STIX directement à partir du système de fichiers local.

Avant de commencer

Assurez-vous de remplir les conditions suivantes :

  • Une instance Google SecOps
  • Windows Server 2016 ou version ultérieure, ou hôte Linux avec systemd
  • Si vous exécutez l'agent derrière un proxy, assurez-vous que les ports du pare-feu sont ouverts conformément aux exigences de l'agent BindPlane.
  • Un client TAXII ou une plate-forme de renseignement sur les menaces qui enregistre des fichiers au format STIX (JSON ou XML) dans un répertoire local

Obtenir les identifiants Google SecOps pour l'agent Bindplane

Pour authentifier l'agent Bindplane auprès de Google SecOps, choisissez l'une des méthodes suivantes :

  • Nouveaux déploiements : utilisez l'API Chronicle (option 1).
  • Déploiements existants : continuez à utiliser le fichier d'authentification pour l'ingestion (option 2) jusqu'à l'arrêt de l'API Ingestion le 20 juillet 2027.
  1. Connectez-vous à la consoleGoogle Cloud et sélectionnez le projet Google Cloud associé à votre instance Google SecOps.
  2. Accédez à IAM et administration > Comptes de service.
  3. Cliquez sur Créer un compte de service.
  4. Fournissez les informations de configuration suivantes :
    • Nom du compte de service : saisissez un nom pour le compte (par exemple, bindplane-ingest).
    • Description du compte de service : saisissez une description (par exemple, Bindplane agent log ingestion).
  5. Cliquez sur Créer et continuer.
  6. Dans la section Autoriser ce compte de service à accéder au projet, cliquez sur Sélectionner un rôle, puis sélectionnez Éditeur Chronicle.
  7. Cliquez sur Continue (Continuer), puis sur Done (OK).
  8. Cliquez sur le compte de service que vous avez créé, puis accédez à l'onglet Clés.
  9. Cliquez sur Ajouter une clé > Créer une clé.
  10. Sélectionnez JSON, puis cliquez sur Créer. Le fichier de clé est téléchargé sur votre ordinateur.
  11. Enregistrez le fichier de clé sous le nom ingestion-auth.json dans le répertoire du collecteur Bindplane (/opt/observiq-otel-collector/ingestion-auth.json sous Linux ou C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json sous Windows), ou mettez à jour creds_file_path dans config.yaml pour qu'il corresponde au chemin d'accès où vous l'enregistrez.
  12. Accédez à IAM et administration > Paramètres, puis copiez le numéro du projet. Vous en aurez besoin pour la configuration de l'exportateur.

Option 2 : Télécharger le fichier d'authentification d'ingestion (ancien)

  1. Connectez-vous à la console Google SecOps.
  2. Accédez à Paramètres SIEM> Agents de collecte.
  3. Téléchargez le fichier d'authentification d'ingestion.
  4. Enregistrez le fichier de manière sécurisée sur le système où l'agent BindPlane sera installé.

Obtenir l'ID client Google SecOps

  1. Connectez-vous à la console Google SecOps.
  2. Accédez à Paramètres SIEM > Profil.

  3. Copiez et enregistrez le numéro client dans la section Détails de l'organisation.

Installer l'agent BindPlane

Installez l'agent Bindplane sur votre système d'exploitation Windows ou Linux en suivant les instructions ci-dessous.

Installation de Windows

  1. Ouvrez l'invite de commandes ou PowerShell en tant qu'administrateur.

  2. Exécutez la commande suivante :

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet

  3. Attendez la fin de l'installation.

  4. Vérifiez l'installation en exécutant la commande suivante :

    sc query observiq-otel-collector

    Le service doit s'afficher comme étant EN COURS D'EXÉCUTION.

Installation sous Linux

  1. Ouvrez un terminal avec des privilèges root ou sudo.

  2. Exécutez la commande suivante :

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh

  3. Attendez la fin de l'installation.

  4. Vérifiez l'installation en exécutant la commande suivante :

    sudo systemctl status observiq-otel-collector

    Le service doit s'afficher comme actif (en cours d'exécution).

Ressources d'installation supplémentaires

Pour en savoir plus sur les options d'installation et le dépannage, consultez le guide d'installation de l'agent Bindplane.

Configurer l'agent Bindplane pour ingérer les journaux et les envoyer à Google SecOps

Localiser le fichier de configuration

  • Linux :

    sudo nano /opt/observiq-otel-collector/config.yaml

  • Windows :

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"

Modifiez le fichier de configuration

  • Remplacez l'intégralité du contenu de config.yaml par la configuration suivante :

    receivers:
  filelog:
    include:
      - /var/log/stix/*.json
    start_at: beginning

exporters:
  chronicle/stix:
    protocol: https
    # Region of your instance, for example us, europe, asia-southeast1
    location: <LOCATION>
    # Project number of the Google Cloud project linked to the instance
    project: '<PROJECT_NUMBER>'
    compression: gzip
    creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
    customer_id: '<customer_id>'
    endpoint: chronicle.googleapis.com
    log_type: STIX
    raw_log_field: body
    ingestion_labels:
      env: production

service:
  pipelines:
    logs/stix_to_chronicle:
      receivers:
        - filelog
      exporters:
        - chronicle/stix

Paramètres de configuration

Remplacez les espaces réservés suivants :

  • Configuration du récepteur :

    • filelog : type de récepteur pour la collecte des fichiers journaux à partir du disque
    • include : liste des chemins d'accès aux fichiers à surveiller. Définissez ce paramètre sur le répertoire dans lequel les fichiers STIX sont enregistrés :
      • Linux : /var/log/stix/*.json
      • Windows : C:\Logs\stix\*.json
    • start_at : défini sur beginning pour lire les journaux existants ou sur end pour ne lire que les nouvelles entrées.

  • Configuration de l'exportateur :

    • stix : nom descriptif de l'exportateur
    • creds_file_path : chemin d'accès complet au fichier de clé JSON du compte de service (option 1) :
      • Linux : /opt/observiq-otel-collector/ingestion-auth.json
      • Windows : C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
    • <customer_id> : ID client de l'étape précédente
    • location : remplacez <LOCATION> par la région de votre instance Google SecOps (par exemple, us, europe ou asia-southeast1). L'exportateur préfixe chronicle.googleapis.com avec cette valeur. Pour obtenir la liste complète, consultez Points de terminaison régionaux.
    • project : remplacez <PROJECT_NUMBER> par le numéro de projet indiqué dans IAM et administration > Paramètres.
    • endpoint : laissez la valeur définie sur chronicle.googleapis.com.
    • STIX : type de journal exactement tel qu'il apparaît dans Chronicle
    • ingestion_labels : étiquettes facultatives au format YAML (par exemple, env: production)

  • Configuration du pipeline :

    • stix_to_chronicle : nom descriptif du pipeline.

Ancien exportateur d'API d'ingestion

  • Si vous utilisez le fichier d'authentification d'ingestion de l'option 2, remplacez le bloc exporters par le code suivant. Définissez creds_file_path sur le chemin d'accès au fichier d'authentification d'ingestion. Si votre instance se trouve en dehors des États-Unis, remplacez malachiteingestion-pa.googleapis.com par votre point de terminaison régional (par exemple, europe-malachiteingestion-pa.googleapis.com).

    exporters:
  chronicle/stix:
    compression: gzip
    creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
    customer_id: '<customer_id>'
    endpoint: malachiteingestion-pa.googleapis.com
    log_type: STIX
    raw_log_field: body
    ingestion_labels:
      env: production

Enregistrez le fichier de configuration.

  • Après avoir modifié le fichier, enregistrez-le :
    • Linux : appuyez sur Ctrl+O, puis sur Enter, puis sur Ctrl+X.
    • Windows : cliquez sur Fichier > Enregistrer.

Redémarrez l'agent Bindplane pour appliquer les modifications.

  • Pour redémarrer l'agent Bindplane sous Linux, exécutez la commande suivante :

    sudo systemctl restart observiq-otel-collector

    1. Vérifiez que le service est en cours d'exécution :

      sudo systemctl status observiq-otel-collector

    2. Recherchez les erreurs dans les journaux :

      sudo journalctl -u observiq-otel-collector -f

  • Pour redémarrer l'agent Bindplane dans Windows, choisissez l'une des options suivantes :

    • Invite de commande ou PowerShell en tant qu'administrateur :

      net stop observiq-otel-collector && net start observiq-otel-collector

    • Console Services :

      1. Appuyez sur Win+R, saisissez services.msc, puis appuyez sur Entrée.
      2. Localisez observIQ OpenTelemetry Collector.
      3. Effectuez un clic droit et sélectionnez Redémarrer.

      4. Vérifiez que le service est en cours d'exécution :

        sc query observiq-otel-collector

      5. Recherchez les erreurs dans les journaux :

        type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"

Configurer la collecte de fichiers de données STIX

STIX est un format de données, pas un produit. Les données de renseignement sur les menaces STIX sont généralement reçues sous forme de fichiers JSON ou XML provenant de clients TAXII, de plates-formes de renseignement sur les menaces ou de téléchargements manuels. Vous devez vous assurer que ces fichiers sont placés dans un répertoire que l'agent Bindplane surveille.

Linux

  1. Créez un répertoire pour stocker les fichiers de données STIX :

    sudo mkdir -p /var/log/stix

  2. Configurez votre client TAXII ou votre plate-forme de renseignement sur les menaces pour enregistrer les fichiers STIX dans /var/log/stix/.

  3. Assurez-vous que le compte de service de l'agent Bindplane dispose d'un accès en lecture au répertoire :

    sudo chmod 755 /var/log/stix

Windows

  1. Créez un répertoire pour stocker les fichiers de données STIX :

    mkdir C:\Logs\stix

  2. Configurez votre client TAXII ou votre plate-forme de renseignement sur les menaces pour enregistrer les fichiers STIX dans `C:\Logs\stix`.

  3. Mettez à jour le chemin d'accès include de l'agent Bindplane dans config.yaml pour qu'il corresponde à :

    include:
  - C:\Logs\stix\*.json

Table de mappage UDM

Champ de journal Mappage UDM Logique
entity.administrative_domain Définissez-le sur "TEST".
assetid_value entity.asset.asset_id Valeur issue de assetid_value si elle n'est pas vide
condition_label, related_indicators_relationship_label, related_indicators_scope, indicator_types_label, valid_start_time_label, controlled_structure_label, marking_structure_label entity.asset.attribute.labels Fusionné à partir de plusieurs libellés
nom entity.file.full_path Valeur copiée directement
val, hash.simple_hash_value, MD5_val, hash_value entity.file.md5 Valeur de "val" si elle correspond à l'expression régulière MD5, sinon hash.simple_hash_value si le type est MD5, sinon MD5_val, sinon hash_value
valeur entity.file.names Valeur copiée directement
val, hash.simple_hash_value, sha1_val, hash_value entity.file.sha1 Valeur de "val" si elle correspond à l'expression régulière sha1, sinon hash.simple_hash_value si le type est SHA1, sinon sha1_val, sinon hash_value
val, hash.simple_hash_value, sha256val, sha_value, sha_value entity.file.sha256 Valeur de "val" si elle correspond à l'expression régulière sha256, sinon hash.simple_hash_value si le type est SHA256, sinon sha256val, sinon sha_value
observable.object.properties.value, dom, value, host, name, external_references.0.source_name entity.hostname Valeur de observable.object.properties.value si le type est FQDN, sinon dom de grok, sinon valeur si le type est domain-name, sinon host, sinon nom si main_observable_type est domain/hostname, sinon external_references.0.source_name
ip_val, ipval, ip, source_ip, value, src_ip entity.ip Valeur de ip_val si grok correspond, sinon ipval si la catégorie est ipv4-addr, sinon ip du modèle grok, sinon source_ip, sinon valeur si le type est ipv4, sinon src_ip de grok
source_port, src_port entity.port Valeur de source_port ou src_port
indicator_label, extension_value1, extension_value2, extension_value3, extension_value4, revoked_value, spec_version_value, object_marking_ref_value, label_value entity.resource.attribute.labels Fusionné à partir de différents libellés
observable.object.properties.value, url_val, value, observable_properties_value entity.url Valeur de observable.object.properties.value si le type est URL, sinon url_val de grok, sinon valeur si le type est URL, sinon observable_properties_value si non vide
email_val, mail, value entity.user.email_addresses Valeur issue de email_val si la correspondance grok a été trouvée, sinon adresse e-mail issue de grok, sinon valeur si le type est email-addr
code temporel metadata.collected_timestamp Converti à l'aide de la correspondance de date ISO8601/RFC 3339
title, description metadata.description Valeur issue du titre ou de la description
entity_type metadata.entity_type Valeur copiée directement
timestamp, valid_until metadata.interval.end_time Converti à partir de "timestamp" ou "valid_until" à l'aide de la correspondance de date ISO8601/RFC 3339
timestamp, valid_from, created metadata.interval.start_time Converti à partir de timestamp, valid_from, created ou timestamp à l'aide de la correspondance de date ISO8601/RFC 3339
id metadata.product_entity_id Valeur copiée directement
version metadata.product_version Valeur copiée directement
threat_detail metadata.threat Fusionné à partir de threat_detail
threat_detail_category threat.category Valeur copiée directement
confidence_value, confidence, x_stix_confidence, x_ctix_confidence_score threat.confidence_details Valeur de confidence_value, sinon confiance si no_value, sinon x_stix_confidence, sinon x_ctix_confidence_score
value, confidence, x_ctix_confidence_score threat.confidence_score Valeur de la valeur si le nom est "Confidence Score", sinon "confidence", sinon "x_ctix_confidence_score", convertie en float
property_label, sha512_value, observable_id, observable_object_id, keyword_label threat.detection_fields Fusionné à partir de différents libellés
description threat.description Valeur copiée directement
value, extensions.extension-definition--ea279b3e-5c71-4632-ac08-831c66a786ba.score threat.risk_score Valeur de la valeur si le nom est "Risk", sinon score des extensions, converti en float
metadata.product_name Définissez cette option sur "STIX".
metadata.vendor_name Définissez cette option sur "STIX".
dom event.idm.entity.entity.hostname Mappé à partir du journal des modifications
name event.idm.entity.entity.url Mappé à partir du journal des modifications
valid_from event.idm.entity.entity.resource.attribute.labels Mappé à partir du journal des modifications
valid_until event.idm.entity.entity.resource.attribute.labels Mappé à partir du journal des modifications
pattern_version event.idm.entity.entity.resource.attribute.labels Mappé à partir du journal des modifications
observable.object.properties.value.condition event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
handling.controlled_structure event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
handling.marking_structures.color event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
related_indicators.related_indicators event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
related_indicators.scope event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
indicator_types event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
valid_time_positions event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
observable.object.properties.custom_properties event.idm.entity.metadata.threat.detection_fields Mappé à partir du journal des modifications
observable.object.properties.value event.ioc.domain_and_ports.domain Mappé à partir du journal des modifications
mitre-extension-definition.extension_type entity.resource.attribute.labels.value Mappé à partir du journal des modifications
sco-extension-definition.extension_type entity.resource.attribute.labels.value Mappé à partir du journal des modifications
x_ctix_confidence_score threat_detail.confidence_score Mappé à partir du journal des modifications
modified timestamp Mappé à partir du journal des modifications
valid_from entity_event.metadata.interval.start_time Mappé à partir du journal des modifications
confidence threat_detail.confidence_score Mappé à partir du journal des modifications
name entity.entity.file.full_path Mappé à partir du journal des modifications
description threat_detail.description Mappé à partir du journal des modifications
external_references.0.source_name entity_event.entity.hostname Mappé à partir du journal des modifications
entity_type IP_ADDRESS Mappé à partir du journal des modifications
entity_type USER Mappé à partir du journal des modifications
entity_type FILE Mappé à partir du journal des modifications
entity_type DOMAIN_NAME Mappé à partir du journal des modifications

Journal des modifications

Afficher le journal des modifications de cet analyseur

Vous avez encore besoin d'aide ? Obtenez des réponses de membres de la communauté et de professionnels Google SecOps.