Collecter les journaux STIX Threat Intelligence

Compatible avec :

Ce document explique comment ingérer des journaux STIX Threat Intelligence dans Google Security Operations à l'aide de l'agent Bindplane.

STIX (Structured Threat Information Expression) est un langage et un format normalisés permettant de partager des indicateurs de compromission (IOC) et des données de renseignement sur les menaces entre les organisations. Les données STIX sont généralement reçues sous forme de fichiers JSON ou XML provenant de serveurs TAXII ou de plates-formes de renseignements sur les menaces. L'agent Bindplane collecte les fichiers de données STIX directement à partir du système de fichiers local.

Avant de commencer

Assurez-vous de remplir les conditions suivantes :

  • Une instance Google SecOps
  • Windows Server 2016 ou version ultérieure, ou hôte Linux avec systemd
  • Si vous exécutez l'agent derrière un proxy, assurez-vous que les ports de pare-feu sont ouverts conformément aux exigences de l'agent Bindplane.
  • Un client TAXII ou une plate-forme de renseignements sur les menaces qui enregistre les fichiers au format STIX (JSON ou XML) dans un répertoire local

Obtenir le fichier d'authentification d'ingestion Google SecOps

  1. Connectez-vous à la console Google SecOps.
  2. Accédez à Paramètres SIEM> Agents de collecte.
  3. Téléchargez le fichier d'authentification d'ingestion.

  4. Enregistrez le fichier de manière sécurisée sur le système sur lequel Bindplane sera installé.

Obtenir l'ID client Google SecOps

  1. Connectez-vous à la console Google SecOps.
  2. Accédez à Paramètres du SIEM > Profil.

  3. Copiez et enregistrez le numéro client dans la section Informations sur l'organisation.

Installer l'agent Bindplane

Installez l'agent Bindplane sur votre système d'exploitation Windows ou Linux en suivant les instructions ci-dessous.

Installation de Windows

  1. Ouvrez l'invite de commandes ou PowerShell en tant qu'administrateur.

  2. Exécutez la commande suivante :

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet

  3. Attendez la fin de l'installation.

  4. Vérifiez l'installation en exécutant la commande suivante :

    sc query observiq-otel-collector

    Le service doit être indiqué comme RUNNING (EN COURS D'EXÉCUTION).

Installation de Linux

  1. Ouvrez un terminal avec des privilèges root ou sudo.

  2. Exécutez la commande suivante :

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh

  3. Attendez la fin de l'installation.

  4. Vérifiez l'installation en exécutant la commande suivante :

    sudo systemctl status observiq-otel-collector

    Le service doit être indiqué comme actif (en cours d'exécution).

Autres ressources d'installation

Pour obtenir d'autres options d'installation et de dépannage, consultez le guide d'installation de l'agent Bindplane.

Configurer l'agent Bindplane pour ingérer les journaux et les envoyer à Google SecOps

Localiser le fichier de configuration

  • Linux :

    sudo nano /opt/observiq-otel-collector/config.yaml

  • Windows :

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"

Modifiez le fichier de configuration

  • Remplacez l'intégralité du contenu de config.yaml par la configuration suivante :

    receivers:
    filelog:
        include:
            - /var/log/stix/*.json
        start_at: beginning

exporters:
    chronicle/stix:
        compression: gzip
        creds_file_path: '/etc/bindplane-agent/ingestion-auth.json'
        customer_id: '<customer_id>'
        endpoint: malachiteingestion-pa.googleapis.com
        log_type: STIX
        raw_log_field: body
        ingestion_labels:
            env: production

service:
    pipelines:
        logs/stix_to_chronicle:
            receivers:
                - filelog
            exporters:
                - chronicle/stix

Paramètres de configuration

Remplacez les espaces réservés suivants :

  • Configuration du récepteur :

    • filelog : type de récepteur pour la collecte des fichiers journaux à partir du disque
    • include : liste des chemins d'accès aux fichiers à surveiller. Définissez ce paramètre sur le répertoire dans lequel les fichiers STIX sont enregistrés :
      • Linux : /var/log/stix/*.json
      • Windows : C:\Logs\stix\*.json
    • start_at : défini sur beginning pour lire les journaux existants ou sur end pour lire uniquement les nouvelles entrées

  • Configuration de l'exportateur :

    • stix : nom descriptif de l'exportateur.
    • creds_file_path : chemin d'accès complet au fichier d'authentification de l'ingestion :
      • Linux : /etc/bindplane-agent/ingestion-auth.json
      • Windows : C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
    • <customer_id> : ID client de l'étape précédente
    • endpoint : URL du point de terminaison régional :
      • États-Unis : malachiteingestion-pa.googleapis.com
      • Europe : europe-malachiteingestion-pa.googleapis.com
      • Asie : asia-southeast1-malachiteingestion-pa.googleapis.com
      • Pour obtenir la liste complète, consultez Points de terminaison régionaux.
    • STIX : type de journal tel qu'il apparaît dans Chronicle
    • ingestion_labels : étiquettes facultatives au format YAML (par exemple, env: production)

  • Configuration du pipeline :

    • stix_to_chronicle : nom descriptif du pipeline.

Enregistrez le fichier de configuration.

  • Après avoir modifié le fichier, enregistrez-le :
    • Linux : appuyez sur Ctrl+O, puis sur Enter, puis sur Ctrl+X.
    • Windows : cliquez sur Fichier > Enregistrer.

Redémarrez l'agent Bindplane pour appliquer les modifications.

  • Pour redémarrer l'agent Bindplane sous Linux, exécutez la commande suivante :

    sudo systemctl restart observiq-otel-collector

    1. Vérifiez que le service est en cours d'exécution :

      sudo systemctl status observiq-otel-collector

    2. Recherchez les erreurs dans les journaux :

      sudo journalctl -u observiq-otel-collector -f

  • Pour redémarrer l'agent Bindplane dans Windows, choisissez l'une des options suivantes :

    • Invite de commande ou PowerShell en tant qu'administrateur :

      net stop observiq-otel-collector && net start observiq-otel-collector

    • Console Services :

      1. Appuyez sur Win+R, saisissez services.msc, puis appuyez sur Entrée.
      2. Localisez observIQ OpenTelemetry Collector.
      3. Effectuez un clic droit, puis sélectionnez Redémarrer.

      4. Vérifiez que le service est en cours d'exécution :

        sc query observiq-otel-collector

      5. Recherchez les erreurs dans les journaux :

        type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"

Configurer la collecte de fichiers de données STIX

STIX est un format de données, et non un produit. Les données de renseignements sur les menaces STIX sont généralement reçues sous forme de fichiers JSON ou XML à partir de clients TAXII, de plates-formes de renseignements sur les menaces ou de téléchargements manuels. Vous devez vous assurer que ces fichiers sont placés dans un répertoire que l'agent Bindplane surveille.

Linux

  1. Créez un répertoire pour stocker les fichiers de données STIX :

    sudo mkdir -p /var/log/stix

  2. Configurez votre client TAXII ou votre plate-forme de renseignements sur les menaces pour enregistrer les fichiers STIX dans /var/log/stix/.

  3. Assurez-vous que le compte de service de l'agent Bindplane dispose d'un accès en lecture au répertoire :

    sudo chmod 755 /var/log/stix

Windows

  1. Créez un répertoire pour stocker les fichiers de données STIX :

    mkdir C:\Logs\stix

  2. Configurez votre client TAXII ou votre plate-forme de renseignements sur les menaces pour enregistrer les fichiers STIX dans `C:\Logs\stix`.

  3. Mettez à jour le chemin d'accès à l'agent Bindplane include dans config.yaml pour qu'il corresponde :

    include:
    - C:\Logs\stix\*.json

Table de mappage UDM

Champ de journal Mappage UDM Logique
entity.administrative_domain Défini sur "TEST"
assetid_value entity.asset.asset_id Valeur issue de assetid_value si elle n'est pas vide
condition_label, related_indicators_relationship_label, related_indicators_scope, indicator_types_label, valid_start_time_label, controlled_structure_label, marking_structure_label entity.asset.attribute.labels Fusionné à partir de différents libellés
nom entity.file.full_path Valeur copiée directement
val, hash.simple_hash_value, MD5_val, hash_value entity.file.md5 Valeur de "val" si elle correspond à l'expression régulière MD5, sinon hash.simple_hash_value si le type est MD5, sinon MD5_val, sinon hash_value
valeur entity.file.names Valeur copiée directement
val, hash.simple_hash_value, sha1_val, hash_value entity.file.sha1 Valeur de "val" si elle correspond à l'expression régulière sha1, sinon hash.simple_hash_value si le type est SHA1, sinon sha1_val, sinon hash_value
val, hash.simple_hash_value, sha256val, sha_value, sha_value entity.file.sha256 Valeur de "val" si elle correspond à l'expression régulière sha256, sinon hash.simple_hash_value si le type est SHA256, sinon sha256val, sinon sha_value
observable.object.properties.value, dom, value, host, name, external_references.0.source_name entity.hostname Valeur de observable.object.properties.value si le type est FQDN, sinon dom de grok, sinon valeur si le type est domain-name, sinon host, sinon name si main_observable_type est domain/hostname, sinon external_references.0.source_name
ip_val, ipval, ip, source_ip, value, src_ip entity.ip Valeur de ip_val si la correspondance grok a été trouvée, sinon ipval si la catégorie est ipv4-addr, sinon ip à partir de la correspondance grok, sinon source_ip, sinon valeur si le type est ipv4, sinon src_ip à partir de grok
source_port, src_port entity.port Valeur de source_port ou src_port
indicator_label, extension_value1, extension_value2, extension_value3, extension_value4, revoked_value, spec_version_value, object_marking_ref_value, label_value entity.resource.attribute.labels Fusionné à partir de différents libellés
observable.object.properties.value, url_val, value, observable_properties_value entity.url Valeur de observable.object.properties.value si le type est URL, sinon url_val de grok, sinon valeur si le type est URL, sinon observable_properties_value si non vide
email_val, mail, value entity.user.email_addresses Valeur issue de email_val si la correspondance grok a été trouvée, sinon adresse e-mail issue de grok, sinon valeur si le type est email-addr
code temporel metadata.collected_timestamp Converti à l'aide de la correspondance de date ISO8601/RFC 3339
title, description metadata.description Valeur issue du titre ou de la description
entity_type metadata.entity_type Valeur copiée directement
timestamp, valid_until metadata.interval.end_time Converti à partir de timestamp ou valid_until à l'aide de la correspondance de date ISO8601/RFC 3339
timestamp, valid_from, created metadata.interval.start_time Converti à partir de timestamp, valid_from, created ou timestamp à l'aide de la correspondance de date ISO8601/RFC 3339
id metadata.product_entity_id Valeur copiée directement
version metadata.product_version Valeur copiée directement
threat_detail metadata.threat Fusionné à partir de threat_detail
threat_detail_category threat.category Valeur copiée directement
confidence_value, confidence, x_stix_confidence, x_ctix_confidence_score threat.confidence_details Valeur de confidence_value, sinon confiance si no_value, sinon x_stix_confidence, sinon x_ctix_confidence_score
value, confidence, x_ctix_confidence_score threat.confidence_score Valeur de "value" si le nom est "Confidence Score", sinon "confidence", sinon "x_ctix_confidence_score", convertie en float
property_label, sha512_value, observable_id, observable_object_id, keyword_label threat.detection_fields Fusionné à partir de différents libellés
description threat.description Valeur copiée directement
value, extensions.extension-definition--ea279b3e-5c71-4632-ac08-831c66a786ba.score threat.risk_score Valeur de la valeur si le nom est "Risk", sinon score des extensions, converti en float
metadata.product_name Défini sur "STIX"
metadata.vendor_name Défini sur "STIX"
dom event.idm.entity.entity.hostname Mappé à partir du journal des modifications
name event.idm.entity.entity.url Mappé à partir du journal des modifications
valid_from event.idm.entity.entity.resource.attribute.labels Mappé à partir du journal des modifications
valid_until event.idm.entity.entity.resource.attribute.labels Mappé à partir du journal des modifications
pattern_version event.idm.entity.entity.resource.attribute.labels Mappé à partir du journal des modifications
observable.object.properties.value.condition event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
handling.controlled_structure event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
handling.marking_structures.color event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
related_indicators.related_indicators event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
related_indicators.scope event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
indicator_types event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
valid_time_positions event.idm.entity.entity.asset.attribute.labels Mappé à partir du journal des modifications
observable.object.properties.custom_properties event.idm.entity.metadata.threat.detection_fields Mappé à partir du journal des modifications
observable.object.properties.value event.ioc.domain_and_ports.domain Mappé à partir du journal des modifications
mitre-extension-definition.extension_type entity.resource.attribute.labels.value Mappé à partir du journal des modifications
sco-extension-definition.extension_type entity.resource.attribute.labels.value Mappé à partir du journal des modifications
x_ctix_confidence_score threat_detail.confidence_score Mappé à partir du journal des modifications
modified timestamp Mappé à partir du journal des modifications
valid_from entity_event.metadata.interval.start_time Mappé à partir du journal des modifications
confidence threat_detail.confidence_score Mappé à partir du journal des modifications
name entity.entity.file.full_path Mappé à partir du journal des modifications
description threat_detail.description Mappé à partir du journal des modifications
external_references.0.source_name entity_event.entity.hostname Mappé à partir du journal des modifications
entity_type IP_ADDRESS Mappé à partir du journal des modifications
entity_type USER Mappé à partir du journal des modifications
entity_type FILE Mappé à partir du journal des modifications
entity_type DOMAIN_NAME Mappé à partir du journal des modifications

Journal des modifications

Afficher le journal des modifications pour ce parseur

Vous avez encore besoin d'aide ? Obtenez des réponses de membres de la communauté et de professionnels Google SecOps.