Collecter les journaux Skyhigh Secure Web Gateway (sur site)
Ce document explique comment ingérer des journaux Skyhigh Secure Web Gateway (sur site) dans Google Security Operations à l'aide de Cloud Storage.
Skyhigh Secure Web Gateway (anciennement McAfee Web Gateway) est une solution de sécurité Web sur site qui fournit des fonctionnalités de détection des logiciels malveillants, de filtrage des URL, de contrôle des applications, de protection contre la perte de données et d'inspection HTTPS. Elle protège les organisations contre les menaces Web et applique des règles d'utilisation acceptable.
Avant de commencer
Assurez-vous de remplir les conditions suivantes :
- Une instance Google SecOps
- Accès privilégié à la console de gestion Skyhigh Secure Web Gateway
- Un projet Google Cloud avec l'API Cloud Storage activée
- Un serveur de collecte Linux avec un accès réseau à l'appareil Skyhigh Secure Web Gateway et un accès sortant à Cloud Storage
- Skyhigh Secure Web Gateway version 7.x ou ultérieure
Configurer le format du journal d'accès Skyhigh Secure Web Gateway
Configurez l'ensemble de règles du gestionnaire de journaux pour générer des entrées de journal d'accès au format JSON.
- Connectez-vous à la console de gestion Skyhigh Secure Web Gateway.
- Accédez à Stratégie > Ensembles de règles.
- Cliquez sur Gestionnaire de journaux dans le panneau de navigation de gauche.
- Développez l'ensemble de règles Default.
- Sélectionnez l'ensemble de règles Journal d'accès imbriqué.
- Cliquez sur Ajouter > Règle pour créer une règle.
- Configurez la règle avec les paramètres suivants :
- Nom : saisissez
Write access log data for collection. - Critères : sélectionnez Toujours.
- Action : sélectionnez Continuer.
- Événement : cliquez sur Ajouter > Événement.
- Nom : saisissez
- Dans la boîte de dialogue "Ajouter un événement" :
- Sélectionnez Définir User-Defined.logLine.
- Cliquez sur Paramètres.
- Créez la valeur de la ligne de journal en combinant les propriétés requises. Utilisez la propriété User-Defined.logLine pour concaténer les champs au format souhaité.
- Cliquez sur OK.
- Ajoutez un deuxième événement pour écrire la ligne de journal dans le fichier journal d'accès :
- Cliquez sur Ajouter > Événement.
- Sélectionnez Journalisation du système de fichiers.
- Cliquez sur Paramètres.
- Pour le paramètre message, sélectionnez User-Defined.logLine.
- Cliquez sur OK.
- Cliquez sur Terminer pour enregistrer la règle.
Cliquez sur Save Changes (Enregistrer les modifications) en haut de la page.
Configurer le déploiement automatique de la journalisation du système de fichiers
Configurez Skyhigh Secure Web Gateway pour qu'il transmette automatiquement les fichiers journaux d'accès au serveur de collecte.
- Dans la console Skyhigh Secure Web Gateway, accédez à Policy > Settings > Engines > File System Logging (Règle > Paramètres > Moteurs > Journalisation du système de fichiers).
- Sélectionnez les paramètres de configuration du journal d'accès.
- Développez Paramètres de rotation, de transfert et de suppression.
- Dans la section Auto Pushing (Transfert automatique) :
- Cochez la case Activer le transfert automatique.
- Dans le champ Destination, saisissez l'URL FTP ou HTTP du serveur de collecte :
- Exemple FTP :
ftp://COLLECTION_SERVER_IP:21/swg-logs/ - Exemple HTTP :
http://COLLECTION_SERVER_IP:9111/logloader/
- Exemple FTP :
- Dans le champ Nom d'utilisateur, saisissez le nom d'utilisateur du serveur de collecte.
- Dans le champ Mot de passe, saisissez le mot de passe du serveur de collecte.
- Dans la section Rotation, configurez l'intervalle de rotation en fonction du volume de vos journaux :
- Pour les environnements à volume élevé, définissez la rotation toutes les 5 à 15 minutes.
- Pour les environnements standards, définissez la rotation toutes les 30 à 60 minutes.
Cliquez sur Enregistrer les modifications.
Vérifier le préfixe du journal
- Dans la console Skyhigh Secure Web Gateway, accédez à Configuration > Appliances > Syslog > Log Prefix (Configuration > Appareils > Syslog > Préfixe du journal).
- Vérifiez que le préfixe est défini sur mwg.
Si le préfixe est différent, remplacez-le par mwg, puis cliquez sur Enregistrer les modifications.
Créer un bucket Cloud Storage
- Accédez à la consoleGoogle Cloud .
- Sélectionnez votre projet ou créez-en un.
- Dans le menu de navigation, accédez à Cloud Storage > Buckets.
- Cliquez sur Créer un bucket.
Fournissez les informations de configuration suivantes :
Paramètre Valeur Attribuez un nom au bucket Saisissez un nom unique (par exemple, skyhigh-swg-logs).Type d'emplacement Choisissez celle qui correspond le mieux à vos besoins (régionale, birégionale ou multirégionale). Emplacement Sélectionnez l'emplacement (par exemple, us-central1).Classe de stockage Standard (recommandé pour les journaux fréquemment consultés) Access control (Contrôle des accès) Uniforme (recommandé) Outils de protection Facultatif : Activez la gestion des versions d'objets ou la règle de conservation Cliquez sur Créer.
Configurer le serveur de collecte pour importer les journaux dans Cloud Storage
Configurez un serveur de collecte pour recevoir les fichiers journaux envoyés par Skyhigh Secure Web Gateway et les importer dans le bucket Cloud Storage.
Installer Google Cloud CLI
Sur le serveur de collecte, installez la gcloud CLI :
curl https://sdk.cloud.google.com | bash exec -l $SHELLInitialisez la gcloud CLI :
gcloud initAuthentifiez-vous avec un compte de service ou un compte utilisateur :
gcloud auth loginDéfinissez le projet par défaut :
gcloud config set project PROJECT_ID
Configurer un serveur FTP pour recevoir les journaux envoyés
Installez un serveur FTP sur le serveur de collecte (par exemple, vsftpd) :
sudo apt-get install vsftpd -yCréez un répertoire dédié pour les fichiers journaux transférés :
sudo mkdir -p /var/log/swg-logs sudo chown ftp:ftp /var/log/swg-logsConfigurez le serveur FTP pour autoriser l'accès en écriture au répertoire des journaux.
Démarrez le service FTP :
sudo systemctl enable vsftpd sudo systemctl start vsftpd
Créer le script d'importation Cloud Storage
Créez le script d'importation :
sudo mkdir -p /opt/swg-gcs-uploaderCréez le fichier
/opt/swg-gcs-uploader/upload_to_gcs.shavec le contenu suivant :#!/bin/bash LOG_DIR="/var/log/swg-logs" GCS_BUCKET="gs://skyhigh-swg-logs/swg-access-logs/" ARCHIVE_DIR="/var/log/swg-logs/archived" mkdir -p "$ARCHIVE_DIR" # Upload new log files to GCS for log_file in "$LOG_DIR"/*.log; do if [ -f "$log_file" ]; then gsutil cp "$log_file" "$GCS_BUCKET" if [ $? -eq 0 ]; then mv "$log_file" "$ARCHIVE_DIR/" echo "$(date): Uploaded and archived $(basename "$log_file")" else echo "$(date): Failed to upload $(basename "$log_file")" fi fi done # Clean up archived files older than 7 days find "$ARCHIVE_DIR" -type f -mtime +7 -deleteRendez le script exécutable :
sudo chmod +x /opt/swg-gcs-uploader/upload_to_gcs.shRemplacez
skyhigh-swg-logspar le nom réel du bucket Cloud Storage.
Planifier le script d'importation
Ouvrez l'éditeur crontab :
sudo crontab -eAjoutez l'entrée suivante pour exécuter l'importation toutes les 10 minutes :
*/10 * * * * /opt/swg-gcs-uploader/upload_to_gcs.sh >> /var/log/swg-gcs-uploader.log 2>&1Enregistrez la modification et quittez l'éditeur.
Vérifier l'importation
- Attendez que Skyhigh Secure Web Gateway transfère un fichier journal vers le serveur de collecte.
Vérifiez que le fichier journal est présent dans le répertoire des journaux :
ls -la /var/log/swg-logs/Exécutez manuellement le script d'importation pour le tester :
sudo /opt/swg-gcs-uploader/upload_to_gcs.shVérifiez que le fichier a été importé dans Cloud Storage :
gsutil ls gs://skyhigh-swg-logs/swg-access-logs/
Appliquer la configuration au cluster de gestion centralisée
Si vous exécutez plusieurs appliances Skyhigh Secure Web Gateway dans un cluster Central Management :
- Répétez la configuration de l'envoi automatique de la journalisation du système de fichiers sur chaque appareil du cluster.
La configuration de l'ensemble de règles du gestionnaire de journaux est synchronisée automatiquement sur l'ensemble du cluster.
Récupérer le compte de service Google SecOps
- Accédez à Paramètres > Gestion des données > Flux. Si vous utilisez une plate-forme SIEM uniquement, accédez à Paramètres > Flux.
- Cliquez sur Ajouter un flux d'actualités.
- Cliquez sur Configurer un flux unique.
- Dans le champ Nom du flux, saisissez un nom pour le flux (par exemple,
Skyhigh SWG Logs). - Sélectionnez Google Cloud Storage V2 comme Type de source.
- Sélectionnez McAfee Web Protection comme type de journal.
Cliquez sur Get Service Account (Obtenir un compte de service). Une adresse e-mail de compte de service unique s'affiche, par exemple :
chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.comCopiez cette adresse e-mail pour l'utiliser à l'étape suivante.
Cliquez sur Suivant.
Spécifiez les valeurs des paramètres d'entrée suivants :
URL du bucket de stockage : saisissez l'URI du bucket Cloud Storage avec le chemin d'accès du préfixe :
gs://skyhigh-swg-logs/swg-access-logs/Option de suppression de la source : sélectionnez l'option de suppression de votre choix :
- Jamais : ne supprime jamais les fichiers après les transferts (recommandé pour les tests).
- Supprimer les fichiers transférés : supprime les fichiers une fois le transfert réussi.
Supprimer les fichiers transférés et les répertoires vides : supprime les fichiers et les répertoires vides une fois le transfert réussi.
Âge maximal des fichiers : incluez les fichiers modifiés au cours d'un certain nombre de jours (180 jours par défaut).
Espace de noms de l'élément : espace de noms de l'élément
Étiquettes d'ingestion : étiquette à appliquer aux événements de ce flux
Cliquez sur Suivant.
Vérifiez la configuration de votre nouveau flux sur l'écran Finaliser, puis cliquez sur Envoyer.
Accorder des autorisations IAM au compte de service Google SecOps
- Accédez à Cloud Storage > Buckets.
- Cliquez sur
skyhigh-swg-logs. - Accédez à l'onglet Autorisations.
- Cliquez sur Accorder l'accès.
- Fournissez les informations de configuration suivantes :
- Ajouter des comptes principaux : collez l'adresse e-mail du compte de service Google SecOps.
- Attribuer des rôles : sélectionnez Lecteur d'objets Storage.
- Cliquez sur Enregistrer.
Table de mappage UDM
| Champ du journal | Mappage UDM | Logique |
|---|---|---|
| mediaType | additional.fields | Fusionné avec les libellés de mediaType, reputation, Ssl_scanned, av_scanned_up, av_scanned_down, rbi, dlp |
| réputation | additional.fields | |
| Ssl_scanned | additional.fields | |
| av_scanned_up | additional.fields | |
| av_scanned_down | additional.fields | |
| rbi | additional.fields | |
| dlp | additional.fields | |
| intermediary_ip1 | intermediary.ip | Fusionné à partir de intermediary_ip1, intermediary_ip2, client_ip |
| intermediary_ip2 | intermediary.ip | |
| client_ip | intermediary.ip | |
| intermediary_port | intermediary.port | Converti en entier |
| uriScheme | metadata.event_type | Défini sur "GENERIC_EVENT", remplacé par "NETWORK_HTTP" si uriScheme est défini sur ["http", "https"] |
| uriScheme | network.application_protocol | Définissez sur "HTTPS" si uriScheme correspond à "https", ou sur "HTTP" s'il correspond à "http". |
| http_action | network.http.method | Valeur copiée directement |
| user_agent_comment | network.http.parsed_user_agent | Converti en user-agent analysé |
| httpStatusCode | network.http.response_code | Converti en entier |
| user_agent_comment | network.http.user_agent | Valeur copiée directement |
| serverToClientBytes | network.received_bytes | Converti en uinteger |
| clientToServerBytes | network.sent_bytes | Converti en uinteger |
| Nom de fichier | principal.file.full_path | Valeur copiée directement |
| source_ip | principal.ip | Valeur copiée directement |
| pays | principal.location.country_or_region | Valeur copiée directement |
| process_name | principal.process.command_line | Valeur copiée directement |
| Ssl_client_prot | principal.resource.attribute.labels | Fusionné avec les étiquettes de Ssl_client_prot, Ssl_server_prot |
| Ssl_server_prot | principal.resource.attribute.labels | |
| url | principal.url | Valeur copiée directement |
| nom d'utilisateur | principal.user.userid | Valeur copiée directement |
| blockReason | security_result.action | Défini sur "ALLOW", remplacé par "BLOCK" si blockReason n'est pas vide |
| résultat | security_result.action_details | Valeur copiée directement |
| catégorie | security_result.category_details | Valeur copiée directement |
| virus | security_result.detection_fields | Fusionné avec les étiquettes de virus, Location, lastRule, applicationType, Mw_probablility, Discarded_host, domain_fronting_url |
| Emplacement | security_result.detection_fields | |
| lastRule | security_result.detection_fields | |
| applicationType | security_result.detection_fields | |
| Mw_probablility | security_result.detection_fields | |
| Discarded_host | security_result.detection_fields | |
| domain_fronting_url | security_result.detection_fields | |
| blockReason | security_result.summary | Valeur copiée directement |
| requested_path | target.file.full_path | Valeur copiée directement |
| requested_host | target.hostname | Valeur copiée directement |
| destination_ip | target.ip | Valeur copiée directement |
| userID | target.user.userid | Valeur copiée directement |
Journal des modifications
Afficher le journal des modifications de cet analyseur
Vous avez encore besoin d'aide ? Obtenez des réponses de membres de la communauté et de professionnels Google SecOps.