Mengumpulkan log Skyhigh Secure Web Gateway (On-Premises)

Didukung di:

Dokumen ini menjelaskan cara menyerap log Skyhigh Secure Web Gateway (On-Premises) ke Google Security Operations menggunakan Cloud Storage.

Skyhigh Secure Web Gateway (sebelumnya McAfee Web Gateway) adalah solusi keamanan web lokal yang menyediakan deteksi malware, pemfilteran URL, kontrol aplikasi, pencegahan kebocoran data, dan pemeriksaan HTTPS untuk melindungi organisasi dari ancaman berbasis web dan menerapkan kebijakan penggunaan yang dapat diterima.

Sebelum memulai

Pastikan Anda memiliki prasyarat berikut:

  • Instance Google SecOps
  • Akses istimewa ke konsol pengelolaan Skyhigh Secure Web Gateway
  • Project Google Cloud dengan Cloud Storage API diaktifkan
  • Server pengumpulan berbasis Linux dengan akses jaringan ke peralatan Skyhigh Secure Web Gateway dan akses keluar ke Cloud Storage
  • Skyhigh Secure Web Gateway versi 7.x atau yang lebih baru

Mengonfigurasi format log akses Skyhigh Secure Web Gateway

Konfigurasikan set aturan Pengelola Log untuk membuat entri log akses dalam format JSON.

  1. Login ke konsol pengelolaan Skyhigh Secure Web Gateway.
  2. Buka Policy > Rule Sets.
  3. Klik Log Handler di navigasi kiri.
  4. Luaskan set aturan Default.
  5. Pilih set aturan Access Log bertingkat.
  6. Klik Tambahkan > Aturan untuk membuat aturan baru.
  7. Konfigurasikan aturan dengan setelan berikut:
    • Name: Masukkan Write access log data for collection
    • Criteria: Pilih Always
    • Tindakan: Pilih Lanjutkan
    • Peristiwa: Klik Tambahkan > Peristiwa
  8. Dalam dialog Add Event:
    1. Pilih Set User-Defined.logLine.
    2. Klik Parameter.
    3. Buat nilai baris log dengan menggabungkan properti yang diperlukan. Gunakan properti User-Defined.logLine untuk menggabungkan kolom ke dalam format yang diinginkan.
    4. Klik Oke.
  9. Tambahkan peristiwa kedua untuk menulis baris log ke file log akses:
    1. Klik Tambahkan > Acara.
    2. Pilih File System Logging.
    3. Klik Parameter.
    4. Untuk parameter message, pilih User-Defined.logLine.
    5. Klik Oke.
  10. Klik Selesai untuk menyimpan aturan.
  11. Klik Save Changes di bagian atas halaman.

Mengonfigurasi push otomatis Logging Sistem File

Konfigurasikan Skyhigh Secure Web Gateway untuk otomatis mengirim file log akses ke server pengumpulan.

  1. Di konsol Skyhigh Secure Web Gateway, buka Policy > Settings > Engines > File System Logging.
  2. Pilih setelan Access Log Configuration.
  3. Luaskan Settings for Rotation, Pushing, and Deletion.
  4. Di bagian Auto Pushing:
    1. Centang kotak Enable auto pushing.
    2. Di kolom Destination, masukkan URL FTP atau HTTP server pengumpulan:
      • Contoh FTP: ftp://COLLECTION_SERVER_IP:21/swg-logs/
      • Contoh HTTP: http://COLLECTION_SERVER_IP:9111/logloader/
    3. Di kolom Nama pengguna, masukkan nama pengguna untuk server pengumpulan.
    4. Di kolom Password, masukkan sandi untuk server pengumpulan.
  5. Di bagian Rotation, konfigurasikan interval rotasi berdasarkan volume log Anda:
    • Untuk lingkungan bervolume tinggi, tetapkan rotasi ke setiap 5-15 menit
    • Untuk lingkungan standar, tetapkan rotasi setiap 30-60 menit
  6. Klik Simpan Perubahan.

Memverifikasi awalan log

  1. Di konsol Skyhigh Secure Web Gateway, buka Configuration > Appliances > Syslog > Log Prefix.
  2. Pastikan awalan ditetapkan ke mwg.
  3. Jika awalan berbeda, ubah menjadi mwg dan klik Save Changes.

Membuat bucket Cloud Storage

  1. Buka konsolGoogle Cloud .
  2. Pilih project Anda atau buat project baru.
  3. Di menu navigasi, buka Cloud Storage > Buckets.
  4. Klik Create bucket.
  5. Berikan detail konfigurasi berikut:

    Setelan Nilai
    Memberi nama bucket Anda Masukkan nama yang unik secara global (misalnya, skyhigh-swg-logs)
    Location type Pilih sesuai kebutuhan Anda (Region, Dual-region, Multi-region)
    Location Pilih lokasi (misalnya, us-central1)
    Kelas penyimpanan Standard (direkomendasikan untuk log yang sering diakses)
    Kontrol akses Seragam (direkomendasikan)
    Alat perlindungan Opsional: Mengaktifkan pembuatan versi objek atau kebijakan retensi
  6. Klik Create.

Mengonfigurasi server pengumpulan untuk mengupload log ke Cloud Storage

Siapkan server pengumpulan untuk menerima file log yang dikirim oleh Skyhigh Secure Web Gateway dan upload file tersebut ke bucket Cloud Storage.

Menginstal Google Cloud CLI

  1. Di server pengumpulan, instal gcloud CLI:

    curl https://sdk.cloud.google.com | bash
    exec -l $SHELL
    
  2. Lakukan inisialisasi gcloud CLI:

    gcloud init
    
  3. Melakukan autentikasi dengan akun layanan atau akun pengguna:

    gcloud auth login
    
  4. Tetapkan project default:

    gcloud config set project PROJECT_ID
    

Mengonfigurasi server FTP untuk menerima log yang dikirim

  1. Instal server FTP di server pengumpulan (misalnya, vsftpd):

    sudo apt-get install vsftpd -y
    
  2. Buat direktori khusus untuk file log yang dikirim:

    sudo mkdir -p /var/log/swg-logs
    sudo chown ftp:ftp /var/log/swg-logs
    
  3. Konfigurasikan server FTP untuk mengizinkan akses tulis ke direktori log.

  4. Mulai layanan FTP:

    sudo systemctl enable vsftpd
    sudo systemctl start vsftpd
    

Membuat skrip upload Cloud Storage

  1. Buat skrip upload:

    sudo mkdir -p /opt/swg-gcs-uploader
    
  2. Buat file /opt/swg-gcs-uploader/upload_to_gcs.sh dengan konten berikut:

    #!/bin/bash
    LOG_DIR="/var/log/swg-logs"
    GCS_BUCKET="gs://skyhigh-swg-logs/swg-access-logs/"
    ARCHIVE_DIR="/var/log/swg-logs/archived"
    
    mkdir -p "$ARCHIVE_DIR"
    
    # Upload new log files to GCS
    for log_file in "$LOG_DIR"/*.log; do
        if [ -f "$log_file" ]; then
            gsutil cp "$log_file" "$GCS_BUCKET"
            if [ $? -eq 0 ]; then
                mv "$log_file" "$ARCHIVE_DIR/"
                echo "$(date): Uploaded and archived $(basename "$log_file")"
            else
                echo "$(date): Failed to upload $(basename "$log_file")"
            fi
        fi
    done
    
    # Clean up archived files older than 7 days
    find "$ARCHIVE_DIR" -type f -mtime +7 -delete
    
  3. Buat agar skrip dapat dieksekusi:

    sudo chmod +x /opt/swg-gcs-uploader/upload_to_gcs.sh
    
  4. Ganti skyhigh-swg-logs dengan nama sebenarnya dari bucket Cloud Storage.

Menjadwalkan skrip upload

  1. Buka editor crontab:

    sudo crontab -e
    
  2. Tambahkan entri berikut untuk menjalankan upload setiap 10 menit:

    */10 * * * * /opt/swg-gcs-uploader/upload_to_gcs.sh >> /var/log/swg-gcs-uploader.log 2>&1
    
  3. Simpan dan keluar.

Memverifikasi upload

  1. Tunggu Skyhigh Secure Web Gateway mengirim file log ke server pengumpulan.
  2. Pastikan file log ada di direktori log:

    ls -la /var/log/swg-logs/
    
  3. Jalankan skrip upload secara manual untuk menguji:

    sudo /opt/swg-gcs-uploader/upload_to_gcs.sh
    
  4. Pastikan file telah diupload ke Cloud Storage:

    gsutil ls gs://skyhigh-swg-logs/swg-access-logs/
    

Menerapkan konfigurasi ke cluster Pengelolaan Pusat

Jika Anda menjalankan beberapa perangkat Skyhigh Secure Web Gateway di cluster Central Management:

  1. Ulangi konfigurasi push otomatis Logging Sistem File di setiap peralatan dalam cluster.
  2. Konfigurasi set aturan Pengendali Log disinkronkan secara otomatis di seluruh cluster.

Mengambil akun layanan Google SecOps

  1. Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
  2. Klik Tambahkan Feed Berita Baru.
  3. Klik Konfigurasi satu feed.
  4. Di kolom Nama feed, masukkan nama untuk feed (misalnya, Skyhigh SWG Logs).
  5. Pilih Google Cloud Storage V2 sebagai Source type.
  6. Pilih McAfee Web Protection sebagai Log type.
  7. Klik Get Service Account. Email akun layanan yang unik akan ditampilkan, misalnya:

    chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.com
    
  8. Salin alamat email ini untuk digunakan di langkah berikutnya.

  9. Klik Berikutnya.

  10. Tentukan nilai untuk parameter input berikut:

    • Storage bucket URL: Masukkan URI bucket Cloud Storage dengan jalur awalan:

      gs://skyhigh-swg-logs/swg-access-logs/
      
    • Opsi penghapusan sumber: Pilih opsi penghapusan sesuai preferensi Anda:

      • Never: Tidak pernah menghapus file apa pun setelah transfer (direkomendasikan untuk pengujian).
      • Delete transferred files: Menghapus file setelah transfer berhasil.
      • Delete transferred files and empty directories: Menghapus file dan direktori kosong setelah transfer berhasil.

      • Usia File Maksimum: Sertakan file yang diubah dalam jumlah hari terakhir (defaultnya adalah 180 hari)

      • Namespace aset: Namespace aset

      • Label penyerapan: Label yang akan diterapkan ke peristiwa dari feed ini

  11. Klik Berikutnya.

  12. Tinjau konfigurasi feed berita baru Anda di layar Finalize, lalu klik Submit.

Memberikan izin IAM ke akun layanan Google SecOps

  1. Buka Cloud Storage > Buckets.
  2. Klik skyhigh-swg-logs.
  3. Buka tab Izin.
  4. Klik Grant access.
  5. Berikan detail konfigurasi berikut:
    • Add principals: Tempel email akun layanan Google SecOps
    • Assign roles: Pilih Storage Object Viewer
  6. Klik Simpan.

Tabel pemetaan UDM

Kolom Log Pemetaan UDM Logika
mediaType additional.fields Digabungkan dengan label dari mediaType, reputation, Ssl_scanned, av_scanned_up, av_scanned_down, rbi, dlp
reputasi additional.fields
Ssl_scanned additional.fields
av_scanned_up additional.fields
av_scanned_down additional.fields
rbi additional.fields
dlp additional.fields
intermediary_ip1 intermediary.ip Digabungkan dari intermediary_ip1, intermediary_ip2, client_ip
intermediary_ip2 intermediary.ip
client_ip intermediary.ip
intermediary_port intermediary.port Dikonversi ke bilangan bulat
uriScheme metadata.event_type Ditetapkan ke "GENERIC_EVENT", diganti menjadi "NETWORK_HTTP" jika uriScheme dalam ["http", "https"]
uriScheme network.application_protocol Tetapkan ke "HTTPS" jika uriScheme cocok dengan "https", "HTTP" jika cocok dengan "http"
http_action network.http.method Nilai disalin langsung
user_agent_comment network.http.parsed_user_agent Dikonversi menjadi agen pengguna yang diuraikan
httpStatusCode network.http.response_code Dikonversi ke bilangan bulat
user_agent_comment network.http.user_agent Nilai disalin langsung
serverToClientBytes network.received_bytes Dikonversi ke uinteger
clientToServerBytes network.sent_bytes Dikonversi ke uinteger
Nama file principal.file.full_path Nilai disalin langsung
source_ip principal.ip Nilai disalin langsung
country principal.location.country_or_region Nilai disalin langsung
process_name principal.process.command_line Nilai disalin langsung
Ssl_client_prot principal.resource.attribute.labels Digabungkan dengan label dari Ssl_client_prot, Ssl_server_prot
Ssl_server_prot principal.resource.attribute.labels
url principal.url Nilai disalin langsung
nama pengguna principal.user.userid Nilai disalin langsung
blockReason security_result.action Ditetapkan ke "ALLOW", diganti menjadi "BLOCK" jika blockReason tidak kosong
hasil security_result.action_details Nilai disalin langsung
category security_result.category_details Nilai disalin langsung
virus security_result.detection_fields Digabungkan dengan label dari virus, Location, lastRule, applicationType, Mw_probablility, Discarded_host, domain_fronting_url
Lokasi security_result.detection_fields
lastRule security_result.detection_fields
applicationType security_result.detection_fields
Mw_probablility security_result.detection_fields
Discarded_host security_result.detection_fields
domain_fronting_url security_result.detection_fields
blockReason security_result.summary Nilai disalin langsung
requested_path target.file.full_path Nilai disalin langsung
requested_host target.hostname Nilai disalin langsung
destination_ip target.ip Nilai disalin langsung
userID target.user.userid Nilai disalin langsung

Log Perubahan

Melihat Log Perubahan untuk parser ini

Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.