Mengumpulkan log Skyhigh Secure Web Gateway (On-Premises)
Dokumen ini menjelaskan cara menyerap log Skyhigh Secure Web Gateway (On-Premises) ke Google Security Operations menggunakan Cloud Storage.
Skyhigh Secure Web Gateway (sebelumnya McAfee Web Gateway) adalah solusi keamanan web lokal yang menyediakan deteksi malware, pemfilteran URL, kontrol aplikasi, pencegahan kebocoran data, dan pemeriksaan HTTPS untuk melindungi organisasi dari ancaman berbasis web dan menerapkan kebijakan penggunaan yang dapat diterima.
Sebelum memulai
Pastikan Anda memiliki prasyarat berikut:
- Instance Google SecOps
- Akses istimewa ke konsol pengelolaan Skyhigh Secure Web Gateway
- Project Google Cloud dengan Cloud Storage API diaktifkan
- Server pengumpulan berbasis Linux dengan akses jaringan ke peralatan Skyhigh Secure Web Gateway dan akses keluar ke Cloud Storage
- Skyhigh Secure Web Gateway versi 7.x atau yang lebih baru
Mengonfigurasi format log akses Skyhigh Secure Web Gateway
Konfigurasikan set aturan Pengelola Log untuk membuat entri log akses dalam format JSON.
- Login ke konsol pengelolaan Skyhigh Secure Web Gateway.
- Buka Policy > Rule Sets.
- Klik Log Handler di navigasi kiri.
- Luaskan set aturan Default.
- Pilih set aturan Access Log bertingkat.
- Klik Tambahkan > Aturan untuk membuat aturan baru.
- Konfigurasikan aturan dengan setelan berikut:
- Name: Masukkan
Write access log data for collection - Criteria: Pilih Always
- Tindakan: Pilih Lanjutkan
- Peristiwa: Klik Tambahkan > Peristiwa
- Name: Masukkan
- Dalam dialog Add Event:
- Pilih Set User-Defined.logLine.
- Klik Parameter.
- Buat nilai baris log dengan menggabungkan properti yang diperlukan. Gunakan properti User-Defined.logLine untuk menggabungkan kolom ke dalam format yang diinginkan.
- Klik Oke.
- Tambahkan peristiwa kedua untuk menulis baris log ke file log akses:
- Klik Tambahkan > Acara.
- Pilih File System Logging.
- Klik Parameter.
- Untuk parameter message, pilih User-Defined.logLine.
- Klik Oke.
- Klik Selesai untuk menyimpan aturan.
Klik Save Changes di bagian atas halaman.
Mengonfigurasi push otomatis Logging Sistem File
Konfigurasikan Skyhigh Secure Web Gateway untuk otomatis mengirim file log akses ke server pengumpulan.
- Di konsol Skyhigh Secure Web Gateway, buka Policy > Settings > Engines > File System Logging.
- Pilih setelan Access Log Configuration.
- Luaskan Settings for Rotation, Pushing, and Deletion.
- Di bagian Auto Pushing:
- Centang kotak Enable auto pushing.
- Di kolom Destination, masukkan URL FTP atau HTTP server pengumpulan:
- Contoh FTP:
ftp://COLLECTION_SERVER_IP:21/swg-logs/ - Contoh HTTP:
http://COLLECTION_SERVER_IP:9111/logloader/
- Contoh FTP:
- Di kolom Nama pengguna, masukkan nama pengguna untuk server pengumpulan.
- Di kolom Password, masukkan sandi untuk server pengumpulan.
- Di bagian Rotation, konfigurasikan interval rotasi berdasarkan volume log Anda:
- Untuk lingkungan bervolume tinggi, tetapkan rotasi ke setiap 5-15 menit
- Untuk lingkungan standar, tetapkan rotasi setiap 30-60 menit
Klik Simpan Perubahan.
Memverifikasi awalan log
- Di konsol Skyhigh Secure Web Gateway, buka Configuration > Appliances > Syslog > Log Prefix.
- Pastikan awalan ditetapkan ke mwg.
Jika awalan berbeda, ubah menjadi mwg dan klik Save Changes.
Membuat bucket Cloud Storage
- Buka konsolGoogle Cloud .
- Pilih project Anda atau buat project baru.
- Di menu navigasi, buka Cloud Storage > Buckets.
- Klik Create bucket.
Berikan detail konfigurasi berikut:
Setelan Nilai Memberi nama bucket Anda Masukkan nama yang unik secara global (misalnya, skyhigh-swg-logs)Location type Pilih sesuai kebutuhan Anda (Region, Dual-region, Multi-region) Location Pilih lokasi (misalnya, us-central1)Kelas penyimpanan Standard (direkomendasikan untuk log yang sering diakses) Kontrol akses Seragam (direkomendasikan) Alat perlindungan Opsional: Mengaktifkan pembuatan versi objek atau kebijakan retensi Klik Create.
Mengonfigurasi server pengumpulan untuk mengupload log ke Cloud Storage
Siapkan server pengumpulan untuk menerima file log yang dikirim oleh Skyhigh Secure Web Gateway dan upload file tersebut ke bucket Cloud Storage.
Menginstal Google Cloud CLI
Di server pengumpulan, instal gcloud CLI:
curl https://sdk.cloud.google.com | bash exec -l $SHELLLakukan inisialisasi gcloud CLI:
gcloud initMelakukan autentikasi dengan akun layanan atau akun pengguna:
gcloud auth loginTetapkan project default:
gcloud config set project PROJECT_ID
Mengonfigurasi server FTP untuk menerima log yang dikirim
Instal server FTP di server pengumpulan (misalnya, vsftpd):
sudo apt-get install vsftpd -yBuat direktori khusus untuk file log yang dikirim:
sudo mkdir -p /var/log/swg-logs sudo chown ftp:ftp /var/log/swg-logsKonfigurasikan server FTP untuk mengizinkan akses tulis ke direktori log.
Mulai layanan FTP:
sudo systemctl enable vsftpd sudo systemctl start vsftpd
Membuat skrip upload Cloud Storage
Buat skrip upload:
sudo mkdir -p /opt/swg-gcs-uploaderBuat file
/opt/swg-gcs-uploader/upload_to_gcs.shdengan konten berikut:#!/bin/bash LOG_DIR="/var/log/swg-logs" GCS_BUCKET="gs://skyhigh-swg-logs/swg-access-logs/" ARCHIVE_DIR="/var/log/swg-logs/archived" mkdir -p "$ARCHIVE_DIR" # Upload new log files to GCS for log_file in "$LOG_DIR"/*.log; do if [ -f "$log_file" ]; then gsutil cp "$log_file" "$GCS_BUCKET" if [ $? -eq 0 ]; then mv "$log_file" "$ARCHIVE_DIR/" echo "$(date): Uploaded and archived $(basename "$log_file")" else echo "$(date): Failed to upload $(basename "$log_file")" fi fi done # Clean up archived files older than 7 days find "$ARCHIVE_DIR" -type f -mtime +7 -deleteBuat agar skrip dapat dieksekusi:
sudo chmod +x /opt/swg-gcs-uploader/upload_to_gcs.shGanti
skyhigh-swg-logsdengan nama sebenarnya dari bucket Cloud Storage.
Menjadwalkan skrip upload
Buka editor crontab:
sudo crontab -eTambahkan entri berikut untuk menjalankan upload setiap 10 menit:
*/10 * * * * /opt/swg-gcs-uploader/upload_to_gcs.sh >> /var/log/swg-gcs-uploader.log 2>&1Simpan dan keluar.
Memverifikasi upload
- Tunggu Skyhigh Secure Web Gateway mengirim file log ke server pengumpulan.
Pastikan file log ada di direktori log:
ls -la /var/log/swg-logs/Jalankan skrip upload secara manual untuk menguji:
sudo /opt/swg-gcs-uploader/upload_to_gcs.shPastikan file telah diupload ke Cloud Storage:
gsutil ls gs://skyhigh-swg-logs/swg-access-logs/
Menerapkan konfigurasi ke cluster Pengelolaan Pusat
Jika Anda menjalankan beberapa perangkat Skyhigh Secure Web Gateway di cluster Central Management:
- Ulangi konfigurasi push otomatis Logging Sistem File di setiap peralatan dalam cluster.
Konfigurasi set aturan Pengendali Log disinkronkan secara otomatis di seluruh cluster.
Mengambil akun layanan Google SecOps
- Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
- Klik Tambahkan Feed Berita Baru.
- Klik Konfigurasi satu feed.
- Di kolom Nama feed, masukkan nama untuk feed (misalnya,
Skyhigh SWG Logs). - Pilih Google Cloud Storage V2 sebagai Source type.
- Pilih McAfee Web Protection sebagai Log type.
Klik Get Service Account. Email akun layanan yang unik akan ditampilkan, misalnya:
chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.comSalin alamat email ini untuk digunakan di langkah berikutnya.
Klik Berikutnya.
Tentukan nilai untuk parameter input berikut:
Storage bucket URL: Masukkan URI bucket Cloud Storage dengan jalur awalan:
gs://skyhigh-swg-logs/swg-access-logs/Opsi penghapusan sumber: Pilih opsi penghapusan sesuai preferensi Anda:
- Never: Tidak pernah menghapus file apa pun setelah transfer (direkomendasikan untuk pengujian).
- Delete transferred files: Menghapus file setelah transfer berhasil.
Delete transferred files and empty directories: Menghapus file dan direktori kosong setelah transfer berhasil.
Usia File Maksimum: Sertakan file yang diubah dalam jumlah hari terakhir (defaultnya adalah 180 hari)
Namespace aset: Namespace aset
Label penyerapan: Label yang akan diterapkan ke peristiwa dari feed ini
Klik Berikutnya.
Tinjau konfigurasi feed berita baru Anda di layar Finalize, lalu klik Submit.
Memberikan izin IAM ke akun layanan Google SecOps
- Buka Cloud Storage > Buckets.
- Klik
skyhigh-swg-logs. - Buka tab Izin.
- Klik Grant access.
- Berikan detail konfigurasi berikut:
- Add principals: Tempel email akun layanan Google SecOps
- Assign roles: Pilih Storage Object Viewer
- Klik Simpan.
Tabel pemetaan UDM
| Kolom Log | Pemetaan UDM | Logika |
|---|---|---|
| mediaType | additional.fields | Digabungkan dengan label dari mediaType, reputation, Ssl_scanned, av_scanned_up, av_scanned_down, rbi, dlp |
| reputasi | additional.fields | |
| Ssl_scanned | additional.fields | |
| av_scanned_up | additional.fields | |
| av_scanned_down | additional.fields | |
| rbi | additional.fields | |
| dlp | additional.fields | |
| intermediary_ip1 | intermediary.ip | Digabungkan dari intermediary_ip1, intermediary_ip2, client_ip |
| intermediary_ip2 | intermediary.ip | |
| client_ip | intermediary.ip | |
| intermediary_port | intermediary.port | Dikonversi ke bilangan bulat |
| uriScheme | metadata.event_type | Ditetapkan ke "GENERIC_EVENT", diganti menjadi "NETWORK_HTTP" jika uriScheme dalam ["http", "https"] |
| uriScheme | network.application_protocol | Tetapkan ke "HTTPS" jika uriScheme cocok dengan "https", "HTTP" jika cocok dengan "http" |
| http_action | network.http.method | Nilai disalin langsung |
| user_agent_comment | network.http.parsed_user_agent | Dikonversi menjadi agen pengguna yang diuraikan |
| httpStatusCode | network.http.response_code | Dikonversi ke bilangan bulat |
| user_agent_comment | network.http.user_agent | Nilai disalin langsung |
| serverToClientBytes | network.received_bytes | Dikonversi ke uinteger |
| clientToServerBytes | network.sent_bytes | Dikonversi ke uinteger |
| Nama file | principal.file.full_path | Nilai disalin langsung |
| source_ip | principal.ip | Nilai disalin langsung |
| country | principal.location.country_or_region | Nilai disalin langsung |
| process_name | principal.process.command_line | Nilai disalin langsung |
| Ssl_client_prot | principal.resource.attribute.labels | Digabungkan dengan label dari Ssl_client_prot, Ssl_server_prot |
| Ssl_server_prot | principal.resource.attribute.labels | |
| url | principal.url | Nilai disalin langsung |
| nama pengguna | principal.user.userid | Nilai disalin langsung |
| blockReason | security_result.action | Ditetapkan ke "ALLOW", diganti menjadi "BLOCK" jika blockReason tidak kosong |
| hasil | security_result.action_details | Nilai disalin langsung |
| category | security_result.category_details | Nilai disalin langsung |
| virus | security_result.detection_fields | Digabungkan dengan label dari virus, Location, lastRule, applicationType, Mw_probablility, Discarded_host, domain_fronting_url |
| Lokasi | security_result.detection_fields | |
| lastRule | security_result.detection_fields | |
| applicationType | security_result.detection_fields | |
| Mw_probablility | security_result.detection_fields | |
| Discarded_host | security_result.detection_fields | |
| domain_fronting_url | security_result.detection_fields | |
| blockReason | security_result.summary | Nilai disalin langsung |
| requested_path | target.file.full_path | Nilai disalin langsung |
| requested_host | target.hostname | Nilai disalin langsung |
| destination_ip | target.ip | Nilai disalin langsung |
| userID | target.user.userid | Nilai disalin langsung |
Log Perubahan
Melihat Log Perubahan untuk parser ini
Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.