Mengumpulkan log Fortinet Web Proxy

Versi Parser: 3.0

Didukung di:

Google SecOps SIEM

Dokumen ini menjelaskan cara menyerap log Fortinet Web Proxy ke Google Security Operations menggunakan agen Bindplane.

Proxy web Fortinet FortiGate menghasilkan log untuk sesi proxy eksplisit dan transparan, yang mencatat traffic HTTP/HTTPS, keputusan pemfilteran URL, dan peristiwa akses web. Log menggunakan format nilai kunci syslog dan menyertakan metadata jaringan, tindakan keamanan, dan informasi identitas pengguna.

Sebelum memulai

Pastikan Anda memiliki prasyarat berikut:

• Instance Google SecOps
• Windows Server 2016 atau yang lebih baru, atau host Linux dengan systemd
• Konektivitas jaringan antara agen Bindplane dan peralatan FortiGate
• Jika beroperasi dari balik proxy, pastikan port firewall terbuka sesuai dengan persyaratan agen Bindplane
• Akses istimewa ke peralatan FortiGate dengan izin administrator

Mendapatkan kredensial Google SecOps untuk agen Bindplane

Untuk mengautentikasi agen Bindplane ke Google SecOps, pilih salah satu metode berikut:

• Deployment baru: Gunakan Chronicle API (Opsi 1).
• Deployment lama: Terus gunakan file autentikasi penyerapan (Opsi 2) hingga Ingestion API dihentikan pada 20 Juli 2027.

Opsi 1: Membuat akun layanan untuk Chronicle API (direkomendasikan)

1. Login ke konsolGoogle Cloud dan pilih project Google Cloud yang ditautkan ke instance Google SecOps Anda.
2. Buka IAM & Admin > Service Accounts.
3. Klik Create service account.
4. Berikan detail konfigurasi berikut:
   • Service account name: Masukkan nama akun (misalnya, bindplane-ingest).
   • Service account description: Masukkan deskripsi (misalnya, Bindplane agent log ingestion).
5. Klik Create and continue.
6. Di bagian Grant this service account access to project, klik Select a role, lalu pilih Chronicle Editor.
7. Klik Continue lalu klik Done.
8. Klik akun layanan yang Anda buat, lalu buka tab Keys.
9. Klik Add key > Create new key.
10. Pilih JSON dan klik Create. File kunci akan didownload ke komputer Anda.
11. Simpan file kunci sebagai ingestion-auth.json di direktori kolektor Bindplane (/opt/observiq-otel-collector/ingestion-auth.json di Linux atau C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json di Windows), atau perbarui creds_file_path di config.yaml agar sesuai dengan jalur tempat Anda menyimpannya.
12. Buka IAM & Admin > Settings dan salin Project number. Anda akan memerlukannya untuk konfigurasi pengekspor.

Catatan: Kunci JSON adalah kredensial. Batasi akses ke file di host Bindplane dan rotasikan kunci sesuai dengan kebijakan organisasi Anda.

Opsi 2: Mendownload file autentikasi penyerapan (lama)

1. Login ke konsol Google SecOps.
2. Buka Settings > Data Management > Collection Agents. Jika Anda menggunakan platform khusus SIEM, buka Settings > Collection Agents.
3. Download file autentikasi penyerapan.
4. Simpan file dengan aman di sistem tempat agen Bindplane akan diinstal.

Catatan: File ini mengautentikasi agen ke Ingestion API lama (malachiteingestion-pa.googleapis.com), yang telah dijadwalkan Google untuk dihentikan pada 20 Juli 2027. Rencanakan untuk beralih ke Opsi 1 sebelum tanggal tersebut.

Mendapatkan ID pelanggan Google SecOps

1. Login ke konsol Google SecOps.
2. Buka Setelan > Administrasi > Profil. Jika Anda menggunakan platform khusus SIEM, buka Settings > Profile.

3. Salin dan simpan ID Pelanggan dari bagian Detail Organisasi.

   Catatan: ID pelanggan diperlukan untuk mengonfigurasi pengekspor agen Bindplane.

Menginstal agen Bindplane

Instal agen Bindplane di sistem operasi Windows atau Linux Anda sesuai dengan petunjuk berikut.

Penginstalan Windows

1. Buka Command Prompt atau PowerShell sebagai administrator.

2. Jalankan perintah berikut:

   msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
   

3. Tunggu hingga penginstalan selesai.

4. Verifikasi penginstalan dengan menjalankan:

   sc query observiq-otel-collector
   

   Layanan akan ditampilkan sebagai RUNNING.

Penginstalan Linux

1. Buka terminal dengan hak istimewa root atau sudo.

2. Jalankan perintah berikut:

   sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
   

3. Tunggu hingga penginstalan selesai.

4. Verifikasi penginstalan dengan menjalankan:

   sudo systemctl status observiq-otel-collector
   

   Layanan akan ditampilkan sebagai active (running).

Referensi penginstalan tambahan

Untuk opsi pemasangan dan pemecahan masalah tambahan, lihat Panduan pemasangan agen Bindplane.

Catatan: Konfigurasi pengekspor Chronicle API memerlukan kolektor Bindplane v1.106.0 atau yang lebih baru. Perintah sebelumnya akan menginstal rilis terbaru. Jika Anda mengupdate penginstalan yang ada, upgrade kolektor sebelum mengubah konfigurasi.

Mengonfigurasi agen Bindplane untuk menyerap syslog dan mengirimkannya ke Google SecOps

Menemukan file konfigurasi

• Linux:

  sudo nano /opt/observiq-otel-collector/config.yaml
  

• Windows:

  notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
  

Mengedit file konfigurasi

• Ganti seluruh konten config.yaml dengan konfigurasi berikut:

  receivers:
    udplog:
      listen_address: "0.0.0.0:514"
  
  exporters:
    chronicle/fortinet_webproxy:
      protocol: https
      # Region of your instance, for example us, europe, asia-southeast1
      location: <LOCATION>
      # Project number of the Google Cloud project linked to the instance
      project: '<PROJECT_NUMBER>'
      compression: gzip
      creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
      customer_id: '<customer_id>'
      endpoint: chronicle.googleapis.com
      log_type: FORTINET_WEBPROXY
      raw_log_field: body
      ingestion_labels:
        env: production
  
  service:
    pipelines:
      logs/webproxy_to_chronicle:
        receivers:
          - udplog
        exporters:
          - chronicle/fortinet_webproxy
  

Parameter konfigurasi

Ganti placeholder berikut:

• Konfigurasi penerima:

  • udplog: Jenis penerima berdasarkan protokol:
    • udplog untuk syslog UDP
    • tcplog untuk syslog TCP
  • 0.0.0.0: IP address to listen on:
    • 0.0.0.0 untuk memproses semua antarmuka (direkomendasikan)
    • Alamat IP tertentu untuk memproses satu antarmuka
  • 514: Nomor port yang akan diproses (misalnya, 514, 1514, 6514)

• Konfigurasi pengekspor:

  • fortinet_webproxy: Nama deskriptif untuk pengekspor
  • creds_file_path: Jalur lengkap ke file kunci JSON akun layanan (Opsi 1):
    • Linux: /opt/observiq-otel-collector/ingestion-auth.json
    • Windows: C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
  • <customer_id>: ID Pelanggan dari langkah sebelumnya
  • location: Ganti <LOCATION> dengan region instance Google SecOps Anda (misalnya, us, europe, atau asia-southeast1). Pengekspor mengawali chronicle.googleapis.com dengan nilai ini. Lihat Endpoint Regional untuk mengetahui daftar lengkapnya.
  • project: Ganti <PROJECT_NUMBER> dengan nomor project dari IAM & Admin > Settings.
  • endpoint: Tetap tetapkan ke chronicle.googleapis.com.
  • FORTINET_WEBPROXY: Jenis log persis seperti yang muncul di Chronicle
  • ingestion_labels: Label opsional dalam format YAML (misalnya, env: production)

• Konfigurasi pipeline:

  • webproxy_to_chronicle: Nama deskriptif untuk pipeline

Pengekspor API penyerapan lama

• Jika Anda menggunakan file autentikasi penyerapan dari Opsi 2, ganti blok exporters dengan kode berikut. Tetapkan creds_file_path ke jalur ke file autentikasi penyerapan, dan jika instance Anda berada di luar AS, ganti malachiteingestion-pa.googleapis.com dengan endpoint regional Anda (misalnya, europe-malachiteingestion-pa.googleapis.com).

  exporters:
    chronicle/fortinet_webproxy:
      compression: gzip
      creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
      customer_id: '<customer_id>'
      endpoint: malachiteingestion-pa.googleapis.com
      log_type: FORTINET_WEBPROXY
      raw_log_field: body
      ingestion_labels:
        env: production
  

Catatan: Pengekspor ini akan berhenti berfungsi saat Ingestion API dihentikan pada 20 Juli 2027.

Simpan file konfigurasi

• Setelah mengedit, simpan file:
  • Linux: Tekan Ctrl+O, lalu Enter, lalu Ctrl+X
  • Windows: Klik File > Save

Mulai ulang agen Bindplane untuk menerapkan perubahan

• Untuk memulai ulang agen Bindplane di Linux, jalankan perintah berikut:

  sudo systemctl restart observiq-otel-collector
  

  1. Pastikan layanan sedang berjalan:

     sudo systemctl status observiq-otel-collector
     

  2. Periksa log untuk mengetahui error:

     sudo journalctl -u observiq-otel-collector -f
     

• Untuk memulai ulang agen Bindplane di Windows, pilih salah satu opsi berikut:

  • Command Prompt atau PowerShell sebagai administrator:

    net stop observiq-otel-collector && net start observiq-otel-collector
    

  • Konsol Services:

    1. Tekan Win+R, ketik services.msc, lalu tekan Enter.
    2. Cari observIQ OpenTelemetry Collector.
    3. Klik kanan, lalu pilih Restart.

    4. Pastikan layanan sedang berjalan:

       sc query observiq-otel-collector
       

    5. Periksa log untuk mengetahui error:

       type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
       

Mengonfigurasi penerusan syslog proxy web Fortinet FortiGate

1. Login ke antarmuka web FortiGate.
2. Buka Log & Report > Log Settings.
3. Scroll ke bawah ke bagian Remote Logging and Archiving.
4. Di bagian Syslog, klik Add.
5. Berikan detail konfigurasi berikut:
   • Name: Masukkan nama deskriptif (misalnya, Chronicle-Bindplane).
   • IP Address/FQDN: Masukkan alamat IP host agen Bindplane (misalnya, 192.168.1.100).
   • Port: Masukkan 514 (harus cocok dengan port penerima agen Bindplane).
   • Protocol: Pilih UDP.
   • Minimum Level: Pilih Information atau Notification.

6. Pastikan kategori log Web Proxy diaktifkan. Atau, gunakan CLI untuk mengonfigurasi filter syslog:

   config log syslogd setting
       set status enable
       set server <BINDPLANE_AGENT_IP>
       set port 514
   end
   config log syslogd filter
       set filter "logid(0300)"
       set filter-type include
   end
   

   • Rentang ID log 0300 mencakup peristiwa proxy web. Sesuaikan filter sesuai dengan lingkungan Anda.
   • Ganti <BINDPLANE_AGENT_IP> dengan alamat IP host agen Bindplane.

7. Klik Oke untuk menyimpan.

8. Klik Apply di kanan atas untuk menerapkan konfigurasi.

9. Pastikan pesan syslog diterima dengan memeriksa log agen Bindplane.

Tabel pemetaan UDM

Kolom Log	Pemetaan UDM	Logika
group, profile, agent, subtype, catdesc, reqtype	additional.fields	Digabungkan dengan label yang dibuat dari setiap kolom
action, has_network, has_principal, has_target	metadata.event_type	Ditetapkan ke USER_LOGIN jika tindakan adalah auth-logon, atau NETWORK_HTTP jika has_network bernilai benar, atau NETWORK_CONNECTION jika has_principal dan has_target bernilai benar, atau STATUS_UPDATE jika has_principal bernilai benar, atau GENERIC_EVENT
eventtype	metadata.product_event_type	Nilai disalin langsung
logid	metadata.product_log_id	Nilai disalin langsung
	metadata.product_name	Tetapkan ke "FORTINET_WEBPROXY"
	metadata.vendor_name	Tetapkan ke "FORTINET_WEBPROXY"
pelanggan	network.application_protocol	Nilai disalin langsung jika layanan dalam HTTP, HTTPS
direction	network.direction	Setel ke INBOUND jika arahnya adalah incoming, inbound, response, atau OUTBOUND jika arahnya adalah outgoing, outbound
httpmethod	network.http.method	Nilai disalin langsung jika httpmethod dalam GET, POST
referralurl	network.http.referral_url	Nilai disalin langsung
proto, subtype, service	network.ip_protocol	Tetapkan ke UDP jika proto=17, TCP jika proto=6 atau subtype=wad, IP6IN4 jika proto=41, ICMP jika service=PING atau proto=1 atau service cocok dengan ICMP
rcvdbyte	network.received_bytes	Dikonversi ke bilangan bulat yang tidak bertanda tangan
sentbyte	network.sent_bytes	Dikonversi ke bilangan bulat yang tidak bertanda tangan
sessionid	network.session_id	Nilai disalin langsung
devname	principal.asset.hostname	Nilai disalin langsung
srcip	principal.asset.ip	Nilai disalin langsung
devname	principal.hostname	Nilai disalin langsung
srcip	principal.ip	Nilai disalin langsung
srccountry	principal.location.country_or_region	Nilai disalin langsung jika tidak Dicadangkan dan tidak kosong
srcport	principal.port	Dikonversi ke bilangan bulat
srcuuid	principal.user.product_object_id	Nilai disalin langsung
vd	principal.user.user_display_name	Nilai disalin langsung
pengguna	principal.user.userid	Nilai disalin langsung
filtername	security_result.about.resource.attribute.labels	Digabungkan dengan label yang dibuat dari filtername jika tidak kosong dan bukan -
tindakan	security_result.action	Setel ke BLOCK jika action=blocked, ALLOW jika action dalam accept, passthrough
devid, policyid, srcintf, srcintfrole, ratemethod, cat	security_result.detection_fields	Digabungkan dengan label yang dibuat dari setiap kolom
msg	security_result.description	Nilai disalin langsung
poluuid	security_result.rule_id	Nilai disalin langsung
policytype	security_result.rule_type	Nilai disalin langsung
level	security_result.severity	Setel ke HIGH jika level=warning, MEDIUM jika level=notice
jenis	security_result.summary	Nilai disalin langsung
dstip	target.asset.ip	Nilai disalin langsung
filename	target.file.full_path	Nilai disalin langsung
filetype	target.file.mime_type	Nilai disalin langsung
filesize	target.file.size	Dikonversi ke bilangan bulat yang tidak bertanda tangan
hostname	target.hostname	Nilai disalin langsung
dstip	target.ip	Nilai disalin langsung
dstcountry	target.location.country_or_region	Nilai disalin langsung
dstport	target.port	Dikonversi ke bilangan bulat
dstintf, dstintfrole	target.resource.attribute.labels	Digabungkan dengan label yang dibuat dari setiap kolom
dstuuid	target.resource.product_object_id	Nilai disalin langsung
url	target.url	Nilai disalin langsung
eventtime	event.idm.read_only_udm.metadata.event_timestamp	Dipetakan dari log perubahan
ts	event.idm.read_only_udm.metadata.collected_timestamp	Dipetakan dari log perubahan
transid	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
method	event.idm.read_only_udm.security_result.detection_fields	Dipetakan dari log perubahan

Log Perubahan

Melihat Log Perubahan untuk parser ini

Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.