Mengumpulkan log HAProxy

Didukung di:

Dokumen ini menjelaskan cara menyerap log HAProxy ke Google Security Operations menggunakan agen Bindplane.

HAProxy adalah load balancer dan server proxy dengan ketersediaan tinggi yang menghasilkan pesan syslog untuk permintaan HTTP, peristiwa koneksi, health check backend, dan aktivitas proses. Parser menggunakan pencocokan pola Grok untuk mengekstrak kolom dari berbagai format log HAProxy dan memetakannya ke Model Data Terpadu (UDM).

Sebelum memulai

Pastikan Anda memiliki prasyarat berikut:

  • Instance Google SecOps
  • Windows Server 2016 atau yang lebih baru, atau host Linux dengan systemd
  • Konektivitas jaringan antara agen Bindplane dan server HAProxy
  • Jika beroperasi dari balik proxy, pastikan port firewall terbuka sesuai dengan persyaratan agen Bindplane
  • Akses administratif ke konfigurasi HAProxy

Mendapatkan file autentikasi penyerapan Google SecOps

  1. Login ke konsol Google SecOps.
  2. Buka Setelan SIEM > Agen Pengumpulan.
  3. Download File Autentikasi Penyerapan.
  4. Simpan file dengan aman di sistem tempat agen BindPlane akan diinstal.

Mendapatkan ID pelanggan Google SecOps

  1. Login ke konsol Google SecOps.
  2. Buka Setelan SIEM > Profil.
  3. Salin dan simpan ID Pelanggan dari bagian Detail Organisasi.

Menginstal agen Bindplane

Instal agen Bindplane di sistem operasi Windows atau Linux Anda sesuai dengan petunjuk berikut.

Penginstalan Windows

  1. Buka Command Prompt atau PowerShell sebagai administrator.
  2. Jalankan perintah berikut:

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
    
  3. Tunggu hingga penginstalan selesai.

  4. Verifikasi penginstalan dengan menjalankan:

    sc query observiq-otel-collector
    

    Layanan akan ditampilkan sebagai RUNNING.

Penginstalan Linux

  1. Buka terminal dengan hak istimewa root atau sudo.
  2. Jalankan perintah berikut:

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
    
  3. Tunggu hingga penginstalan selesai.

  4. Verifikasi penginstalan dengan menjalankan:

    sudo systemctl status observiq-otel-collector
    

    Layanan akan ditampilkan sebagai aktif (berjalan).

Referensi penginstalan tambahan

Untuk opsi penginstalan dan pemecahan masalah tambahan, lihat Panduan penginstalan agen BindPlane.

Mengonfigurasi agen Bindplane untuk menyerap syslog dan mengirimkannya ke Google SecOps

Cari file konfigurasi

  • Linux:

    sudo nano /etc/bindplane-agent/config.yaml
    
  • Windows:

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
    

Edit file konfigurasi

  • Ganti seluruh konten config.yaml dengan konfigurasi berikut:

    receivers:
        udplog:
            listen_address: "0.0.0.0:514"
    
    exporters:
        chronicle/haproxy:
            compression: gzip
            creds_file_path: '/etc/bindplane-agent/ingestion-auth.json'
            customer_id: '<customer_id>'
            endpoint: malachiteingestion-pa.googleapis.com
            log_type: HAPROXY
            raw_log_field: body
    
    service:
        pipelines:
            logs/haproxy_to_chronicle:
                receivers:
                    - udplog
                exporters:
                    - chronicle/haproxy
    

Parameter konfigurasi

Ganti placeholder berikut:

  • Konfigurasi penerima:

    • listen_address: Alamat IP dan port yang akan diproses:
      • 0.0.0.0 untuk mendengarkan di semua antarmuka (direkomendasikan)
      • Port 514 adalah port syslog standar (memerlukan root di Linux; gunakan 1514 untuk non-root)
  • Konfigurasi eksportir:

    • creds_file_path: Jalur lengkap ke file autentikasi penyerapan:
      • Linux: /etc/bindplane-agent/ingestion-auth.json
      • Windows: C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
    • customer_id: ID Pelanggan yang disalin dari konsol Google SecOps
    • endpoint: URL endpoint regional:
      • Amerika Serikat: malachiteingestion-pa.googleapis.com
      • Eropa: europe-malachiteingestion-pa.googleapis.com
      • Asia: asia-southeast1-malachiteingestion-pa.googleapis.com
      • Lihat Endpoint Regional untuk mengetahui daftar lengkapnya

Simpan file konfigurasi

  • Setelah mengedit, simpan file:
    • Linux: Tekan Ctrl+O, lalu Enter, lalu Ctrl+X
    • Windows: Klik File > Save

Mulai ulang agen Bindplane untuk menerapkan perubahan

  • Untuk memulai ulang agen Bindplane di Linux, jalankan perintah berikut:

    sudo systemctl restart observiq-otel-collector
    
    1. Pastikan layanan sedang berjalan:

      sudo systemctl status observiq-otel-collector
      
    2. Periksa log untuk mengetahui error:

      sudo journalctl -u observiq-otel-collector -f
      
  • Untuk memulai ulang agen Bindplane di Windows, pilih salah satu opsi berikut:

    • Command Prompt atau PowerShell sebagai administrator:

      net stop observiq-otel-collector && net start observiq-otel-collector
      
    • Konsol layanan:

      1. Tekan Win+R, ketik services.msc, lalu tekan Enter.
      2. Temukan observIQ OpenTelemetry Collector.
      3. Klik kanan, lalu pilih Mulai Ulang.
      4. Pastikan layanan sedang berjalan:

        sc query observiq-otel-collector
        
      5. Periksa log untuk mengetahui error:

        type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
        

Mengonfigurasi syslog untuk HAProxy

  1. Login ke HAProxy menggunakan CLI.
  2. Tambahkan direktif log di bagian global ke Configuration untuk meneruskan pesan syslog melalui UDP.

    • Ganti <bindplane-ip> dengan alamat IP agen Bindplane yang sebenarnya.
    global
        log <bindplane-ip>:514 local0
    
    defaults
        log global
    

Tabel pemetaan UDM

Kolom log Pemetaan UDM Logika
accept_date_ms
actconn
backend_name
backend_queue
beconn
bytes_read network.received_bytes Diekstrak dari kolom bytes_read dalam log dan dikonversi menjadi bilangan bulat yang tidak bertanda.
captured_request_headers
client_ip principal.ip Diekstrak dari kolom client_ip dalam log.
client_port principal.port Diekstrak dari kolom client_port dalam log dan dikonversi menjadi bilangan bulat.
command_description metadata.description Diekstrak dari kolom command_description dalam log, jika tersedia. Jika tidak, nilai ini berasal dari kolom lain seperti action atau status, bergantung pada pesan log.
datetime metadata.event_timestamp.seconds Diekstrak dari kolom datetime dalam log, jika tersedia. Jika tidak, nilai ini berasal dari kolom timestamp dalam entri log.
deskripsi metadata.description Diekstrak dari kolom description dalam log, jika tersedia. Jika tidak, nilai ini berasal dari kolom lain seperti command_description atau action, bergantung pada pesan log.
feconn
frontend_name
http_request target.url Diekstrak dari kolom http_request dalam log.
http_status_code network.http.response_code Diekstrak dari kolom http_status_code dalam log dan dikonversi menjadi bilangan bulat.
http_verb network.http.method Diekstrak dari kolom http_verb dalam log.
http_version metadata.product_version Diekstrak dari kolom http_version dalam log dan diformat sebagai HTTP/{version}.
inisiator target.application Diekstrak dari kolom initiator dalam log.
modul
msg security_result.summary Diekstrak dari kolom msg dalam log.
pid target.process.pid Diekstrak dari kolom pid dalam log.
mundur
process_name target.application Diekstrak dari kolom process_name dalam log.
retries
server_name target.hostname Diekstrak dari kolom server_name dalam log. Jika kosong, nilai defaultnya adalah nilai syslog_server.
tingkat keseriusan, security_result.severity Dipetakan dari kolom severity dalam log. WARNING dipetakan ke MEDIUM, ALERT dipetakan ke CRITICAL, dan NOTICE dipetakan ke INFORMATIONAL.
shell
srv_queue
srvconn
status
syslog_server target.hostname, intermediary.hostname Diekstrak dari kolom syslog_server dalam log. Digunakan untuk nama host target (jika server_name kosong) dan nama host perantara.
syslog_timestamp
syslog_timestamp_1
syslog_timestamp_2
syslog_timestamp_4
target_ip
time_backend_connect
time_backend_response
time_duration
time_queue
time_request
timestamp metadata.event_timestamp.seconds Diekstrak dari kolom timestamp dalam log dan diuraikan untuk mendapatkan informasi tanggal dan waktu. Digunakan sebagai stempel waktu acara.
unknown_parameters1
unknown_parameters2
user_name target.user.userid Diekstrak dari kolom user_name dalam log.
metadata.event_type Setel ke NETWORK_HTTP secara default. Diubah menjadi jenis peristiwa tertentu seperti PROCESS_UNCATEGORIZED, STATUS_UPDATE, atau USER_UNCATEGORIZED berdasarkan pesan log dan kolom yang diuraikan.
metadata.vendor_name Tetapkan ke HAProxy Enterprise.
metadata.product_name Tetapkan ke HAProxy.
network.application_protocol Tetapkan ke HTTP jika kolom message berisi HTTP.
metadata.log_type Tetapkan ke HAPROXY.

Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.