Mengumpulkan log HAProxy
Dokumen ini menjelaskan cara menyerap log HAProxy ke Google Security Operations menggunakan agen Bindplane.
HAProxy adalah load balancer dan server proxy dengan ketersediaan tinggi yang menghasilkan pesan syslog untuk permintaan HTTP, peristiwa koneksi, health check backend, dan aktivitas proses. Parser menggunakan pencocokan pola Grok untuk mengekstrak kolom dari berbagai format log HAProxy dan memetakannya ke Model Data Terpadu (UDM).
Sebelum memulai
Pastikan Anda memiliki prasyarat berikut:
- Instance Google SecOps
- Windows Server 2016 atau yang lebih baru, atau host Linux dengan
systemd - Konektivitas jaringan antara agen Bindplane dan server HAProxy
- Jika beroperasi dari balik proxy, pastikan port firewall terbuka sesuai dengan persyaratan agen Bindplane
- Akses administratif ke konfigurasi HAProxy
Mendapatkan file autentikasi penyerapan Google SecOps
- Login ke konsol Google SecOps.
- Buka Setelan SIEM > Agen Pengumpulan.
- Download File Autentikasi Penyerapan.
Simpan file dengan aman di sistem tempat agen BindPlane akan diinstal.
Mendapatkan ID pelanggan Google SecOps
- Login ke konsol Google SecOps.
- Buka Setelan SIEM > Profil.
Salin dan simpan ID Pelanggan dari bagian Detail Organisasi.
Menginstal agen Bindplane
Instal agen Bindplane di sistem operasi Windows atau Linux Anda sesuai dengan petunjuk berikut.
Penginstalan Windows
- Buka Command Prompt atau PowerShell sebagai administrator.
Jalankan perintah berikut:
msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quietTunggu hingga penginstalan selesai.
Verifikasi penginstalan dengan menjalankan:
sc query observiq-otel-collectorLayanan akan ditampilkan sebagai RUNNING.
Penginstalan Linux
- Buka terminal dengan hak istimewa root atau sudo.
Jalankan perintah berikut:
sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.shTunggu hingga penginstalan selesai.
Verifikasi penginstalan dengan menjalankan:
sudo systemctl status observiq-otel-collectorLayanan akan ditampilkan sebagai aktif (berjalan).
Referensi penginstalan tambahan
Untuk opsi penginstalan dan pemecahan masalah tambahan, lihat Panduan penginstalan agen BindPlane.
Mengonfigurasi agen Bindplane untuk menyerap syslog dan mengirimkannya ke Google SecOps
Cari file konfigurasi
Linux:
sudo nano /etc/bindplane-agent/config.yamlWindows:
notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
Edit file konfigurasi
Ganti seluruh konten
config.yamldengan konfigurasi berikut:receivers: udplog: listen_address: "0.0.0.0:514" exporters: chronicle/haproxy: compression: gzip creds_file_path: '/etc/bindplane-agent/ingestion-auth.json' customer_id: '<customer_id>' endpoint: malachiteingestion-pa.googleapis.com log_type: HAPROXY raw_log_field: body service: pipelines: logs/haproxy_to_chronicle: receivers: - udplog exporters: - chronicle/haproxy
Parameter konfigurasi
Ganti placeholder berikut:
Konfigurasi penerima:
listen_address: Alamat IP dan port yang akan diproses:0.0.0.0untuk mendengarkan di semua antarmuka (direkomendasikan)- Port
514adalah port syslog standar (memerlukan root di Linux; gunakan1514untuk non-root)
Konfigurasi eksportir:
creds_file_path: Jalur lengkap ke file autentikasi penyerapan:- Linux:
/etc/bindplane-agent/ingestion-auth.json - Windows:
C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
- Linux:
customer_id: ID Pelanggan yang disalin dari konsol Google SecOpsendpoint: URL endpoint regional:- Amerika Serikat:
malachiteingestion-pa.googleapis.com - Eropa:
europe-malachiteingestion-pa.googleapis.com - Asia:
asia-southeast1-malachiteingestion-pa.googleapis.com - Lihat Endpoint Regional untuk mengetahui daftar lengkapnya
- Amerika Serikat:
Simpan file konfigurasi
- Setelah mengedit, simpan file:
- Linux: Tekan
Ctrl+O, laluEnter, laluCtrl+X - Windows: Klik File > Save
- Linux: Tekan
Mulai ulang agen Bindplane untuk menerapkan perubahan
Untuk memulai ulang agen Bindplane di Linux, jalankan perintah berikut:
sudo systemctl restart observiq-otel-collectorPastikan layanan sedang berjalan:
sudo systemctl status observiq-otel-collectorPeriksa log untuk mengetahui error:
sudo journalctl -u observiq-otel-collector -f
Untuk memulai ulang agen Bindplane di Windows, pilih salah satu opsi berikut:
Command Prompt atau PowerShell sebagai administrator:
net stop observiq-otel-collector && net start observiq-otel-collectorKonsol layanan:
- Tekan
Win+R, ketikservices.msc, lalu tekan Enter. - Temukan observIQ OpenTelemetry Collector.
- Klik kanan, lalu pilih Mulai Ulang.
Pastikan layanan sedang berjalan:
sc query observiq-otel-collectorPeriksa log untuk mengetahui error:
type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
- Tekan
Mengonfigurasi syslog untuk HAProxy
- Login ke HAProxy menggunakan CLI.
Tambahkan direktif log di bagian global ke Configuration untuk meneruskan pesan syslog melalui UDP.
- Ganti
<bindplane-ip>dengan alamat IP agen Bindplane yang sebenarnya.
global log <bindplane-ip>:514 local0 defaults log global- Ganti
Tabel pemetaan UDM
| Kolom log | Pemetaan UDM | Logika |
|---|---|---|
| accept_date_ms | ||
| actconn | ||
| backend_name | ||
| backend_queue | ||
| beconn | ||
| bytes_read | network.received_bytes | Diekstrak dari kolom bytes_read dalam log dan dikonversi menjadi bilangan bulat yang tidak bertanda. |
| captured_request_headers | ||
| client_ip | principal.ip | Diekstrak dari kolom client_ip dalam log. |
| client_port | principal.port | Diekstrak dari kolom client_port dalam log dan dikonversi menjadi bilangan bulat. |
| command_description | metadata.description | Diekstrak dari kolom command_description dalam log, jika tersedia. Jika tidak, nilai ini berasal dari kolom lain seperti action atau status, bergantung pada pesan log. |
| datetime | metadata.event_timestamp.seconds | Diekstrak dari kolom datetime dalam log, jika tersedia. Jika tidak, nilai ini berasal dari kolom timestamp dalam entri log. |
| deskripsi | metadata.description | Diekstrak dari kolom description dalam log, jika tersedia. Jika tidak, nilai ini berasal dari kolom lain seperti command_description atau action, bergantung pada pesan log. |
| feconn | ||
| frontend_name | ||
| http_request | target.url | Diekstrak dari kolom http_request dalam log. |
| http_status_code | network.http.response_code | Diekstrak dari kolom http_status_code dalam log dan dikonversi menjadi bilangan bulat. |
| http_verb | network.http.method | Diekstrak dari kolom http_verb dalam log. |
| http_version | metadata.product_version | Diekstrak dari kolom http_version dalam log dan diformat sebagai HTTP/{version}. |
| inisiator | target.application | Diekstrak dari kolom initiator dalam log. |
| modul | ||
| msg | security_result.summary | Diekstrak dari kolom msg dalam log. |
| pid | target.process.pid | Diekstrak dari kolom pid dalam log. |
| mundur | ||
| process_name | target.application | Diekstrak dari kolom process_name dalam log. |
| retries | ||
| server_name | target.hostname | Diekstrak dari kolom server_name dalam log. Jika kosong, nilai defaultnya adalah nilai syslog_server. |
| tingkat keseriusan, | security_result.severity | Dipetakan dari kolom severity dalam log. WARNING dipetakan ke MEDIUM, ALERT dipetakan ke CRITICAL, dan NOTICE dipetakan ke INFORMATIONAL. |
| shell | ||
| srv_queue | ||
| srvconn | ||
| status | ||
| syslog_server | target.hostname, intermediary.hostname | Diekstrak dari kolom syslog_server dalam log. Digunakan untuk nama host target (jika server_name kosong) dan nama host perantara. |
| syslog_timestamp | ||
| syslog_timestamp_1 | ||
| syslog_timestamp_2 | ||
| syslog_timestamp_4 | ||
| target_ip | ||
| time_backend_connect | ||
| time_backend_response | ||
| time_duration | ||
| time_queue | ||
| time_request | ||
| timestamp | metadata.event_timestamp.seconds | Diekstrak dari kolom timestamp dalam log dan diuraikan untuk mendapatkan informasi tanggal dan waktu. Digunakan sebagai stempel waktu acara. |
| unknown_parameters1 | ||
| unknown_parameters2 | ||
| user_name | target.user.userid | Diekstrak dari kolom user_name dalam log. |
| metadata.event_type | Setel ke NETWORK_HTTP secara default. Diubah menjadi jenis peristiwa tertentu seperti PROCESS_UNCATEGORIZED, STATUS_UPDATE, atau USER_UNCATEGORIZED berdasarkan pesan log dan kolom yang diuraikan. |
|
| metadata.vendor_name | Tetapkan ke HAProxy Enterprise. |
|
| metadata.product_name | Tetapkan ke HAProxy. |
|
| network.application_protocol | Tetapkan ke HTTP jika kolom message berisi HTTP. |
|
| metadata.log_type | Tetapkan ke HAPROXY. |
Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.