Mengumpulkan log Tableau

Didukung di:

Google SecOps SIEM

Dokumen ini menjelaskan cara menyerap log Tableau ke Google Security Operations menggunakan Bindplane.

Tableau adalah platform business intelligence dan visualisasi data yang menghasilkan log aktivitas pengguna, autentikasi, dan audit. Tableau Server menyimpan file log di sistem file server, sehingga pengumpulan berbasis file ideal untuk penyerapan.

Sebelum memulai

Pastikan Anda memiliki prasyarat berikut:

• Instance Google SecOps
• Windows Server 2016 atau yang lebih baru, atau host Linux dengan systemd
• Konektivitas jaringan antara agen Bindplane dan host Tableau Server
• Jika beroperasi dari balik proxy, pastikan port firewall terbuka sesuai dengan persyaratan agen Bindplane
• Akses istimewa ke Tableau Server dengan izin administrator
• Akses ke file log Tableau Server di sistem file server

Mendapatkan kredensial Google SecOps untuk agen Bindplane

Untuk mengautentikasi agen Bindplane ke Google SecOps, pilih salah satu metode berikut:

• Deployment baru: Gunakan Chronicle API (Opsi 1).
• Deployment lama: Terus menggunakan file autentikasi penyerapan (Opsi 2) hingga Ingestion API dihentikan pada 20 Juli 2027.

Opsi 1: Buat akun layanan untuk Chronicle API (direkomendasikan)

1. Login ke Google Cloud konsol dan pilih project Google Cloud yang ditautkan ke instance Google SecOps Anda.
2. Buka IAM & Admin > Service Accounts.
3. Klik Create service account.
4. Berikan detail konfigurasi berikut:
   • Service account name: Masukkan nama akun (misalnya, bindplane-ingest).
   • Deskripsi akun layanan: Masukkan deskripsi (misalnya, Bindplane agent log ingestion).
5. Klik Create and continue.
6. Di bagian Grant this service account access to project, klik Select a role, lalu pilih Chronicle Editor.
7. Klik Continue lalu klik Done.
8. Klik akun layanan yang Anda buat, lalu buka tab Keys.
9. Klik Add key > Create new key.
10. Pilih JSON, lalu klik Create. File kunci didownload ke komputer Anda.
11. Simpan file kunci sebagai ingestion-auth.json di direktori Bindplane collector (/opt/observiq-otel-collector/ingestion-auth.json di Linux atau C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json di Windows), atau perbarui creds_file_path di config.yaml agar sesuai dengan jalur tempat Anda menyimpannya.
12. Buka IAM & Admin > Settings dan salin Project number. Anda akan memerlukannya untuk konfigurasi pengekspor.

Catatan: Kunci JSON adalah kredensial. Batasi akses ke file di host Bindplane dan rotasikan kunci sesuai dengan kebijakan organisasi Anda.

Opsi 2: Mendownload file autentikasi penyerapan (lama)

1. Login ke konsol Google SecOps.
2. Buka SIEM Settings > Collection Agents.
3. Download file autentikasi penyerapan.
4. Simpan file dengan aman di sistem tempat agen BindPlane akan diinstal.

Catatan: File ini mengautentikasi agen ke Ingestion API lama (malachiteingestion-pa.googleapis.com), yang dijadwalkan Google untuk dihentikan pada 20 Juli 2027. Berencana beralih ke Opsi 1 sebelum tanggal tersebut.

Mendapatkan ID pelanggan Google SecOps

1. Login ke konsol Google SecOps.
2. Buka SIEM Settings > Profile.

3. Salin dan simpan ID Pelanggan dari bagian Detail Organisasi.

   Catatan: ID pelanggan diperlukan untuk mengonfigurasi pengekspor agen Bindplane.

Menginstal agen Bindplane

Instal agen Bindplane di sistem operasi Windows atau Linux Anda sesuai dengan petunjuk berikut.

Penginstalan Windows

1. Buka Command Prompt atau PowerShell sebagai administrator.

2. Jalankan perintah berikut:

   msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
   

3. Tunggu hingga penginstalan selesai.

4. Verifikasi penginstalan dengan menjalankan:

   sc query observiq-otel-collector
   

Layanan akan ditampilkan sebagai RUNNING.

Penginstalan Linux

1. Buka terminal dengan hak istimewa root atau sudo.

2. Jalankan perintah berikut:

   sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
   

3. Tunggu hingga penginstalan selesai.

4. Verifikasi penginstalan dengan menjalankan:

   sudo systemctl status observiq-otel-collector
   

Layanan akan ditampilkan sebagai active (running).

Referensi penginstalan tambahan

Untuk opsi pemasangan dan pemecahan masalah tambahan, lihat Panduan pemasangan agen Bindplane.

Catatan: Konfigurasi pengekspor Chronicle API memerlukan Bindplane collector v1.106.0 atau yang lebih baru. Perintah sebelumnya akan menginstal rilis terbaru. Jika Anda mengupdate penginstalan yang ada, upgrade kolektor sebelum mengubah konfigurasi.

Mengonfigurasi agen Bindplane untuk menyerap syslog dan mengirimkannya ke Google SecOps

Menemukan file konfigurasi

• Linux:

  sudo nano /opt/observiq-otel-collector/config.yaml
  

• Windows:

  notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
  

Mengedit file konfigurasi

• Ganti seluruh konten config.yaml dengan konfigurasi berikut:

  receivers:
    filelog:
      include:
        - /var/opt/tableau/tableau_server/data/tabsvc/logs/httpd/access.*.log
        - /var/opt/tableau/tableau_server/data/tabsvc/logs/vizqlserver/*.log
        - /var/opt/tableau/tableau_server/data/tabsvc/logs/backgrounder/*.log
      start_at: beginning
  
  exporters:
    chronicle/tableau:
      protocol: https
      # Region of your instance, for example us, europe, asia-southeast1
      location: <LOCATION>
      # Project number of the Google Cloud project linked to the instance
      project: '<PROJECT_NUMBER>'
      compression: gzip
      creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
      customer_id: '<customer_id>'
      endpoint: chronicle.googleapis.com
      log_type: TABLEAU
      raw_log_field: body
      ingestion_labels:
        env: production
  
  service:
    pipelines:
      logs/tableau_to_chronicle:
        receivers:
          - filelog
        exporters:
          - chronicle/tableau
  

Parameter konfigurasi

Ganti placeholder berikut:

• Konfigurasi penerima:

  • filelog: Jenis penerima untuk mengumpulkan file log dari disk
  • include: Daftar jalur file atau pola glob yang akan dipantau:
    • Linux: /var/opt/tableau/tableau_server/data/tabsvc/logs/
    • Windows: C:\ProgramData\Tableau\Tableau Server\data\tabsvc\logs\
    • File log utama mencakup httpd/access.*.log (log akses Apache), vizqlserver/*.log (log server VizQL), dan backgrounder/*.log (log tugas latar belakang)
    • Sesuaikan jalur agar sesuai dengan penginstalan Tableau Server Anda
  • start_at: Setel ke beginning untuk membaca file log yang ada dari awal, atau end untuk hanya membaca entri baru

• Konfigurasi pengekspor:

  • tableau: Nama deskriptif untuk eksportir
  • creds_file_path: Jalur lengkap ke file kunci JSON akun layanan (Opsi 1):
    • Linux: /opt/observiq-otel-collector/ingestion-auth.json
    • Windows: C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
  • <customer_id>: ID Pelanggan dari langkah sebelumnya
  • location: Ganti <LOCATION> dengan region instance Google SecOps Anda (misalnya, us, europe, atau asia-southeast1). Pengekspor akan menambahkan awalan chronicle.googleapis.com dengan nilai ini. Lihat Endpoint Regional untuk mengetahui daftar lengkapnya.
  • project: Ganti <PROJECT_NUMBER> dengan nomor project dari IAM & Admin > Settings.
  • endpoint: Tetap disetel ke chronicle.googleapis.com.
  • TABLEAU: Jenis log persis seperti yang muncul di Chronicle
  • ingestion_labels: Label opsional dalam format YAML (misalnya, env: production)

Konfigurasi pipeline: * tableau_to_chronicle: Nama deskriptif untuk pipeline

Pengekspor API penyerapan lama

• Jika Anda menggunakan file autentikasi penyerapan dari Opsi 2, ganti blok exporters dengan kode berikut. Tetapkan creds_file_path ke jalur file autentikasi penyerapan, dan jika instance Anda berada di luar Amerika Serikat, ganti malachiteingestion-pa.googleapis.com dengan endpoint regional Anda (misalnya, europe-malachiteingestion-pa.googleapis.com).

  exporters:
    chronicle/tableau:
      compression: gzip
      creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
      customer_id: '<customer_id>'
      endpoint: malachiteingestion-pa.googleapis.com
      log_type: TABLEAU
      raw_log_field: body
      ingestion_labels:
        env: production
  

Catatan: Pengekspor ini akan berhenti berfungsi saat Ingestion API dihentikan pada 20 Juli 2027.

Menyimpan file konfigurasi

• Setelah mengedit, simpan file:
  • Linux: Tekan Ctrl+O, lalu Enter, lalu Ctrl+X
  • Windows: Klik File > Simpan

Mulai ulang agen Bindplane untuk menerapkan perubahan

Untuk memulai ulang agen Bindplane di Linux:

1. Jalankan perintah berikut:

   sudo systemctl restart observiq-otel-collector
   

2. Pastikan layanan sedang berjalan:

   sudo systemctl status observiq-otel-collector
   

3. Periksa log untuk mengetahui error:

   sudo journalctl -u observiq-otel-collector -f
   

Untuk memulai ulang agen Bindplane di Windows:

1. Pilih salah satu opsi berikut:

   • Command Prompt atau PowerShell sebagai administrator:

   net stop observiq-otel-collector && net start observiq-otel-collector
   

   • Konsol layanan:
     1. Tekan Win+R, ketik services.msc, lalu tekan Enter.
     2. Cari observIQ OpenTelemetry Collector.
     3. Klik kanan, lalu pilih Restart.

2. Pastikan layanan sedang berjalan:

   sc query observiq-otel-collector
   

3. Periksa log untuk mengetahui error:

   type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
   

Memverifikasi lokasi file log Tableau Server

1. Login ke host Tableau Server dengan hak istimewa administrator.
2. Verifikasi direktori file log:
   • Linux: /var/opt/tableau/tableau_server/data/tabsvc/logs/
   • Windows: C:\ProgramData\Tableau\Tableau Server\data\tabsvc\logs\
3. Subdirektori dan file log utama:
   • httpd/access.*.log: Log akses Apache dengan detail permintaan HTTP
   • vizqlserver/*.log: Log server VizQL dengan aktivitas kueri visualisasi
   • backgrounder/*.log: Log tugas latar belakang dengan aktivitas tugas terjadwal

4. (Opsional) Buat arsip log menggunakan alat command line TSM untuk verifikasi:

   tsm maintenance ziplogs -a -t -o -f tableau-logs.zip
   

   Catatan: Flag -a menyertakan semua log, -t menyertakan file sementara, -o menimpa arsip yang ada. Arsip disimpan ke /var/opt/tableau/tableau_server/data/tabsvc/files/backups/ (Linux) atau `C:\ProgramData\Tableau\Tableau Server\data\tabsvc\files\backups` (Windows).

5. Perbarui jalur include di config.yaml agen Bindplane jika direktori log berbeda dari default.

   Catatan: Pastikan agen Bindplane memiliki akses baca ke direktori log Tableau Server.

Tabel pemetaan UDM

Kolom Log	Pemetaan UDM	Logika
dataserver_permissions, local_dataserver, saved_credentials_viewerid, locale, server_oauth, :id, server_viewerid, dataserver_version, tablename, ElapsedTime, LastStatus, Timeszone	additional.fields	Pasangan nilai kunci yang digabungkan dari kolom yang ditentukan
Isi	metadata.description	Nilai disalin langsung setelah menghapus "_"
ID, RemoteHost	metadata.event_type	Ditetapkan ke USER_UNCATEGORIZED jika ID tidak kosong, STATUS_UPDATE jika RemoteHost ada, atau GENERIC_EVENT
protokol	network.application_protocol	Nilai disalin langsung
http_version	network.application_protocol_version	Nilai disalin langsung
metode	network.http.method	Nilai disalin langsung setelah menghapus ""
SizeBytes	network.received_bytes	Dikonversi ke uinteger
session_id	network.session_id	Nilai disalin secara langsung
Workername	principal.asset.hostname	Nilai disalin langsung
RemoteHost	principal.asset.ip	Nilai disalin secara langsung
Nama pekerja	principal.hostname	Nilai disalin langsung
RemoteHost	principal.ip	Nilai disalin langsung
Port	principal.nat_port	Dikonversi ke bilangan bulat
ID	principal.user.product_object_id	Nilai disalin secara langsung
RemoteUser	principal.user.userid	Nilai disalin langsung jika tidak kosong atau "_"
logging_ctx	security_result.detection_fields	Key-value pair gabungan dari logging_ctx
jalur	target.file.full_path	Nilai disalin secara langsung
dbname	target.resource.name	Nilai disalin langsung
	metadata.product_name	Ditetapkan ke "Tableau"
	metadata.vendor_name	Tetapkan ke "TABLEAU"
temp_user	event.idm.read_only_udm.principal.user.userid	Dipetakan dari log perubahan
user_name	event.idm.read_only_udm.principal.user.userid	Dipetakan dari log perubahan
temp_domain	event.idm.read_only_udm.principal.administrative_domain	Dipetakan dari log perubahan
temp_role	event.idm.read_only_udm.principal.user.attribute.roles	Dipetakan dari log perubahan
source_info	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
user_application	event.idm.read_only_udm.principal.application	Dipetakan dari log perubahan
temp_http_uri	event.idm.read_only_udm.target.url	Dipetakan dari log perubahan
temp_api_call	event.idm.read_only_udm.target.url	Dipetakan dari log perubahan
temp_site_id	event.idm.read_only_udm.target.resource.name	Dipetakan dari log perubahan
java_method	event.idm.read_only_udm.target.resource.name	Dipetakan dari log perubahan
java_class	event.idm.read_only_udm.target.resource.type	Dipetakan dari log perubahan
temp_http_method	event.idm.read_only_udm.network.http.method	Dipetakan dari log perubahan
temp_http_status	event.idm.read_only_udm.network.http.response_code	Dipetakan dari log perubahan
"Computer"	event.idm.read_only_udm.principal.hostname	Dipetakan dari log perubahan
"TimeGenerated"	event.idm.read_only_udm.security_result.first_discovered_time	Dipetakan dari log perubahan
"_TimeReceived"	event.idm.read_only_udm.security_result.last_discovered_time	Dipetakan dari log perubahan
"_IsBillable"	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
"_BilledSize"	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
"_Internal_WorkspaceResourceId"	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
"_ItemId"	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
"TenantId"	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
"_SubscriptionId"	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
"_ResourceId"	event.idm.read_only_udm.principal.resource.id	Dipetakan dari log perubahan
"FilePath"	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
"Type"	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
"temp_message"	event.idm.read_only_udm.metadata.description	Dipetakan dari log perubahan
"temp_logger_name"	event.idm.read_only_udm.principal.application	Dipetakan dari log perubahan
"temp_pid"	event.idm.read_only_udm.principal.process.pid	Dipetakan dari log perubahan
"temp_thread_name"	event.idm.read_only_udm.principal.process.file.full_path	Dipetakan dari log perubahan
"temp_log_level"	event.idm.read_only_udm.security_result.severity	Dipetakan dari log perubahan
appname	event.idm.read_only_udm.metadata.product_event_type	Dipetakan dari log perubahan
id2	event.idm.read_only_udm.metadata.product_log_id	Dipetakan dari log perubahan
pid	event.idm.read_only_udm.observer.process.pid	Dipetakan dari log perubahan
timestamp	event.idm.read_only_udm.metadata.event_timestamp	Dipetakan dari log perubahan
user	event.idm.read_only_udm.principal.user.userid	Dipetakan dari log perubahan
id1	event.idm.read_only_udm.network.session_id	Dipetakan dari log perubahan
logger	event.idm.read_only_udm.observer.process.command_line	Dipetakan dari log perubahan
loglevel	event.idm.read_only_udm.security_result.severity	Dipetakan dari log perubahan
user_id	event.idm.read_only_udm.target.user.userid	Dipetakan dari log perubahan
site_id	event.idm.read_only_udm.target.resource.id	Dipetakan dari log perubahan
message	event.idm.read_only_udm.metadata.description	Dipetakan dari log perubahan
script_type	event.idm.read_only_udm.target.resource.name	Dipetakan dari log perubahan
id3	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
thread	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
function_name	event.idm.read_only_udm.security_result.summary	Dipetakan dari log perubahan

Log Perubahan

Melihat Log Perubahan untuk parser ini

Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.