Mengumpulkan log Darktrace

Versi Parser: 19.0

Didukung di:

Google SecOps SIEM

Dokumen ini menjelaskan cara menyerap log Darktrace ke Google Security Operations menggunakan agen Bindplane.

Darktrace adalah platform pengamanan cyber yang didukung AI yang mendeteksi ancaman dan anomali secara real time. Parser menangani log Darktrace berformat CEF dan JSON, mengekstrak kolom, dan memetakannya ke Model Data Terpadu (UDM).

Sebelum memulai

Pastikan Anda memiliki prasyarat berikut:

• Instance Google SecOps
• Windows Server 2016 atau yang lebih baru, atau host Linux dengan systemd
• Konektivitas jaringan antara agen Bindplane dan perangkat Darktrace
• Jika beroperasi dari balik proxy, pastikan port firewall terbuka sesuai dengan persyaratan agen Bindplane
• Akses istimewa ke UI web Darktrace

Mendapatkan kredensial Google SecOps untuk agen Bindplane

Untuk mengautentikasi agen Bindplane ke Google SecOps, pilih salah satu metode berikut:

• Deployment baru: Gunakan Chronicle API (Opsi 1).
• Deployment lama: Terus gunakan file autentikasi penyerapan (Opsi 2) hingga Ingestion API dihentikan pada 20 Juli 2027.

Opsi 1: Buat akun layanan untuk Chronicle API (direkomendasikan)

1. Login ke Google Cloud konsol dan pilih project Google Cloud yang ditautkan ke instance Google SecOps Anda.
2. Buka IAM & Admin > Service Accounts.
3. Klik Create service account.
4. Berikan detail konfigurasi berikut:
   • Nama akun layanan: Masukkan nama untuk akun (misalnya, bindplane-ingest).
   • Deskripsi akun layanan: Masukkan deskripsi (misalnya, Bindplane agent log ingestion).
5. Klik Create and continue.
6. Di bagian Grant this service account access to project, klik Select a role, lalu pilih Chronicle Editor.
7. Klik Continue lalu klik Done.
8. Klik akun layanan yang Anda buat, lalu buka tab Keys.
9. Klik Add key > Create new key.
10. Pilih JSON, lalu klik Create. File kunci akan didownload ke komputer Anda.
11. Simpan file kunci sebagai ingestion-auth.json di direktori pengumpul Bindplane (/opt/observiq-otel-collector/ingestion-auth.json di Linux atau C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json di Windows), atau perbarui creds_file_path di config.yaml agar cocok dengan jalur tempat Anda menyimpannya.
12. Buka IAM & Admin > Settings dan salin Project number. Anda akan memerlukannya untuk konfigurasi pengekspor.

Catatan: Kunci JSON adalah kredensial. Batasi akses ke file di host Bindplane dan rotasikan kunci sesuai dengan kebijakan organisasi Anda.

Opsi 2: Mendownload file autentikasi penyerapan (lama)

1. Login ke konsol Google SecOps.
2. Buka SIEM Settings > Collection Agents.
3. Download file autentikasi penyerapan.
4. Simpan file dengan aman di sistem tempat agen BindPlane akan diinstal.

Catatan: File ini mengautentikasi agen ke Ingestion API lama (malachiteingestion-pa.googleapis.com), yang dijadwalkan Google untuk dihentikan pada 20 Juli 2027. Rencanakan untuk beralih ke Opsi 1 sebelum tanggal tersebut.

Mendapatkan ID pelanggan Google SecOps

1. Login ke konsol Google SecOps.
2. Buka SIEM Settings > Profile.

3. Salin dan simpan ID Pelanggan dari bagian Detail Organisasi.

   Catatan: ID pelanggan diperlukan untuk mengonfigurasi pengekspor agen Bindplane.

Menginstal agen Bindplane

Instal agen Bindplane di sistem operasi Windows atau Linux Anda sesuai dengan petunjuk berikut.

Penginstalan Windows

1. Buka Command Prompt atau PowerShell sebagai administrator.

2. Jalankan perintah berikut:

   msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
   

3. Tunggu hingga penginstalan selesai.

4. Verifikasi penginstalan dengan menjalankan:

   sc query observiq-otel-collector
   

   Layanan akan ditampilkan sebagai RUNNING.

Penginstalan Linux

1. Buka terminal dengan hak istimewa root atau sudo.

2. Jalankan perintah berikut:

   sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
   

3. Tunggu hingga penginstalan selesai.

4. Verifikasi penginstalan dengan menjalankan:

   sudo systemctl status observiq-otel-collector
   

   Layanan akan ditampilkan sebagai active (running).

Referensi penginstalan tambahan

Untuk mengetahui opsi penginstalan dan pemecahan masalah tambahan, lihat Panduan penginstalan agen Bindplane.

Catatan: Konfigurasi pengekspor Chronicle API memerlukan Bindplane collector v1.106.0 atau yang lebih baru. Perintah sebelumnya akan menginstal rilis terbaru. Jika Anda mengupdate penginstalan yang ada, upgrade kolektor sebelum mengubah konfigurasi.

Mengonfigurasi agen Bindplane untuk menyerap syslog dan mengirimkannya ke Google SecOps

Menemukan file konfigurasi

• Linux:

  sudo nano /opt/observiq-otel-collector/config.yaml
  

• Windows:

  notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
  

Edit file konfigurasi

• Ganti seluruh konten config.yaml dengan konfigurasi berikut:

  receivers:
    tcplog:
      listen_address: "0.0.0.0:10282"
  
  exporters:
    chronicle/darktrace:
      protocol: https
      # Region of your instance, for example us, europe, asia-southeast1
      location: <LOCATION>
      # Project number of the Google Cloud project linked to the instance
      project: '<PROJECT_NUMBER>'
      compression: gzip
      creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
      customer_id: '<customer_id>'
      endpoint: chronicle.googleapis.com
      log_type: DARKTRACE
      raw_log_field: body
  
  service:
    pipelines:
      logs/darktrace_to_chronicle:
        receivers:
          - tcplog
        exporters:
          - chronicle/darktrace
  

Parameter konfigurasi

Ganti placeholder berikut:

• Konfigurasi penerima:

  • listen_address: Alamat IP dan port yang akan diproses:
    • 0.0.0.0 untuk memproses semua antarmuka (direkomendasikan)
    • Port 10282 adalah port syslog CEF Darktrace default (sesuaikan jika diperlukan)

• Konfigurasi pengekspor:

  • creds_file_path: Jalur lengkap ke file kunci JSON akun layanan (Opsi 1):
    • Linux: /opt/observiq-otel-collector/ingestion-auth.json
    • Windows: C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
  • customer_id: ID Pelanggan yang disalin dari konsol Google SecOps
  • location: Ganti <LOCATION> dengan region instance Google SecOps Anda (misalnya, us, europe, atau asia-southeast1). Pengekspor mengawali chronicle.googleapis.com dengan nilai ini. Lihat Endpoint Regional untuk mengetahui daftar lengkapnya.
  • project: Ganti <PROJECT_NUMBER> dengan nomor project dari IAM & Admin > Settings.
  • endpoint: Tetap disetel ke chronicle.googleapis.com.

Pengekspor API penyerapan lama

• Jika Anda menggunakan file autentikasi penyerapan dari Opsi 2, ganti blok exporters dengan kode berikut. Tetapkan creds_file_path ke jalur ke file autentikasi penyerapan, dan jika instance Anda berada di luar AS, ganti malachiteingestion-pa.googleapis.com dengan endpoint regional Anda (misalnya, europe-malachiteingestion-pa.googleapis.com).

  exporters:
    chronicle/darktrace:
      compression: gzip
      creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
      customer_id: '<customer_id>'
      endpoint: malachiteingestion-pa.googleapis.com
      log_type: DARKTRACE
      raw_log_field: body
  

Catatan: Pengekspor ini akan berhenti berfungsi saat Ingestion API dihentikan pada 20 Juli 2027.

Menyimpan file konfigurasi

• Setelah mengedit, simpan file:
  • Linux: Tekan Ctrl+O, lalu Enter, lalu Ctrl+X
  • Windows: Klik File > Simpan

Mulai ulang agen Bindplane untuk menerapkan perubahan

• Untuk memulai ulang agen Bindplane di Linux, jalankan perintah berikut:

  sudo systemctl restart observiq-otel-collector
  

  1. Pastikan layanan sedang berjalan:

     sudo systemctl status observiq-otel-collector
     

  2. Periksa log untuk mengetahui error:

     sudo journalctl -u observiq-otel-collector -f
     

• Untuk memulai ulang agen Bindplane di Windows, pilih salah satu opsi berikut:

  • Command Prompt atau PowerShell sebagai administrator:

    net stop observiq-otel-collector && net start observiq-otel-collector
    

  • Konsol Services:

    1. Tekan Win+R, ketik services.msc, lalu tekan Enter.
    2. Cari observIQ OpenTelemetry Collector.
    3. Klik kanan, lalu pilih Mulai ulang.

    4. Pastikan layanan sedang berjalan:

       sc query observiq-otel-collector
       

    5. Periksa log untuk mengetahui error:

       type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
       

Mengonfigurasi syslog di Darktrace

1. Login ke UI web Darktrace.
2. Buka Admin > System Config.
3. Klik Verify Alert Settings.
4. Berikan detail konfigurasi berikut:
   • CEF Syslog Alerts: Pilih True.
   • Server Syslog CEF: Masukkan alamat IP Bindplane.
   • CEF Syslog Server Port: Masukkan nomor port Bindplane (misalnya, 10282).
   • CEF Syslog TCP Alert: Pilih True.
5. Klik Simpan.

Contoh log Darktrace yang didukung

• SYSLOG + KV (CEF)

  {
  "acknowledged": false,
  "commentCount": 0,
  "pbid": 900000001,
  "time": 1604055367000,
  "creationTime": 1604055367000,
  "model": {
      "name": "Compromise::Agent Beacon to New Endpoint",
      "uuid": "dfd6f10b-b91c-4244-9fd5-7c35caf21b33",
      "description": "A device is initiating multiple connections to a new external endpoint...",
      "priority": 2,
      "category": "Informational",
      "mitre": {
      "tactics": [
          "command-and-control"
      ],
      "techniques": [
          "T1071.001"
      ]
      }
  },
  "triggeredComponents": [
      {
      "time": 1677679818000,
      "ip": " ",
      "port": 443,
      "metric": {
          "name": "externalconnections"
      },
      "triggeredFilters": [
          {
          "filterType": "Connection hostname",
          "trigger": {
              "value": "beacon.external.io"
          }
          }
      ]
      }
  ],
  "score": 0.85,
  "device": {
      "did": 90001,
      "macaddress": " ",
      "ip": " ",
      "hostname": "user-laptop-1"
  }
  }
  

• SYSLOG + JSON

  {
  "dpi_engine": "dt-sensor-101",
  "proto": "tcp",
  "source_ip": " ",
  "source_port": 51000,
  "dest_ip": " ",
  "dest_port": 389,
  "src": " ",
  "dst": " ",
  "details": "AP request: srealm is [TESTDOMAIN.LOCAL], service is [LDAP/DC99.testdomain.local/testdomain.local], ST cipher is [aes256-cts-hmac-sha1-96]",
  "epochdate": 1690471502.2252,
  "@host": "log-collector-host",
  "uid": "ABCDEFGHIJ1234567890",
  "note": "KERBEROS::App",
  "@type": "notice"
  }
  

Tabel pemetaan UDM

Kolom log	Pemetaan UDM	Logika
darktraceUrl	security_result.url_back_to_product	Nilai diambil dari kolom darktraceUrl.
darktrace_host	observer.hostname	Nilai diambil dari kolom darktrace_host jika bukan alamat IP.
darktrace_ip	observer.ip	Nilai diambil dari kolom darktrace_ip.
darktrace_user	observer.user.userid	Nilai diambil dari kolom darktrace_user.
deskripsi	security_result.summary, metadata.description	Nilai diambil dari kolom description.
device.customFields.DT-AUTO.macaddress	principal.mac	Nilai diambil dari kolom device.customFields.DT-AUTO.macaddress.
device.did	principal.asset.asset_id	Nilai diambil dari kolom device.did, dikonversi menjadi string, dan diberi awalan Device ID:.
device.firstSeen	principal.asset.first_seen_time	Nilai diambil dari kolom device.firstSeen, dikonversi menjadi string, dan diurai sebagai stempel waktu UNIX dalam milidetik.
device.hostname	principal.hostname, principal.asset.hostname	Nilai diambil dari kolom device.hostname.
device.ip	principal.ip, principal.asset.ip	Nilai diambil dari kolom device.ip jika cocok dengan format alamat IP.
device.ips.0.subnet	additional.fields.subnet	Nilai diambil dari kolom device.ips.0.subnet dan diawali dengan subnet.
device.ips.ip	principal.ip, principal.asset.ip	Nilai diambil dari kolom device.ips.ip untuk setiap alamat IP dalam daftar.
device.lastSeen	principal.asset.last_discover_time	Nilai diambil dari kolom device.lastSeen, dikonversi menjadi string, dan diurai sebagai stempel waktu UNIX dalam milidetik.
device.macaddress	principal.mac	Nilai diambil dari kolom device.macaddress.
device.objecttype	principal.asset.type	Jika nilainya adalah device, kolom UDM akan ditetapkan ke WORKSTATION.
device.sid	principal.resource.attribute.labels.sid	Nilai diambil dari kolom device.sid dan dikonversi menjadi string.
device.typelabel	principal.resource.attribute.labels.typelabel	Nilai diambil dari kolom device.typelabel.
device.typename	principal.resource.attribute.labels.typename	Nilai diambil dari kolom device.typename.
dst	target.ip, target.asset.ip	Nilai diambil dari kolom dst.
dpt	target.port	Nilai diambil dari kolom dpt dan dikonversi menjadi bilangan bulat.
dvc	principal.ip, principal.asset.ip	Jika nilai dvc adalah alamat IP, nilai tersebut akan ditambahkan ke kolom UDM.
dvchost	principal.hostname, principal.asset.hostname	Nilai diambil dari kolom dvchost.
endpoint	target.url	Nilai diambil dari kolom endpoint.
event_time	metadata.event_timestamp	Nilai diambil dari kolom event_time dan diuraikan sebagai stempel waktu ISO8601.
externalId	metadata.product_log_id	Nilai diambil dari kolom externalId.
incidentEventUrl	principal.url	Nilai diambil dari kolom incidentEventUrl.
ip	principal.ip, principal.asset.ip	Nilai diambil dari kolom ip jika cocok dengan format alamat IP.
issue_msg	security_result.summary	Nilai diambil dari kolom issue_msg.
pesan	security_result.description	Nilai diambil dari kolom message.
metode	network.http.method	Nilai diambil dari kolom method.
model.description	metadata.description	Nilai diambil dari kolom model.description.
model.name	metadata.product_event_type	Nilai diambil dari kolom model.name.
model.now.category	security_result.severity	Jika nilainya adalah critical, kolom UDM akan ditetapkan ke CRITICAL. Jika nilainya adalah Informational, kolom UDM akan ditetapkan ke INFORMATIONAL. Jika nilainya adalah Suspicious, kolom UDM ditetapkan ke HIGH dan kategori ditetapkan ke NETWORK_SUSPICIOUS.
model.now.description	metadata.description	Nilai diambil dari kolom model.now.description.
model.now.message	security_result.description	Nilai diambil dari kolom model.now.message.
model.now.name	metadata.product_event_type	Nilai diambil dari kolom model.now.name.
model.now.pid	principal.process.pid	Nilai diambil dari kolom model.now.pid dan dikonversi menjadi string.
model.now.uuid	principal.user.userid	Nilai diambil dari kolom model.now.uuid dan jenis peristiwa ditetapkan ke USER_UNCATEGORIZED.
model.pid	principal.process.pid	Nilai diambil dari kolom model.pid dan dikonversi menjadi string.
model.then.description	principal.resource.attribute.labels.Model Then Description	Nilai diambil dari kolom model.then.description.
model.then.name	principal.resource.attribute.labels.Model Then Name	Nilai diambil dari kolom model.then.name.
model.then.pid	principal.resource.attribute.labels.Model Then Pid	Nilai diambil dari kolom model.then.pid dan dikonversi menjadi string.
model.then.uuid	principal.resource.attribute.labels.Model Kemudian UUID	Nilai diambil dari kolom model.then.uuid.
model.uuid	principal.user.userid	Nilai diambil dari kolom model.uuid dan jenis peristiwa ditetapkan ke USER_UNCATEGORIZED.
relatedBreaches.0.modelName	security_result.description	Nilai diambil dari kolom relatedBreaches.0.modelName.
skor	security_result.priority, security_result.priority_details	Jika nilainya antara 0,8 dan 1, prioritas ditetapkan ke HIGH_PRIORITY. Jika nilainya antara 0,5 dan 0,79, prioritas ditetapkan ke MEDIUM_PRIORITY. Jika nilainya antara 0 dan 0,49, prioritasnya ditetapkan ke LOW_PRIORITY. Detail prioritas ditetapkan ke Score : diikuti dengan nilai score yang dikonversi menjadi string.
tingkat keseriusan,	security_result.severity	Jika nilainya adalah 2, kolom UDM ditetapkan ke MEDIUM. Jika nilainya lebih besar dari 2, kolom UDM ditetapkan ke HIGH.
shost	principal.hostname, principal.asset.hostname	Nilai diambil dari kolom shost.
smac	principal.mac	Nilai diambil dari kolom smac.
src	principal.ip, principal.asset.ip	Nilai diambil dari kolom src.
status	network.http.response_code	Nilai diambil dari kolom status dan dikonversi menjadi string.
ringkasan	metadata.description	Nilai diambil dari kolom summary.
waktu		Nilai diambil dari kolom time, dikonversi menjadi string, dan diurai sebagai stempel waktu UNIX dalam milidetik.
timestamp		Nilai ini diambil dari kolom timestamp dan diuraikan sebagai stempel waktu ISO8601 atau stempel waktu UNIX dalam milidetik.
title	security_result.summary	Nilai diambil dari kolom title.
triggeredComponents.ip	intermediary.ip	Nilai diambil dari kolom triggeredComponents.ip jika cocok dengan format alamat IP.
triggeredComponents.port	intermediary.port	Nilai diambil dari kolom triggeredComponents.port dan dikonversi menjadi bilangan bulat.
nama pengguna	principal.user.userid	Nilai diambil dari kolom username.
	metadata.vendor_name	Tetapkan ke DARKTRACE.
	metadata.product_name	Tetapkan ke DCIP.
	metadata.log_type	Tetapkan ke DARKTRACE.
	network.ip_protocol	Disetel ke TCP jika issue_msg tidak berisi UDP. Jika tidak, tetapkan ke UDP.
	security_result.action	Ditetapkan ke BLOCK jika status adalah 401, jika tidak, ditetapkan ke ALLOW.
	security_result.severity	Tetapkan ke INFORMATIONAL.
	network.application_protocol	Tetapkan ke HTTP jika method tidak kosong.
	metadata.event_type	Tetapkan ke NETWORK_HTTP jika method tidak kosong. Disetel ke USER_LOGIN jika description berisi logged into \\\\S+ over ssh. Ditetapkan ke NETWORK_CONNECTION jika target_ip tidak kosong. Jika tidak, setel ke STATUS_UPDATE.
	extensions.auth.type	Tetapkan ke MACHINE jika description berisi logged into \\\\S+ over ssh.
	security_result.category	Disetel ke DATA_EXFILTRATION jika issue_msg berisi Exfiltration. Tetapkan ke NETWORK_MALICIOUS jika issue_msg berisi Compromise. Jika tidak, tetapkan ke NETWORK_SUSPICIOUS.
percentScore	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
device.credentials	event.idm.read_only_udm.target.user.userid	Dipetakan dari log perubahan
url	event.idm.read_only_udm.principal.url	Dipetakan dari log perubahan
username	event.idm.read_only_udm.principal.user.userid	Dipetakan dari log perubahan
iris-event-type	event.idm.read_only_udm.metadata.product_event_type	Dipetakan dari log perubahan
inhibitor	event.idm.read_only_udm.target.ip	Dipetakan dari log perubahan
inhibitor	event.idm.read_only_udm.target.asset.ip	Dipetakan dari log perubahan
inhibitor	event.idm.read_only_udm.target.port	Dipetakan dari log perubahan
device.os	event.idm.read_only_udm.principal.platform	Dipetakan dari log perubahan
device.typename	event.idm.read_only_udm.principal.asset.type	Dipetakan dari log perubahan
device.ossource	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
model.tags	event.idm.read_only_udm.additional.fields	Dipetakan dari log perubahan
codeid	event.idm.read_only_udm.security_result.rule_id	Dipetakan dari log perubahan
inhibitor	event.idm.read_only_udm.security_result.description	Dipetakan dari log perubahan
host_ip	event.idm.read_only_udm.intermediary.ip	Dipetakan dari log perubahan
technique_data	event.idm.read_only_udm.security_result.attack_details.techniques	Dipetakan dari log perubahan
tactics_data	event.idm.read_only_udm.security_result.attack_details.tactics	Dipetakan dari log perubahan
model.created.userid	principal.user.userid	Dipetakan dari log perubahan
model.edited.userid	additional.fields	Dipetakan dari log perubahan
direction	network.direction	Dipetakan dari log perubahan
filterType" under "triggeredFilters	additional.fields	Dipetakan dari log perubahan
trigger.value" under "triggeredFilters	additional.fields	Dipetakan dari log perubahan
from	principal.user.email_addresses	Dipetakan dari log perubahan
subject	metadata.description	Dipetakan dari log perubahan
anomaly_score", "tags", "link_hosts", and "message_id	additional.fields	Dipetakan dari log perubahan
recipients	observer.user.email_addresses	Dipetakan dari log perubahan
attachment_sha1s" and "attachment_sha256s	security_result.detection_fields	Dipetakan dari log perubahan
triggeredFilter.trigger.value	target.ip	Dipetakan dari log perubahan
from	network.email.from	Dipetakan dari log perubahan
subject	network.email.subject	Dipetakan dari log perubahan
attachment_sha1s", "attachment_sha256s", "recipients", "link_hosts", "tags", "actions", "anomaly_score", "message_id	security_result.detection_fields	Dipetakan dari log perubahan
model.name	principal.user.user_display_name	Dipetakan dari log perubahan
breachUrl	security_result.url_back_to_product	Dipetakan dari log perubahan
device.typelabel", "device.sid", "device.typename	principal.resource.attribute.labels	Dipetakan dari log perubahan
device.ips.0.subnet	additional_fields	Dipetakan dari log perubahan
device.device.lastSeen	principal.asset.last_seen_time	Dipetakan dari log perubahan
mitreTechniques	security_result.attack_details.techniques	Dipetakan dari log perubahan
details	sec_result.about.resource.attribute.labels	Dipetakan dari log perubahan
principal_port_no	principal.port	Dipetakan dari log perubahan
location	principal.location.country_or_region	Dipetakan dari log perubahan
target_host	target.hostname	Dipetakan dari log perubahan
source_ip	principal.ip	Dipetakan dari log perubahan
source_port	principal.port	Dipetakan dari log perubahan
dest_ip	target.ip	Dipetakan dari log perubahan
dest_port	target.port	Dipetakan dari log perubahan
@host	principal.hostname	Dipetakan dari log perubahan
note	principal.application	Dipetakan dari log perubahan
@type	sec_result.about.resource.attribute.labels	Dipetakan dari log perubahan
opcode	sec_result.about.resource.attribute.labels	Dipetakan dari log perubahan
trans_id	sec_result.about.resource.attribute.labels	Dipetakan dari log perubahan
query_class	sec_result.about.resource.attribute.labels	Dipetakan dari log perubahan
deviceMacAddress	principal.mac	Dipetakan dari log perubahan

Log Perubahan

Melihat Log Perubahan untuk parser ini

Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.