Mengumpulkan log Dell EMC Data Domain
Versi Parser: 2.0
Dokumen ini menjelaskan cara menyerap log Dell EMC Data Domain ke Google Security Operations menggunakan Bindplane. Kode parser Logstash pertama-tama mengekstrak kolom kunci dari log DELL_EMC_DATA_DOMAIN mentah menggunakan pola grok berdasarkan format pesan log. Kemudian, parser memetakan kolom yang diekstrak ke kolom yang sesuai dalam skema Model Data Terpadu (UDM), sehingga memperkaya data dengan konteks tambahan seperti jenis peristiwa dan hasil keamanan.
Sebelum memulai
Pastikan Anda memiliki prasyarat berikut:
- Instance Google SecOps
- Windows 2016 atau yang lebih baru, atau host Linux dengan
systemd - Jika beroperasi dari balik proxy, port firewall terbuka
- Akses istimewa ke Dell EMC Data Domain
Mendapatkan kredensial Google SecOps untuk agen Bindplane
Untuk mengautentikasi agen Bindplane ke Google SecOps, pilih salah satu metode berikut:
- Deployment baru: Gunakan Chronicle API (Opsi 1).
- Deployment lama: Terus gunakan file autentikasi penyerapan (Opsi 2) hingga Ingestion API dihentikan pada 20 Juli 2027.
Opsi 1: Membuat akun layanan untuk Chronicle API (direkomendasikan)
- Login ke konsolGoogle Cloud dan pilih project Google Cloud yang ditautkan ke instance Google SecOps Anda.
- Buka IAM & Admin > Service Accounts.
- Klik Create service account.
- Berikan detail konfigurasi berikut:
- Service account name: Masukkan nama akun (misalnya,
bindplane-ingest). - Service account description: Masukkan deskripsi (misalnya,
Bindplane agent log ingestion).
- Service account name: Masukkan nama akun (misalnya,
- Klik Create and continue.
- Di bagian Grant this service account access to project, klik Select a role, lalu pilih Chronicle Editor.
- Klik Continue lalu klik Done.
- Klik akun layanan yang Anda buat, lalu buka tab Keys.
- Klik Add key > Create new key.
- Pilih JSON dan klik Create. File kunci akan didownload ke komputer Anda.
- Simpan file kunci sebagai
ingestion-auth.jsondi direktori kolektor Bindplane (/opt/observiq-otel-collector/ingestion-auth.jsondi Linux atauC:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.jsondi Windows), atau perbaruicreds_file_pathdiconfig.yamlagar sesuai dengan jalur tempat Anda menyimpannya. - Buka IAM & Admin > Settings dan salin Project number. Anda akan memerlukannya untuk konfigurasi pengekspor.
Opsi 2: Mendownload file autentikasi penyerapan (lama)
- Login ke konsol Google SecOps.
- Buka Settings > Data Management > Collection Agents. Jika Anda menggunakan platform khusus SIEM, buka Settings > Collection Agents.
- Download file autentikasi penyerapan.
- Simpan file dengan aman di sistem tempat agen Bindplane akan diinstal.
Mendapatkan ID pelanggan Google SecOps
- Login ke konsol Google SecOps.
- Buka Setelan > Administrasi > Profil. Jika Anda menggunakan platform khusus SIEM, buka Settings > Profile.
- Salin dan simpan ID Pelanggan dari bagian Detail Organisasi.
Menginstal agen Bindplane
Instal agen Bindplane di sistem operasi Windows atau Linux Anda sesuai dengan petunjuk berikut.
Penginstalan Windows
- Buka Command Prompt atau PowerShell sebagai administrator.
Jalankan perintah berikut:
msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
Penginstalan Linux
- Buka terminal dengan hak istimewa root atau sudo.
Jalankan perintah berikut:
sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
Referensi penginstalan tambahan
Untuk opsi pemasangan tambahan, lihat panduan pemasangan.
Mengonfigurasi agen Bindplane untuk menyerap Syslog dan mengirimkannya ke Google SecOps
- Akses file konfigurasi:
- Cari file
config.yaml. Biasanya, file ini berada di direktori/opt/observiq-otel-collector/di Linux atau di direktori penginstalan di Windows. - Buka file menggunakan editor teks (misalnya,
nano,vi, atau Notepad).
- Cari file
Edit file
config.yamlsebagai berikut:receivers: udplog: # Replace the port and IP address as required listen_address: "0.0.0.0:514" exporters: chronicle/chronicle_w_labels: protocol: https # Region of your instance, for example us, europe, asia-southeast1 location: <LOCATION> # Project number of the Google Cloud project linked to the instance project: '<PROJECT_NUMBER>' compression: gzip # Adjust the path to the credentials file you downloaded in Step 1 creds_file_path: '/path/to/ingestion-authentication-file.json' # Replace with your actual customer ID from Step 2 customer_id: <customer_id> endpoint: chronicle.googleapis.com # Add optional ingestion labels for better organization ingestion_labels: log_type: 'DELL_EMC_DATA_DOMAIN' raw_log_field: body service: pipelines: logs/source0__chronicle_w_labels-0: receivers: - udplog exporters: - chronicle/chronicle_w_labelsGanti port dan alamat IP sesuai kebutuhan di infrastruktur Anda.
Ganti
<LOCATION>dengan region instance Google SecOps Anda (misalnya,us,europe, atauasia-southeast1). Pengekspor akan mengawalichronicle.googleapis.comdengan nilai ini.Ganti
<PROJECT_NUMBER>dengan nomor project dari IAM & Admin > Settings.Ganti
<customer_id>dengan ID pelanggan yang sebenarnya.Ganti
/path/to/ingestion-authentication-file.jsondengan jalur tempat file kunci akun layanan (Opsi 1) disimpan di bagian Mendapatkan kredensial Google SecOps untuk agen Bindplane.
Pengekspor API penyerapan lama
Jika Anda menggunakan file autentikasi penyerapan dari Opsi 2, ganti blok
exportersdengan kode berikut. Tetapkancreds_file_pathke jalur ke file autentikasi penyerapan, dan jika instance Anda berada di luar AS, gantimalachiteingestion-pa.googleapis.comdengan endpoint regional Anda (misalnya,europe-malachiteingestion-pa.googleapis.com).exporters: chronicle/chronicle_w_labels: compression: gzip # Adjust the path to the credentials file you downloaded in Step 1 creds_file_path: '/path/to/ingestion-authentication-file.json' # Replace with your actual customer ID from Step 2 customer_id: <customer_id> endpoint: malachiteingestion-pa.googleapis.com # Add optional ingestion labels for better organization ingestion_labels: log_type: 'DELL_EMC_DATA_DOMAIN' raw_log_field: body
Mulai ulang agen Bindplane untuk menerapkan perubahan
Untuk memulai ulang agen Bindplane di Linux, jalankan perintah berikut:
sudo systemctl restart bindplane-agentUntuk memulai ulang agen Bindplane di Windows, Anda dapat menggunakan konsol Services atau memasukkan perintah berikut:
net stop BindPlaneAgent && net start BindPlaneAgent
Mengonfigurasi Syslog untuk Dell EMC Data Domain
- Login ke Dell EMC Data Domain menggunakan CLI.
Tampilkan konfigurasi saat ini:
log host showMengaktifkan pengiriman pesan log ke sistem lain:
log host enableTambahkan IP agen Bindplane ke syslog menggunakan perintah berikut, ganti
<bindplane-ip>dengan alamat IP agen Bindplane yang sebenarnya.log host add <bindplane-ip>Tambahkan port agen Bindplane ke syslog menggunakan perintah berikut, ganti
<bindplane-port>dengan nomor port agen Bindplane yang sebenarnya.log server-port set <bindplane-port>
Contoh log Dell EMC Data Domain yang didukung
SYSLOG + KV
<174>ddsh: {epoch=1649171401;id='AUDIT-DDSH-00001';desc='DDSH CLI command';level=3;user='dummy_user';role='se';app='ddsh';host='dd-host-1';detail='cmd=cifs show detailed-stats';}SYSLOG
<38>sshd[13244]: Accepted publickey for dd-admin from 192.0.2.1 port 57656 ssh2: RSA SHA256:+BWDxlMYuJgfC0LhzacEAUpFHlAZlNOYXAKKJ4SAipQ- JSON
{ "Timestamp": "2024-09-05T13:25:14Z", "EventName": "Participant left session", "EventType": "Session", "Username": "user_9999", "EventDetails": [ { "OldValue": "", "NewValue": "1352719861", "PolicyEnforcementNewValue": null, "PolicyEnforcementOldValue": null, "PropertyName": "ID of affected participant", "PropertyCategory": "AffectedParticipant" }, { "OldValue": "", "NewValue": "User Name 1", "PolicyEnforcementNewValue": null, "PolicyEnforcementOldValue": null, "PropertyName": "Name of affected participant", "PropertyCategory": "AffectedParticipant" } ], "Computer": "HOST-PC-400", "EventId": 35139395 }SYSLOG + XML
<21>1 2024-08-01T12:31:40.791267+02:00 VEEM-HOST-01 Veeam_ONE_Server 7172 - [origin enterpriseId="31023"] Operation:"SendEmail" Email has been sent Data:<data><recipient>recipient@example.com</recipient><subject>VM resetting Information for Virtual Machine "VM_RESTORED_2024"</subject></data>
Tabel pemetaan UDM
| Kolom log | pemetaan UDM | Logika |
|---|---|---|
| aplikasi | read_only_udm.target.application | Nilai diambil dari kolom 'app' yang diekstrak oleh parser grok pertama. |
| cmd | read_only_udm.target.process.command_line | Nilai diambil dari kolom 'cmd' yang diekstrak oleh parser grok pertama, atau dari kolom 'detail' jika kolom 'cmd' kosong. |
| menurun | read_only_udm.metadata.description | Nilai diambil dari kolom 'desc' yang diekstrak oleh parser grok pertama. |
| epoch | read_only_udm.metadata.event_timestamp.seconds | Nilai diambil dari kolom 'epoch' dan dikonversi menjadi stempel waktu menggunakan filter 'date'. |
| host | read_only_udm.principal.hostname | Nilai diambil dari kolom 'host' yang diekstrak oleh parser grok pertama. |
| id | read_only_udm.metadata.product_event_type | Nilai diambil dari kolom 'id' yang diekstrak oleh parser grok pertama. |
| pid | read_only_udm.target.process.pid | Nilai diambil dari kolom 'pid' yang diekstrak oleh parser grok pertama. |
| mampu bernalar | read_only_udm.security_result.description | Nilai diambil dari kolom 'reason' yang diekstrak oleh parser grok pertama. |
| peran | read_only_udm.principal.user.attribute.roles.name | Nilai diambil dari kolom 'role' yang diekstrak oleh parser grok pertama. |
| session_id | read_only_udm.network.session_id | Nilai diambil dari kolom 'session_id' yang diekstrak oleh parser grok pertama. |
| src_ip | read_only_udm.principal.ip | Nilai diambil dari kolom 'src_ip' yang diekstrak oleh parser grok kedua. |
| src_port | read_only_udm.principal.port | Nilai diambil dari kolom 'src_port' yang diekstrak oleh parser grok kedua dan dikonversi menjadi bilangan bulat. |
| timestamp.nanos | read_only_udm.metadata.event_timestamp.nanos | Nilai diambil dari kolom 'timestamp.nanos' pada log mentah. |
| timestamp.seconds | read_only_udm.metadata.event_timestamp.seconds | Nilai diambil dari kolom 'timestamp.seconds' pada log mentah. |
| pengguna | read_only_udm.target.user.userid | Nilai diambil dari kolom 'user' yang diekstrak oleh parser grok pertama atau kedua. |
| read_only_udm.extensions.auth.mechanism | Nilai ditetapkan ke "USERNAME_PASSWORD" jika kolom 'desc' cocok dengan pola tertentu yang terkait dengan peristiwa login atau logout pengguna. | |
| read_only_udm.metadata.event_type | Nilai ini ditentukan oleh serangkaian pernyataan bersyarat berdasarkan nilai kolom lain, terutama 'desc', 'src_ip', dan 'host'. | |
| read_only_udm.metadata.log_type | Diprogram ke "DELL_EMC_DATA_DOMAIN". | |
| read_only_udm.metadata.product_name | Diprogram ke "DELL_EMC_DATA_DOMAIN". | |
| read_only_udm.metadata.vendor_name | Diprogram secara permanen ke "DELL". | |
| read_only_udm.network.http.method | Nilai diambil dari kolom 'method' yang diekstrak oleh filter KV. | |
| read_only_udm.network.http.response_code | Nilai diambil dari kolom 'response_code' yang diekstrak oleh filter KV dan dikonversi menjadi bilangan bulat. | |
| read_only_udm.network.ip_protocol | Nilai diperoleh dari kolom 'protocol_number_src' menggunakan tabel pencarian dan konfigurasi 'parse_ip_protocol.include'. | |
| read_only_udm.security_result.severity | Nilai ditetapkan ke "MEDIUM" jika kolom 'message' berisi string "NOTICE". | |
| read_only_udm.target.file.sha256 | Nilai diambil dari kolom 'sha256' yang diekstrak oleh parser grok kedua, dikonversi ke huruf kecil, dan divalidasi sebagai string heksadesimal. | |
| read_only_udm.target.process.file.full_path | Nilai diambil dari kolom 'path' atau 'file', bergantung pada kolom mana yang tidak kosong. | |
| read_only_udm.target.url | Nilai diambil dari kolom 'uri' yang diekstrak oleh filter KV. | |
host |
event.idm.read_only_udm.principal.ip |
Dipetakan dari log perubahan |
host |
event.idm.read_only_udm.principal.asset.ip |
Dipetakan dari log perubahan |
inter_host |
event.idm.read_only_udm.intermediary.hostname |
Dipetakan dari log perubahan |
msg |
event.idm.read_only_udm.security_result.description |
Dipetakan dari log perubahan |
Log Perubahan
Melihat Log Perubahan untuk parser ini
Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.