Mengumpulkan log audit Okera Dynamic Access Platform (ODAP)

Didukung di:

Dokumen ini menjelaskan cara menyerap log audit Okera Dynamic Access Platform (ODAP) ke Google Security Operations menggunakan penyimpanan cloud (Amazon S3, Google Cloud Storage, atau Azure Blob Storage).

Okera Dynamic Access Platform (ODAP) adalah platform kontrol akses dan tata kelola data yang menyediakan kontrol akses terperinci, penemuan dan klasifikasi data otomatis, serta logging audit yang komprehensif untuk data lake dan platform analisis. Platform ini menghasilkan log audit berformat JSON yang merekam semua peristiwa akses data, perubahan kebijakan, dan tindakan administratif.

Sebelum memulai

Pastikan Anda memiliki prasyarat berikut:

  • Instance Google SecOps
  • Deployment Okera ODAP yang aktif (versi 2.0 atau yang lebih baru)
  • Akses administratif ke konfigurasi cluster Okera (chart Helm atau YAML konfigurasi)
  • Akses istimewa ke salah satu platform cloud berikut:
    • AWS (S3, IAM) untuk penyimpanan Amazon S3
    • GCP (Cloud Storage, IAM) untuk Google Cloud Storage
    • Azure (Storage Accounts) untuk Azure Data Lake Storage Gen2
  • Cluster Okera harus memiliki akses tulis ke lokasi penyimpanan cloud

Mengonfigurasi ekspor log audit ODAP Okera

Log audit ODAP Okera dikonfigurasi melalui file YAML konfigurasi cluster dan di-deploy menggunakan diagram Helm Okera. Log audit ditulis dalam format JSON ke lokasi penyimpanan cloud bersama.

Menentukan platform penyimpanan cloud Anda

Pilih salah satu platform penyimpanan cloud berikut berdasarkan deployment Okera Anda:

  • Amazon S3: Untuk cluster Okera yang berjalan di AWS
  • Google Cloud Storage: Untuk cluster Okera yang berjalan di GCP
  • Azure Data Lake Storage Gen2: Untuk cluster Okera yang berjalan di Azure

Mengonfigurasi lokasi penyimpanan log audit

  1. Akses file YAML konfigurasi cluster Okera Anda.
  2. Temukan bagian konfigurasi log audit.
  3. Konfigurasikan tujuan log audit berdasarkan platform cloud Anda:

    • Untuk Amazon S3:

      WATCHER_LOG_DST_DIR: "s3://your-company/okera/ops/"
      WATCHER_AUDIT_LOG_DST_DIR: "s3://your-company/okera/audit/"
      WATCHER_S3_REGION: "us-east-1"
      WATCHER_S3_ENCRYPT: "true"
      WATCHER_AUDIT_UPLOAD_INTERVAL_SEC: "15"
      

      Ganti kode berikut:

      • your-company: Nama bucket S3 Anda
      • us-east-1: Region AWS Anda
    • Untuk Google Cloud Storage:

      WATCHER_LOG_DST_DIR: "gs://your-company/okera/ops/"
      WATCHER_AUDIT_LOG_DST_DIR: "gs://your-company/okera/audit/"
      WATCHER_AUDIT_UPLOAD_INTERVAL_SEC: "15"
      

      Ganti kode berikut:

      • your-company: Nama bucket GCS Anda
    • Untuk Azure Data Lake Storage Gen2:

      WATCHER_LOG_DST_DIR: "abfs://okera-ops@yourstorageaccount.dfs.core.windows.net/"
      WATCHER_AUDIT_LOG_DST_DIR: "abfs://okera-audit@yourstorageaccount.dfs.core.windows.net/"
      WATCHER_AUDIT_UPLOAD_INTERVAL_SEC: "15"
      

      Ganti kode berikut:

      • yourstorageaccount: Nama akun penyimpanan Azure Anda
      • okera-ops dan okera-audit: Nama container Anda
  4. Simpan file konfigurasi.

  5. Update cluster Okera menggunakan diagram Helm:

    helm upgrade okera okera/okera -f your-config.yaml
    
  6. Pastikan log audit ditulis ke lokasi yang dikonfigurasi:

    • Untuk S3:

      aws s3 ls s3://your-company/okera/audit/
      
    • Untuk GCS:

      gsutil ls gs://your-company/okera/audit/
      
    • Untuk Azure:

      az storage blob list --account-name yourstorageaccount --container-name okera-audit
      

Format log audit

Log audit Okera ditulis dalam format JSON dengan karakteristik berikut:

  • Setiap file berisi beberapa data JSON, satu per baris (format NDJSON)
  • Data mencakup semua peristiwa akses data, perubahan kebijakan, dan tindakan administratif
  • File diatur berdasarkan tanggal di lokasi penyimpanan
  • Set data okera_system.audit_logs menyediakan tampilan data audit yang dapat dikueri

Mengonfigurasi akses penyimpanan cloud untuk Google SecOps

Ikuti panduan yang sesuai di bawah berdasarkan platform penyimpanan cloud Anda:

Untuk Amazon S3

  1. Buat pengguna IAM dengan akses baca ke bucket S3 yang berisi log audit Okera.
  2. Ikuti langkah-langkah dalam panduan konfigurasi AWS S3 untuk:
    • Membuat pengguna IAM
    • Membuat kunci akses
    • Berikan AmazonS3ReadOnlyAccess atau kebijakan kustom dengan izin s3:GetObject dan s3:ListBucket

Untuk Google Cloud Storage

  1. Ambil email akun layanan Google SecOps:

    1. Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
    2. Klik Tambahkan Feed Berita Baru.
    3. Klik Konfigurasi satu feed.
    4. Masukkan nama untuk feed (misalnya, okera-audit-logs).
    5. Pilih Google Cloud Storage V2 sebagai Source type.
    6. Pilih Okera DAP sebagai Log type.
    7. Klik Get Service Account.
    8. Salin email akun layanan yang ditampilkan.
  2. Beri akun layanan akses ke bucket GCS Anda:

    1. Buka Cloud Storage > Buckets di GCP Console.
    2. Klik bucket yang berisi log audit Okera.
    3. Buka tab Izin.
    4. Klik Grant access.
    5. Di Add principals, tempel email akun layanan Google SecOps.
    6. Di Assign roles, pilih Storage Object Viewer.
    7. Klik Simpan.

Untuk Azure Blob Storage

  1. Ambil kunci akses akun penyimpanan:

    1. Di portal Azure, buka Storage Account.
    2. Pilih Access keys di bagian Security + networking.
    3. Klik Show keys.
    4. Salin Kunci 1 atau Kunci 2.
  2. Catat endpoint layanan Blob:

    • Format: https://yourstorageaccount.blob.core.windows.net/

Mengonfigurasi feed di Google SecOps untuk menyerap log audit ODAP Okera

Untuk Amazon S3

  1. Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
  2. Klik Tambahkan Feed Berita Baru.
  3. Klik Konfigurasi satu feed.
  4. Masukkan nama unik untuk Nama feed (misalnya, okera-audit-s3).
  5. Pilih Amazon S3 V2 sebagai Jenis sumber.
  6. Pilih Okera DAP sebagai Log type.
  7. Klik Berikutnya, lalu klik Kirim.
  8. Tentukan nilai untuk kolom berikut:

    • S3 URI: s3://your-company/okera/audit/
    • Source deletion option: Pilih Never (direkomendasikan untuk mempertahankan log audit)
    • Usia File Maksimum: Sertakan file yang diubah dalam jumlah hari terakhir (defaultnya adalah 180 hari)
    • Access Key ID: Kunci akses pengguna IAM dengan akses baca ke bucket S3
    • Secret Access Key: Kunci rahasia pengguna IAM
    • Namespace aset: Namespace aset
    • Label penyerapan: Label yang akan diterapkan ke peristiwa dari feed ini
  9. Klik Berikutnya, lalu klik Kirim.

Untuk Google Cloud Storage

  1. Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
  2. Klik Tambahkan Feed Berita Baru.
  3. Klik Konfigurasi satu feed.
  4. Masukkan nama unik untuk Nama feed (misalnya, okera-audit-gcs).
  5. Pilih Google Cloud Storage V2 sebagai Source type.
  6. Pilih Okera DAP sebagai Log type.
  7. Klik Berikutnya.
  8. Tentukan nilai untuk kolom berikut:

    • URL bucket penyimpanan: gs://your-company/okera/audit/
    • Source deletion option: Pilih Never (direkomendasikan untuk mempertahankan log audit)
    • Usia File Maksimum: Sertakan file yang diubah dalam jumlah hari terakhir (defaultnya adalah 180 hari)
    • Namespace aset: Namespace aset
    • Label penyerapan: Label yang akan diterapkan ke peristiwa dari feed ini
  9. Klik Berikutnya, lalu klik Kirim.

Untuk Azure Blob Storage

  1. Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
  2. Klik Tambahkan Feed Berita Baru.
  3. Klik Konfigurasi satu feed.
  4. Masukkan nama unik untuk Nama feed (misalnya, okera-audit-azure).
  5. Pilih Microsoft Azure Blob Storage V2 sebagai Source type.
  6. Pilih Okera DAP sebagai Log type.
  7. Klik Berikutnya.
  8. Tentukan nilai untuk kolom berikut:

    • URI Azure: https://yourstorageaccount.blob.core.windows.net/okera-audit/
    • Source deletion option: Pilih Never (direkomendasikan untuk mempertahankan log audit)
    • Usia File Maksimum: Sertakan file yang diubah dalam jumlah hari terakhir (defaultnya adalah 180 hari)
    • Kunci bersama: Kunci akses akun penyimpanan
    • Namespace aset: Namespace aset
    • Label penyerapan: Label yang akan diterapkan ke peristiwa dari feed ini
  9. Klik Berikutnya, lalu klik Kirim.

Memverifikasi penyerapan log audit

  1. Tunggu 10-15 menit hingga penyerapan awal selesai.
  2. Buka Search di Google SecOps.
  3. Jalankan kueri penelusuran untuk memverifikasi bahwa log audit Okera sedang diserap:

    metadata.vendor_name = "Okera"
    
  4. Pastikan peristiwa muncul dengan stempel waktu terbaru.

  5. Periksa status feed:

    1. Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
    2. Temukan feed audit Okera Anda.
    3. Pastikan Status menampilkan Active.
    4. Periksa stempel waktu Penyerapan terakhir yang berhasil.

Pemecahan masalah

Tidak ada log yang muncul di Google SecOps

  • Memastikan Okera menulis log audit ke lokasi penyimpanan cloud yang dikonfigurasi
  • Pastikan jalur penyimpanan di konfigurasi feed cocok dengan setelan WATCHER_AUDIT_LOG_DST_DIR
  • Memastikan izin penyimpanan cloud dikonfigurasi dengan benar
  • Memeriksa status feed untuk melihat pesan error

Error izin

  • S3: Pastikan pengguna IAM memiliki izin s3:GetObject dan s3:ListBucket
  • GCS: Memastikan akun layanan Google SecOps memiliki peran Storage Object Viewer
  • Azure: Pastikan kunci akses akun penyimpanan sudah benar dan belum habis masa berlakunya

Okera tidak menulis log audit

  • Memastikan konfigurasi WATCHER_AUDIT_LOG_DST_DIR ditetapkan dengan benar
  • Pastikan cluster Okera memiliki izin tulis ke lokasi penyimpanan cloud
  • Memastikan update diagram Helm berhasil diterapkan
  • Memeriksa log cluster Okera untuk menemukan error terkait upload log audit

Migrasi ke Databricks Unity Catalog

Jika Anda berencana bermigrasi dari Okera ODAP ke Databricks Unity Catalog:

  1. Tinjau dokumentasi log audit Databricks Unity Catalog
  2. Mengonfigurasi pengiriman log audit Unity Catalog ke penyimpanan cloud
  3. Membuat feed Google SecOps baru untuk log audit Unity Catalog
  4. Pertahankan kedua feed selama periode migrasi
  5. Menonaktifkan feed Okera setelah migrasi selesai

Untuk mendapatkan bantuan terkait Okera ODAP atau migrasi ke Unity Catalog, hubungi dukungan Databricks.

Tabel pemetaan UDM

Kolom Log Pemetaan UDM Logika
extensions.auth.type extensions.auth.type Authentication type
json_entry.request_time metadata.event_timestamp Stempel waktu saat peristiwa terjadi
metadata.event_type metadata.event_type Jenis peristiwa
json_entry.statement_type metadata.product_event_type Jenis peristiwa khusus produk
metadata.product_name metadata.product_name Nama produk
metadata.vendor_name metadata.vendor_name Nama vendor/perusahaan
json_entry.session_id network.session_id ID sesi
json_entry.connected_user principal.user.userid ID pengguna
json_entry.auth_failure security_result.action Tindakan yang dilakukan
json_entry.status security_result.summary Ringkasan hasil keamanan
json_entry.client_application target.application Nama aplikasi
json_entry.client_network_address target.ip Alamat IP
json_entry.client_network_address target.port Nomor port
json_entry.request_id target.resource.attribute.labels Pasangan nilai kunci atribut untuk resource
json_entry.num_results_read target.resource.attribute.labels
json_entry.num_results_returned target.resource.attribute.labels
json_entry.peak_memory_usage target.resource.attribute.labels
json_entry.statement target.resource.attribute.labels
json_entry.bytes_scanned target.resource.attribute.labels
json_entry.for_reporting target.resource.attribute.labels
json_entry.auth_failure target.resource.attribute.labels
json_entry.default_db target.resource.name Nama resource
target.resource.resource_type target.resource.resource_type Jenis resource
json_entry.user target.user.userid ID pengguna

Log Perubahan

Melihat Log Perubahan untuk parser ini

Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.