Mengumpulkan log Fastly Next-Gen WAF (sebelumnya Signal Sciences)
Dokumen ini menjelaskan cara menyerap log Fastly Next-Gen WAF (sebelumnya Signal Sciences) ke Google Security Operations menggunakan Google Cloud Storage V2.
Fastly Next-Gen WAF (sebelumnya Signal Sciences) adalah firewall aplikasi web generasi berikutnya berbasis cloud yang menyediakan deteksi dan pemblokiran ancaman real-time untuk aplikasi web, API, dan microservice. Solusi ini menggunakan pendekatan berbasis sinyal untuk mengidentifikasi dan memitigasi serangan seperti injeksi SQL, pembuatan skrip lintas situs, pengambilalihan akun, dan penyalahgunaan aplikasi. REST API Signal Sciences menyediakan akses terprogram ke data feed permintaan, yang berisi informasi mendetail tentang permintaan yang ditandai dan diblokir.
Sebelum memulai
Pastikan Anda memiliki prasyarat berikut:
- Instance Google SecOps
- Project Google Cloud dengan Cloud Storage API diaktifkan
- Izin untuk membuat dan mengelola bucket GCS
- Izin untuk mengelola kebijakan IAM di bucket GCS
- Izin untuk membuat layanan Cloud Run, topik Pub/Sub, dan tugas Cloud Scheduler
- Akses istimewa ke dasbor Fastly Next-Gen WAF dengan izin akses API
- Akun Fastly WAF generasi berikutnya dengan nama perusahaan dan minimal satu situs yang dikonfigurasi
Membuat bucket Google Cloud Storage
- Buka konsolGoogle Cloud .
- Pilih project Anda atau buat project baru.
- Di menu navigasi, buka Cloud Storage > Buckets.
- Klik Create bucket.
Berikan detail konfigurasi berikut:
Setelan Nilai Beri nama bucket Anda Masukkan nama yang unik secara global (misalnya, sigsci-waf-logs)Location type Pilih sesuai kebutuhan Anda (Region, Dual-region, Multi-region) Location Pilih lokasi (misalnya, us-central1)Kelas penyimpanan Standard (direkomendasikan untuk log yang sering diakses) Kontrol akses Seragam (direkomendasikan) Alat perlindungan Opsional: Mengaktifkan pembuatan versi objek atau kebijakan retensi Klik Create.
Mengumpulkan kredensial Fastly Next-Gen WAF API
Mendapatkan token akses API
- Login ke dasbor Fastly Next-Gen WAF.
- Klik nama pengguna Anda di pojok kanan atas, lalu pilih My Profile.
- Buka API Access Tokens.
- Klik Add token akses API.
- Masukkan nama deskriptif untuk token (misalnya,
Google SecOps Integration). - Klik Buat token akses API.
Salin dan simpan detail berikut di lokasi yang aman:
- API token: Nilai token yang dihasilkan (hanya ditampilkan sekali)
- Alamat email: Alamat email akun Anda yang digunakan untuk autentikasi
Mendapatkan nama perusahaan dan situs
- Login ke dasbor Fastly Next-Gen WAF.
- Klik Manage > Corp > Corp Overview.
- Perhatikan Nama pendek perusahaan yang ditampilkan di halaman (misalnya,
my_corp). - Buka Kelola > Situs.
- Catat Nama pendek situs untuk situs yang ingin Anda kumpulkan lognya (misalnya,
my_site).
Memverifikasi izin
Untuk memverifikasi bahwa akun memiliki izin yang diperlukan:
- Login ke dasbor Fastly Next-Gen WAF.
- Buka Kelola > Corp > Pengguna Corp.
- Temukan akun pengguna Anda dalam daftar.
- Pastikan peran Anda adalah Admin, Pemilik, atau Pengamat. Peran ini memiliki akses API yang diperlukan untuk mengambil data feed permintaan.
- Jika peran Anda tidak memiliki akses API, hubungi administrator Fastly Next-Gen WAF untuk memberikan peran yang sesuai.
Menguji akses API
Uji kredensial Anda terhadap endpoint feed permintaan yang digunakan kolektor. Feed permintaan hanya menerima nilai
fromdanuntildalam menit penuh, denganuntilsetidaknya lima menit yang lalu danfromtidak lebih dari 24 jam yang lalu. Pengujian meminta 10 menit yang berakhir lima menit yang lalu:SIGSCI_EMAIL="your-email@example.com" SIGSCI_TOKEN="your-api-token" SIGSCI_CORP="your-corp-name" SIGSCI_SITE="your-site-name" UNTIL=$(( ($(date +%s) - 300) / 60 * 60 )) FROM=$(( UNTIL - 600 )) curl -sS -o feed-test.json -w "HTTP %{http_code}\n" \ -H "x-api-user: ${SIGSCI_EMAIL}" \ -H "x-api-token: ${SIGSCI_TOKEN}" \ "https://dashboard.signalsciences.net/api/v0/corps/${SIGSCI_CORP}/sites/${SIGSCI_SITE}/feed/requests?from=${FROM}&until=${UNTIL}" head -c 500 feed-test.json; echo
Jika kredensial berfungsi, output akan dimulai dengan HTTP 200, dan feed-test.json akan berisi array data, yang dapat kosong jika situs tidak memiliki permintaan yang ditandai dalam 10 menit tersebut. HTTP 401 berarti email atau token salah. HTTP 400 dengan Invalid timestamp param berarti nilai from atau until melanggar batasan di atas.
Membuat akun layanan untuk fungsi Cloud Run
Fungsi Cloud Run memerlukan akun layanan dengan izin untuk menulis ke bucket GCS dan dipanggil oleh Pub/Sub.
Membuat akun layanan
- Di Konsol GCP, buka IAM & Admin > Service Accounts.
- Klik Create Service Account.
- Berikan detail konfigurasi berikut:
- Service account name: Masukkan
sigsci-waf-collector-sa - Service account description: Masukkan
Service account for Cloud Run function to collect Fastly Next-Gen WAF logs
- Service account name: Masukkan
- Klik Create and Continue.
- Di bagian Grant this service account access to project, tambahkan peran berikut:
- Klik Pilih peran.
- Telusuri dan pilih Storage Object Admin.
- Klik + Add another role.
- Telusuri dan pilih Cloud Run Invoker.
- Klik + Add another role.
- Telusuri dan pilih Cloud Functions Invoker.
- Klik Lanjutkan.
- Klik Done.
Peran ini diperlukan untuk:
- Storage Object Admin: Menulis log ke bucket GCS dan mengelola state file
- Cloud Run Invoker: Mengizinkan Pub/Sub memanggil fungsi
- Cloud Functions Invoker: Mengizinkan pemanggilan fungsi
Memberikan izin IAM pada bucket Cloud Storage
Beri akun layanan izin tulis di bucket GCS:
- Buka Cloud Storage > Buckets.
- Klik nama bucket Anda (misalnya,
sigsci-waf-logs). - Buka tab Izin.
- Klik Grant access.
- Berikan detail konfigurasi berikut:
- Tambahkan entitas: Masukkan email akun layanan (misalnya,
sigsci-waf-collector-sa@PROJECT_ID.iam.gserviceaccount.com) - Assign roles: Pilih Storage Object Admin
- Tambahkan entitas: Masukkan email akun layanan (misalnya,
- Klik Simpan.
Membuat topik Pub/Sub
Buat topik Pub/Sub yang akan dipublikasikan oleh Cloud Scheduler dan di-subscribe oleh fungsi Cloud Run.
- Di Konsol GCP, buka Pub/Sub > Topics.
- Klik Create topic.
- Berikan detail konfigurasi berikut:
- ID Topik: Masukkan
sigsci-waf-logs-trigger - Biarkan setelan lainnya sesuai default
- ID Topik: Masukkan
- Klik Create.
Membuat fungsi Cloud Run untuk mengumpulkan log
Fungsi Cloud Run akan dipicu oleh pesan Pub/Sub dari Cloud Scheduler untuk mengambil data feed permintaan dari Fastly Next-Gen WAF API dan menulis log ke GCS.
- Di Konsol GCP, buka Cloud Run.
- Klik Write a function.
Di bagian Configure, berikan detail konfigurasi berikut:
Setelan Nilai Nama layanan sigsci-waf-collectorRegion Pilih region yang cocok dengan bucket GCS Anda (misalnya, us-central1)Runtime Pilih Python 3.12 atau yang lebih baru Di bagian Trigger, klik Add trigger, lalu pilih Pub/Sub trigger.
Di panel Eventarc trigger, berikan detail konfigurasi berikut:
- Trigger name: Tetap gunakan nama yang dibuat atau masukkan nama untuk pemicu.
- Jenis pemicu: Pilih Sumber Google.
- Event provider: Pilih Pub/Sub.
- Event type: Pilih google.cloud.pubsub.topic.v1.messagePublished.
- Select a Cloud Pub/Sub topic: Pilih topik
sigsci-waf-logs-trigger. - Region: Pilih region yang sama dengan fungsi.
- Service account: Pilih akun layanan
sigsci-waf-collector-sa.
Klik Save trigger.
Di bagian Authentication:
- Pilih Wajibkan autentikasi.
- Pilih Identity and Access Management (IAM).
Scroll ke dan luaskan Containers, Networking, Security.
Buka tab Keamanan:
- Service account: Pilih akun layanan
sigsci-waf-collector-sa.
- Service account: Pilih akun layanan
Buka tab Containers:
- Klik Variables & Secrets.
- Klik + Add variable untuk setiap variabel lingkungan:
Nama Variabel Nilai Contoh Deskripsi GCS_BUCKETsigsci-waf-logsNama bucket GCS GCS_PREFIXsigsci-wafAwalan untuk file log STATE_KEYsigsci-waf-state.jsonJalur status, di luar awalan log SIGSCI_EMAILyour-email@example.comEmail pengguna Fastly Next-Gen WAF API SIGSCI_TOKENyour-api-tokenToken akses Fastly Next-Gen WAF API SIGSCI_CORPyour-corp-nameNama pendek perusahaan SIGSCI_SITEyour-site-nameNama pendek situs LOOKBACK_HOURS1Jam yang akan dikumpulkan pada operasi pertama (maksimum 24)WINDOW_MINUTES10Menit data per permintaan dan per objek GCS MAX_WINDOW_MB200Jendela terbesar disimpan dalam memori; jendela yang lebih besar dibagi RUN_BUDGET_SECONDS480Berhenti memulai periode baru setelah waktu ini HTTP_TIMEOUT60Waktu tunggu baca API dalam detik MAX_RETRIES5Percobaan ulang untuk respons HTTP 429 dan 5xx Di bagian Variables & Secrets, scroll ke Requests:
- Request timeout: Masukkan
600detik (10 menit)
- Request timeout: Masukkan
Buka tab Setelan:
- Di bagian Resources:
- Memory: Pilih 1 GiB atau lebih tinggi
- CPU: Pilih 1
- Di bagian Resources:
Di bagian Revision scaling:
- Minimum number of instances: Masukkan
0 - Maximum number of instances: Masukkan
1
- Minimum number of instances: Masukkan
Klik Create.
Tunggu hingga layanan dibuat (1-2 menit).
Setelah layanan dibuat, editor kode inline akan terbuka secara otomatis.
Menambahkan kode fungsi
- Masukkan main di kolom Entry point.
Di editor kode inline, buat dua file:
- main.py:
import functions_framework from google.api_core import exceptions as gcs_exceptions from google.cloud import storage import json import os import time from datetime import datetime, timedelta, timezone from urllib.parse import parse_qs, urlencode, urlsplit import urllib3 http = urllib3.PoolManager(retries=False) storage_client = storage.Client() API_HOST = 'https://dashboard.signalsciences.net' # The request feed only serves full minutes that ended at least 5 minutes ago # and are no older than 24 hours and 5 minutes. FEED_DELAY = timedelta(minutes=5) FEED_MAX_AGE = timedelta(hours=24) RETRY_STATUSES = (429, 500, 502, 503, 504) class FeedApiError(Exception): """The request feed API returned an error that must stop the run.""" class WindowTooLarge(Exception): """The records of one window do not fit in MAX_WINDOW_MB.""" @functions_framework.cloud_event def main(cloud_event): """Fetch the Fastly Next-Gen WAF request feed and write it to GCS, one object per time window.""" bucket_name = os.environ['GCS_BUCKET'] prefix = os.environ.get('GCS_PREFIX', 'sigsci-waf').strip('/') state_key = os.environ.get('STATE_KEY', 'sigsci-waf-state.json') corp = os.environ['SIGSCI_CORP'] site = os.environ['SIGSCI_SITE'] headers = { 'x-api-user': os.environ['SIGSCI_EMAIL'], 'x-api-token': os.environ['SIGSCI_TOKEN'], 'Accept': 'application/json', 'User-Agent': 'GoogleSecOps-SignalSciencesWAFCollector/2.0', } lookback_hours = int(os.environ.get('LOOKBACK_HOURS', '1')) window = timedelta(minutes=int(os.environ.get('WINDOW_MINUTES', '10'))) max_window_bytes = int(float(os.environ.get('MAX_WINDOW_MB', '200')) * 1024 * 1024) http_timeout = int(os.environ.get('HTTP_TIMEOUT', '60')) max_retries = int(os.environ.get('MAX_RETRIES', '5')) run_budget = int(os.environ.get('RUN_BUDGET_SECONDS', '480')) feed_path = f'/api/v0/corps/{corp}/sites/{site}/feed/requests' bucket = storage_client.bucket(bucket_name) state, generation = load_state(bucket, state_key) deadline = time.monotonic() + run_budget now = datetime.now(timezone.utc) latest_until = minute_floor(now - FEED_DELAY) oldest_from = minute_floor(now) - FEED_MAX_AGE start = resume_point(state) or minute_floor(now - timedelta(hours=lookback_hours)) if start < oldest_from: print(f'WARNING: Records from {start.isoformat()} to {oldest_from.isoformat()} are older than ' f'24 hours and can no longer be read from the request feed. Continuing from {oldest_from.isoformat()}.') start = oldest_from windows_done = 0 while start < latest_until and time.monotonic() < deadline: end = min(start + window, latest_until) while True: try: written = write_window(bucket, prefix, feed_path, headers, start, end, max_window_bytes, http_timeout, max_retries) break except WindowTooLarge: if end - start <= timedelta(minutes=1): raise RuntimeError( f'The records from {start.isoformat()} to {end.isoformat()} exceed MAX_WINDOW_MB. ' 'Increase MAX_WINDOW_MB and the function memory.') end = start + max(timedelta(minutes=1), minute_floor_delta((end - start) / 2)) print(f'Window too large, retrying with {start.isoformat()} to {end.isoformat()}') # The window is stored, so the next run starts where this one ended. state = {'next_from': int(end.timestamp())} generation = save_state(bucket, state_key, state, generation) print(f'{start.isoformat()} to {end.isoformat()}: {written}') start = end windows_done += 1 if start < latest_until: print(f'Run time budget reached after {windows_done} windows. The next run continues from {start.isoformat()}.') else: print(f'Request feed is up to date until {latest_until.isoformat()} ({windows_done} windows).') def minute_floor(dt): return dt.replace(second=0, microsecond=0) def minute_floor_delta(delta): return timedelta(minutes=int(delta.total_seconds() // 60)) def resume_point(state): """Where the previous run stopped, or None for the first run.""" if 'next_from' in state: return datetime.fromtimestamp(state['next_from'], tz=timezone.utc) if 'last_event_time' in state: # State written by the previous version of this function. It recorded the # run time, so start 5 minutes earlier to read records it could not see yet. return minute_floor(datetime.fromisoformat(state['last_event_time']) - FEED_DELAY) return None def write_window(bucket, prefix, feed_path, headers, start, end, max_window_bytes, timeout, max_retries): """Write all records from [start, end) to one GCS object and return a summary.""" blob_name = (f'{prefix}/{start:%Y/%m/%d}/' f'{start:%Y%m%dT%H%M%SZ}_{end:%Y%m%dT%H%M%SZ}.ndjson') if bucket.get_blob(blob_name) is not None: # A previous run stored this window but did not save the state. return f'already stored in {blob_name}' lines = [] size = 0 for record in fetch_feed(feed_path, headers, start, end, timeout, max_retries): line = json.dumps(record, ensure_ascii=False).encode('utf-8') + b'\n' size += len(line) if size > max_window_bytes: raise WindowTooLarge() lines.append(line) if not lines: return 'no records' try: # if_generation_match=0 creates the object only if it does not exist. bucket.blob(blob_name).upload_from_string( b''.join(lines), content_type='application/x-ndjson', if_generation_match=0) except gcs_exceptions.PreconditionFailed: return f'already stored in {blob_name}' return f'wrote {len(lines)} records to gs://{bucket.name}/{blob_name}' def fetch_feed(feed_path, headers, start, end, timeout, max_retries): """Yield every record of the request feed between start and end.""" query = urlencode({'from': int(start.timestamp()), 'until': int(end.timestamp())}) page = call_api('GET', f'{API_HOST}{feed_path}?{query}', headers, None, timeout, max_retries) while True: yield from page.get('data') or [] next_uri = (page.get('next') or {}).get('uri') or '' if not next_uri: return parsed = urlsplit(next_uri) cursors = parse_qs(parsed.query).get('next') if parsed.scheme or parsed.netloc or parsed.path != feed_path or not cursors: raise FeedApiError(f'Unexpected next.uri: {next_uri}') # Later pages are requested with POST and the decoded next cursor as a form field. # The cursor is valid for one minute. page = call_api('POST', f'{API_HOST}{parsed.path}', headers, {'next': cursors[0]}, timeout, max_retries) def call_api(method, url, headers, form, timeout, max_retries): """Return the decoded JSON response, retrying throttling and server errors.""" failures = 0 while True: try: if form is None: response = http.request(method, url, headers=headers, timeout=urllib3.Timeout(connect=10.0, read=timeout)) else: response = http.request(method, url, headers=headers, fields=form, encode_multipart=False, timeout=urllib3.Timeout(connect=10.0, read=timeout)) except urllib3.exceptions.HTTPError as e: response, error = None, str(e) if response is not None and response.status == 200: return json.loads(response.data) if response is not None: error = f'HTTP {response.status}: {response.data[:500].decode("utf-8", errors="replace")}' if response.status not in RETRY_STATUSES: raise FeedApiError(error) failures += 1 if failures > max_retries: raise FeedApiError(f'{error} (after {max_retries} retries)') wait = min(30, 2 ** failures) retry_after = response.headers.get('Retry-After', '') if response is not None else '' if retry_after.isdigit(): wait = int(retry_after) print(f'{error}. Retry {failures}/{max_retries} in {wait}s') time.sleep(wait) def load_state(bucket, key): """Return the saved state and its object generation (0 if there is no state yet).""" blob = bucket.get_blob(key) if blob is None: return {}, 0 return json.loads(blob.download_as_text()), blob.generation def save_state(bucket, key, state, generation): """Save the state only if no other run changed it since it was loaded.""" blob = bucket.blob(key) try: blob.upload_from_string(json.dumps(state), content_type='application/json', if_generation_match=generation) except gcs_exceptions.PreconditionFailed: raise RuntimeError(f'{key} was changed by another run; stopping to avoid duplicate collection.') return blob.generation- requirements.txt:
functions-framework==3.* google-cloud-storage==2.* urllib3>=2.0.0Klik Deploy untuk menyimpan dan men-deploy fungsi.
Tunggu hingga deployment selesai (2-3 menit).
Buat tugas Cloud Scheduler
Cloud Scheduler akan memublikasikan pesan ke topik Pub/Sub secara berkala, sehingga memicu fungsi Cloud Run.
- Di Konsol GCP, buka Cloud Scheduler.
- Klik Create Job.
Berikan detail konfigurasi berikut:
Setelan Nilai Nama sigsci-waf-collector-hourlyRegion Pilih region yang sama dengan fungsi Cloud Run Frekuensi 5 * * * *(setiap jam, pada menit kelima setelah jam spesifik)Zona Waktu Pilih zona waktu (UTC direkomendasikan) Jenis target Pub/Sub Topik Pilih topik sigsci-waf-logs-triggerIsi pesan {}(objek JSON kosong)Klik Create.
Opsi frekuensi jadwal
Feed permintaan ditayangkan setiap menit dari lima menit setelah berakhir hingga 24 jam kemudian. Setiap operasi mengumpulkan semua data dari tempat operasi sebelumnya berhenti hingga lima menit yang lalu, sehingga interval yang lebih singkat hanya akan menurunkan latensi. Jalankan tugas setidaknya setiap jam: jika fungsi berhenti selama lebih dari 24 jam, data yang lebih lama dari 24 jam tidak dapat lagi dikumpulkan.
| Frekuensi | Ekspresi Cron | Kasus Penggunaan |
|---|---|---|
| Setiap 5 menit | */5 * * * * |
Volume tinggi, latensi rendah |
| Setiap 15 menit | */15 * * * * |
Volume sedang |
| Setiap jam | 5 * * * * |
Standar (direkomendasikan) |
Menguji integrasi
- Di konsol Cloud Scheduler, temukan tugas Anda.
- Klik Force run untuk memicu tugas secara manual.
- Tunggu beberapa detik.
- Buka Cloud Run > Services.
- Klik
sigsci-waf-collector. - Klik tab Logs.
Pastikan fungsi berhasil dieksekusi. Cari baris seperti berikut, satu per jendela 10 menit:
2026-01-15T09:00:00+00:00 to 2026-01-15T09:10:00+00:00: wrote 42 records to gs://sigsci-waf-logs/sigsci-waf/2026/01/15/20260115T090000Z_20260115T091000Z.ndjson 2026-01-15T09:10:00+00:00 to 2026-01-15T09:20:00+00:00: no records Request feed is up to date until 2026-01-15T10:00:00+00:00 (6 windows).Buka Cloud Storage > Buckets.
Klik nama bucket Anda (
sigsci-waf-logs).Buka folder
sigsci-waf/.Pastikan file
.ndjsondibuat di folderYYYY/MM/DD/. Setiap nama file menyimpan awal dan akhir jendelanya.
Jika fungsi gagal, operasi akan berhenti tanpa menyimpan status, dan operasi berikutnya akan mengumpulkan periode yang sama lagi. Di log, cari:
- HTTP 401: Periksa email dan token API di variabel lingkungan.
- HTTP 403: Pastikan akun memiliki peran Admin, Owner, atau Observer di dasbor Fastly WAF generasi berikutnya.
- HTTP 400
Invalid timestamp param: Nilaifromatauuntilmelanggar batasan feed permintaan. Periksa apakah kode fungsi cocok dengan halaman ini. - HTTP 429, 500, 502, 503, atau 504: Fungsi akan mencoba ulang hingga
MAX_RETRIESkali, lalu berhenti. Operasi berikutnya akan mencoba kembali jendela tersebut. can no longer be read from the request feed: Fungsi tidak berjalan selama lebih dari 24 jam. Data yang berusia lebih dari 24 jam tidak lagi tersedia dari feed permintaan.exceed MAX_WINDOW_MB: Satu menit rekaman lebih besar dariMAX_WINDOW_MB. TingkatkanMAX_WINDOW_MBdan memori fungsi.was changed by another run: Dua operasi tumpang-tindih. Pastikan Maximum number of instances adalah1.KeyError: Variabel lingkungan yang diperlukan tidak ada.
Mengonfigurasi feed di Google SecOps untuk menyerap log Fastly Next-Gen WAF
- Buka Setelan > Pengelolaan Data > Feed. Jika Anda menggunakan platform khusus SIEM, buka Settings > Feeds.
- Klik Tambahkan Feed Berita Baru.
- Klik Konfigurasi satu feed.
- Di kolom Nama feed, masukkan nama untuk feed (misalnya,
Signal Sciences WAF Logs). - Pilih Google Cloud Storage V2 sebagai Source type.
- Pilih Signal Sciences WAF sebagai Log type.
Klik Get Service Account. Email akun layanan yang unik akan ditampilkan, misalnya:
chronicle-12345678@chronicle-gcp-prod.iam.gserviceaccount.comSalin alamat email ini.
Klik Berikutnya.
Tentukan nilai untuk parameter input berikut:
Storage bucket URL: Masukkan URI bucket GCS dengan jalur awalan:
gs://sigsci-waf-logs/sigsci-waf/- Ganti:
sigsci-waf-logs: Nama bucket GCS Anda.sigsci-waf: Jalur awalan/folder opsional tempat log disimpan (biarkan kosong untuk root).
- Ganti:
Opsi penghapusan sumber: Pilih opsi penghapusan sesuai preferensi Anda:
- Jangan pernah menghapus file: Jangan pernah menghapus file dari sumber (direkomendasikan untuk pengujian).
- Hapus file yang ditransfer dan direktori kosong: Hapus file dan direktori kosong dari sumber setelah pengambilan berhasil diselesaikan.
Usia File Maksimum: Sertakan file yang diubah dalam jumlah hari terakhir (defaultnya adalah 180 hari)
Namespace aset: Namespace aset
Label penyerapan: Label yang akan diterapkan ke peristiwa dari feed ini
Klik Berikutnya.
Tinjau konfigurasi feed berita baru Anda di layar Finalize, lalu klik Submit.
Memberikan izin IAM ke akun layanan Google SecOps
Akun layanan Google SecOps memerlukan dua peran di bucket GCS Anda: Storage Object Viewer untuk membaca objek log, dan peran level bucket untuk membaca metadata bucket.
- Buka Cloud Storage > Buckets.
- Klik nama bucket Anda.
- Buka tab Izin.
- Klik Grant access.
- Berikan detail konfigurasi berikut:
- Add principals: Tempel email akun layanan Google SecOps
- Assign roles: Pilih kedua opsi berikut:
- Storage Object Viewer: membaca objek log.
- Storage Legacy Bucket Reader: membaca metadata bucket. Jika Anda memilih opsi penghapusan Delete transferred files and empty directories, pilih Storage Legacy Bucket Writer, yang juga memberikan izin penghapusan.
- Klik Simpan.
Tabel pemetaan UDM
| Kolom Log | Pemetaan UDM | Logika |
|---|---|---|
message_data |
metadata.description |
Dipetakan secara langsung |
created |
metadata.event_timestamp |
Diurai sebagai ISO8601 |
timestamp |
metadata.event_timestamp |
Diurai sebagai RFC3339 |
event_type |
metadata.event_type |
Dipetakan secara langsung |
has_target |
metadata.event_type |
Dipetakan: true → NETWORK_HTTP, false → STATUS_UPDATE |
label |
metadata.ingestion_labels |
Digabung |
eventType |
metadata.product_event_type |
Dipetakan secara langsung |
proto |
network.application_protocol |
Dipetakan: HTTP/1.1 → HTTP |
protocol |
network.application_protocol |
Dipetakan: HTTP/1.1 → HTTP |
details.method |
network.http.method |
Dipetakan secara langsung |
method |
network.http.method |
Dipetakan secara langsung |
details.uri |
network.http.referral_url |
Dipetakan secara langsung |
msgData.detailLink |
network.http.referral_url |
Dipetakan secara langsung |
uri |
network.http.referral_url |
Dipetakan secara langsung |
respcode |
network.http.response_code |
Diganti namanya/dipetakan |
responseCode |
network.http.response_code |
Diganti namanya/dipetakan |
details.userAgent |
network.http.user_agent |
Dipetakan secara langsung |
msgData.sites |
network.http.user_agent |
Dipetakan secara langsung |
userAgent |
network.http.user_agent |
Dipetakan secara langsung |
resSize |
network.received_bytes |
Diganti namanya/dipetakan |
responseSize |
network.received_bytes |
Diganti namanya/dipetakan |
details.tlsCipher |
network.tls.cipher |
Dipetakan secara langsung |
tlsCipher |
network.tls.cipher |
Dipetakan secara langsung |
O |
network.tls.client.certificate.issuer |
Diganti namanya/dipetakan |
details.tlsProtocol |
network.tls.version |
Dipetakan secara langsung |
tlsProtocol |
network.tls.version |
Dipetakan secara langsung |
details.serverHostname |
principal.asset.hostname |
Dipetakan secara langsung |
serverHostname |
principal.asset.hostname |
Dipetakan secara langsung |
details.serverName |
principal.asset.network_domain |
Dipetakan secara langsung |
serverName |
principal.asset.network_domain |
Dipetakan secara langsung |
details.serverHostname |
principal.hostname |
Dipetakan secara langsung |
serverHostname |
principal.hostname |
Dipetakan secara langsung |
details.id |
principal.process.pid |
Dipetakan secara langsung |
id |
principal.process.pid |
Dipetakan secara langsung |
security_result_headin |
security_result |
Digabung |
security_result_headout |
security_result |
Digabung |
security_result_tag |
security_result |
Digabung |
sec_res_headOut |
security_result.about.resource.attribute.labels |
Digabung |
sec_res_headin |
security_result.about.resource.attribute.labels |
Digabung |
security_result_action |
security_result.action |
Digabung |
msgData.conditions |
security_result.description |
Dipetakan secara langsung |
detector_field |
security_result.detection_fields |
Digabung |
link_field |
security_result.detection_fields |
Digabung |
location_field |
security_result.detection_fields |
Digabung |
redaction_field |
security_result.detection_fields |
Digabung |
type_field |
security_result.detection_fields |
Digabung |
value_field |
security_result.detection_fields |
Digabung |
msgData.reason |
security_result.summary |
Dipetakan secara langsung |
details.remoteHostname |
target.asset.hostname |
Dipetakan secara langsung |
remoteHostname |
target.asset.hostname |
Dipetakan secara langsung |
remoteIP |
target.asset.ip |
Digabung |
target_ip |
target.asset.ip |
Digabung |
details.remoteHostname |
target.hostname |
Dipetakan secara langsung |
remoteHostname |
target.hostname |
Dipetakan secara langsung |
remoteIP |
target.ip |
Digabung |
target_ip |
target.ip |
Digabung |
client_port |
target.port |
Dipetakan secara langsung |
changes_label |
target.resource.attribute.labels |
Digabung |
msgData.name |
target.resource.name |
Dipetakan secara langsung |
URI |
target.url |
Dipetakan secara langsung |
username |
target.user.user_display_name |
Dipetakan secara langsung |
userid |
target.user.userid |
Dipetakan secara langsung |
| T/A | metadata.event_type |
Konstanta: NETWORK_HTTP |
| T/A | metadata.product_name |
Konstanta: Signal Sciences WAF |
| T/A | metadata.vendor_name |
Konstanta: Signal Sciences |
| T/A | network.application_protocol |
Konstanta: HTTP |
Perlu bantuan lain? Dapatkan jawaban dari anggota Komunitas dan profesional Google SecOps.