收集 AWS S3 伺服器存取記錄
剖析器版本:4.0
支援的服務:
Google SecOps
SIEM
本文說明如何設定 Google Security Operations 動態饋給,收集 AWS S3 伺服器存取記錄。剖析器會使用 grok 模式擷取欄位、處理可能的 JSON 輸入內容,並將擷取的欄位對應至 UDM。剖析器會根據特定欄位的存在與否和值,執行資料轉換、類型轉換和條件邏輯,確保 UDM 表示法準確無誤。
事前準備
請確認您已完成下列事前準備:
- Google SecOps 執行個體
- AWS 特殊存取權
如何設定 AWS S3 伺服器存取記錄
Google SecOps 支援透過 Amazon SQS 使用 Amazon S3 收集記錄。
- 登入 AWS 管理主控台。
- 存取 Amazon S3 控制台。
- 依序前往「Amazon S3」>「Buckets」。
- 選取現有 bucket 或建立新 bucket。
- 按一下「屬性」。
- 在「Server access logging」(伺服器存取記錄) 區段中,按一下「Edit」(編輯)。
- 選取「Enable」(啟用)。
- 在「Target bucket」(目標 bucket) 欄位中,輸入新 bucket 的名稱,以便將記錄物件傳送至該 bucket,或選取現有 bucket 做為目標。
- 按一下 [儲存變更]。
- 如要為 S3 bucket 建立 SQS 佇列,請使用 S3 儲存空間設定 Amazon SQS 執行個體。詳情請參閱「設定 bucket 以接收通知 (SNS 主題或 SQS 佇列)」。
請根據服務和區域,參閱下列 AWS 說明文件,找出連線能力端點:
- 如要瞭解任何記錄來源,請參閱「AWS Identity and Access Management 端點和配額」。
- 如要瞭解 S3 記錄來源,請參閱「Amazon Simple Storage Service 端點和配額」。
- 如要瞭解 SQS 記錄來源,請參閱「Amazon Simple Queue Service 端點和配額」。
設定動態饋給
在 Google SecOps 平台中,有兩個不同的進入點可以設定動態饋給:
- 「設定」>「資料管理」>「動態饋給」>「新增動態饋給」 (在僅限 SIEM 的平台上,依序點選「設定」>「動態饋給」>「新增動態饋給」)
- Content Hub > Content Packs > Get Started
如何設定 AWS S3 服務存取權動態饋給
- 按一下「Amazon Cloud Platform」套件。
- 找出「AWS S3 Service Access」記錄類型。
- Google SecOps 支援使用存取金鑰 ID 和密鑰方法收集記錄。如要建立存取金鑰 ID 和密鑰,請參閱「使用 AWS 設定工具驗證」。
在下列欄位中指定值。
- 來源類型:Amazon SQS V2
- Queue Name:要讀取的 SQS 佇列名稱
- S3 URI:值區 URI。
s3://your-log-bucket-name/- 將
your-log-bucket-name替換為 S3 bucket 的實際名稱。
- 將
來源刪除選項:根據攝入偏好設定選取刪除選項。
檔案存在時間上限:包含過去幾天內修改過的檔案。預設值為 180 天。
SQS 佇列存取金鑰 ID:帳戶存取金鑰,由 20 個英數字元組成。
SQS 佇列私密存取金鑰:帳戶存取金鑰,由 40 個英數字元組成。
進階選項
- 動態饋給名稱:系統預先填入的值,用於識別動態饋給。
- 資產命名空間:與動態饋給相關聯的命名空間。
- 擷取標籤:套用至這個動態饋給所有事件的標籤。
點選「建立動態饋給」。
如要進一步瞭解如何為這個產品系列中的不同記錄類型設定多個動態饋給,請參閱「依產品設定動態饋給」。
UDM 對應表
| 記錄欄位 | UDM 對應 | 邏輯 |
|---|---|---|
aclRequired |
target.resource.attribute.labels.key: "aclRequired"target.resource.attribute.labels.value: aclRequired 的值 |
直接從原始記錄欄位 aclRequired 對應。 |
authenticationtype |
extensions.auth.auth_details |
直接從原始記錄欄位 authenticationtype 對應。 |
bucket |
target.resource.name |
直接從原始記錄欄位 bucket 對應。 |
bucket |
target.resource.resource_type: "STORAGE_BUCKET" |
如果 bucket 欄位存在,剖析器會將 resource_type 設為「STORAGE_BUCKET」。 |
bucketowner |
target.resource.product_object_id |
直接從原始記錄欄位 bucketowner 對應。 |
bytes_sent |
network.sent_bytes |
直接從原始記錄欄位 bytes_sent 對應,並轉換為不帶正負號的整數,以及將「-」替換為「0」。 |
ciphersuite |
network.application_protocol:「HTTPS」 |
如果 ciphersuite 欄位存在,剖析器會將 application_protocol 設為「HTTPS」。 |
ciphersuite |
network.tls.cipher |
直接從原始記錄欄位 ciphersuite 對應。 |
errorcode |
security_result.action_details |
直接從原始記錄欄位 errorcode 對應。 |
errorcode |
security_result.action:「BLOCK」 |
如果 errorcode 欄位包含「AccessDenied」(不區分大小寫),剖析器會將 action 設為「BLOCK」。 |
hostheader |
target.hostname |
從原始記錄欄位 hostheader 擷取,可能會移除通訊埠編號。 |
hostheader |
target.port |
如果原始記錄欄位 hostheader 含有通訊埠號碼,則從該欄位擷取。 |
hostid |
target.resource.attribute.labels.key:「S3 擴充要求 ID」target.resource.attribute.labels.value:hostid 的值 |
直接從原始記錄欄位 hostid 對應。 |
http_capture |
network.http.method |
HTTP 方法是從 http_capture 欄位擷取。 |
http_capture |
network.http.version |
HTTP 版本是從 http_capture 欄位擷取。 |
http_capture |
target.url |
目標網址是使用 hostheader 和 http_request_uri (從 http_capture 擷取) 建構而成,並根據 ciphersuite 是否存在,加上「http://」或「https://」前置字元。 |
httpstatus |
network.http.response_code |
將原始記錄欄位 httpstatus 轉換為整數後,直接對應。 |
object_version_id |
target.resource.product_object_id |
直接從原始記錄欄位 object_version_id 對應。 |
objectsize |
target.file.size |
直接從原始記錄欄位 objectsize 對應,並轉換為不帶正負號的整數,以及將「-」替換為「0」。 |
operation |
metadata.product_event_type |
直接從原始記錄欄位 operation 對應。 |
referrer |
network.http.referral_url |
移除引號後,直接從原始記錄欄位 referrer 對應。 |
remoteip |
metadata.event_type: "USER_RESOURCE_ACCESS" |
如果 remoteip 欄位空白,剖析器會將 event_type 設為「USER_RESOURCE_ACCESS」。 |
remoteip |
principal.ip |
直接從原始記錄欄位 remoteip 對應。 |
requester |
target.resource.attribute.labels.key:「存取點 ARN」target.resource.attribute.labels.value:requester 的值 |
直接從原始記錄欄位 requester 對應。 |
requester_user |
principal.user.userid |
直接從原始記錄欄位 requester_user 對應。 |
requestid |
network.session_id |
直接從原始記錄欄位 requestid 對應。 |
request_time_ms |
network.session_duration.nanos |
直接從原始記錄欄位 request_time_ms 對應而來,並轉換為整數、將「-」替換為「0」,以及補零來代表奈秒。 |
signatureversion |
target.resource.attribute.labels.key:「簽章版本」target.resource.attribute.labels.value:signatureversion 的值 |
直接從原始記錄欄位 signatureversion 對應。 |
time |
metadata.event_timestamp |
從原始記錄欄位 time 剖析並轉換為時間戳記。 |
tlsVersion |
network.tls.version |
直接從原始記錄欄位 tlsVersion 對應。 |
useragent |
network.http.user_agent |
移除引號後,直接從原始記錄欄位 useragent 對應。 |
| (剖析器邏輯) | metadata.event_type:「NETWORK_HTTP」 |
剖析器會將預設 event_type 設為「NETWORK_HTTP」。 |
| (剖析器邏輯) | metadata.log_type:「AWS_S3_SERVER_ACCESS」 |
剖析器會將 log_type 設為「AWS_S3_SERVER_ACCESS」。 |
| (剖析器邏輯) | metadata.product_name:「AWS S3 Server Access」 |
剖析器會將 product_name 設為「AWS S3 Server Access」。 |
| (剖析器邏輯) | metadata.product_version:「HTTP/http_version」 |
剖析器會使用擷取的 http_version 設定 product_version。 |
| (剖析器邏輯) | metadata.vendor_name:「AMAZON」 |
剖析器會將 vendor_name 設為「AMAZON」。 |
| (剖析器邏輯) | network.application_protocol:「HTTP」 |
如果沒有 ciphersuite 欄位,剖析器會將 application_protocol 設為「HTTP」。 |
| (剖析器邏輯) | timestamp |
剖析器會在處理事件時,將事件 timestamp 設為目前時間。 |
變更記錄
還有其他問題嗎?向社群成員和 Google SecOps 專家尋求解答。