收集 Proofpoint Email Filter 日志

支持的语言：

本文档介绍了如何使用 Bindplane 代理将 Proofpoint 电子邮件过滤日志注入到 Google Security Operations。

Proofpoint Email Protection (PPS) 是一款电子邮件安全网关，可提供垃圾邮件过滤、威胁检测和电子邮件政策执行功能。它支持 syslog 转发和 CEF 日志集成，可用于导出安全性事件和邮件事务日志。

准备工作

请确保满足以下前提条件：

  • Google SecOps 实例
  • Windows Server 2016 或更高版本，或者具有 systemd 的 Linux 主机
  • Bindplane 代理与 Proofpoint Protection Server (PPS) 之间的网络连接
  • 如果在代理后面运行，请确保按照 Bindplane 代理要求打开防火墙端口
  • 拥有管理员权限，可对 Proofpoint Protection Server (PPS) 管理控制台进行特权访问

获取 Bindplane 代理的 Google SecOps 凭据

如需向 Google SecOps 验证 Bindplane 代理，请选择以下方法之一：

  • 新部署：使用 Chronicle API（选项 1）。
  • 旧版部署：继续使用数据注入身份验证文件（方法 2），直到 Ingestion API 于 2027 年 7 月 20 日停用。
  1. 登录 Google Cloud 控制台，然后选择与您的 Google SecOps 实例关联的 Google Cloud 项目。
  2. 前往 IAM 和管理 > 服务账号。
  3. 点击创建服务账号。
  4. 提供以下配置详细信息：
    • 服务账号名称：输入账号的名称（例如 bindplane-ingest）。
    • 服务账号说明：输入说明（例如 Bindplane agent log ingestion）。
  5. 点击创建并继续。
  6. 在向此服务账号授予对项目的访问权限部分，点击选择角色，然后选择 Chronicle Editor。
  7. 点击继续，然后点击完成。
  8. 点击您创建的服务账号，然后前往密钥标签页。
  9. 依次点击添加密钥 > 创建新密钥。
  10. 选择 JSON，然后点击创建。密钥文件会下载到您的计算机上。
  11. 将密钥文件另存为 Bindplane 收集器目录（Linux 上的 /opt/observiq-otel-collector/ingestion-auth.json 或 Windows 上的 C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json）中的 ingestion-auth.json，或更新 config.yaml 中的 creds_file_path 以匹配您保存该文件的路径。
  12. 前往 IAM 和管理 > 设置，然后复制项目编号。您在配置导出器时需要用到该名称。

方法 2：下载数据注入身份验证文件（旧版）

  1. 登录 Google SecOps 控制台。
  2. 前往 SIEM 设置> 收集代理。
  3. 下载数据注入身份验证文件。
  4. 将文件安全地保存在将安装 Bindplane 代理的系统上。

获取 Google SecOps 客户 ID

  1. 登录 Google SecOps 控制台。
  2. 前往 SIEM 设置 > 个人资料。

  3. 从组织详细信息部分复制并保存客户 ID。

安装 Bindplane 代理

按照以下说明在 Windows 或 Linux 操作系统上安装 Bindplane 代理。

Windows 安装

  1. 以管理员身份打开命令提示符或 PowerShell。

  2. 运行以下命令：

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet

  3. 等待安装完成。

  4. 运行以下命令，验证安装是否成功：

    sc query observiq-otel-collector

    该服务应显示为正在运行。

Linux 安装

  1. 打开具有 root 或 sudo 权限的终端。

  2. 运行以下命令：

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh

  3. 等待安装完成。

  4. 运行以下命令，验证安装是否成功：

    sudo systemctl status observiq-otel-collector

    该服务应显示为 active (running)。

其他安装资源

如需了解其他安装选项和问题排查信息，请参阅 Bindplane 代理安装指南。

配置 Bindplane 代理以注入 Syslog 并发送到 Google SecOps

找到配置文件

  • Linux：

    sudo nano /opt/observiq-otel-collector/config.yaml

  • Windows：

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"

修改配置文件

  • 将 config.yaml 的全部内容替换为以下配置：

    receivers:
  tcplog:
    listen_address: "0.0.0.0:514"

exporters:
  chronicle/proofpoint_mail_filter:
    protocol: https
    # Region of your instance, for example us, europe, asia-southeast1
    location: <LOCATION>
    # Project number of the Google Cloud project linked to the instance
    project: '<PROJECT_NUMBER>'
    compression: gzip
    creds_file_path: '<CREDS_FILE_PATH>'
    customer_id: '<CUSTOMER_ID>'
    endpoint: chronicle.googleapis.com
    log_type: PROOFPOINT_MAIL_FILTER
    raw_log_field: body
    ingestion_labels:
      env: production

service:
  pipelines:
    logs/proofpoint_mail_to_chronicle:
      receivers:
        - tcplog
      exporters:
        - chronicle/proofpoint_mail_filter

配置参数

替换以下占位符：

  • 接收器配置：

    • tcplog：通过 TCP 接收 syslog。如果您在 PPS 中配置 UDP 传输，请使用 udplog。
    • 0.0.0.0:514：在端口 514 上监听所有接口。如果需要，请更改端口（例如，对于非 root Linux，请使用 1514）。

  • 导出器配置：

    • <CREDS_FILE_PATH>：服务账号 JSON 密钥文件的完整路径（选项 1）：
      • Linux：/opt/observiq-otel-collector/ingestion-auth.json
      • Windows：C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
    • <CUSTOMER_ID>：获取 Google SecOps 客户 ID 步骤中的客户 ID。
    • location：将 <LOCATION> 替换为 Google SecOps 实例的区域（例如 us、europe 或 asia-southeast1）。导出器会使用此值作为 chronicle.googleapis.com 的前缀。如需查看完整列表，请参阅区域级端点。
    • project：将 <PROJECT_NUMBER> 替换为 IAM 和管理 > 设置中的项目编号。
    • endpoint：保持设置为 chronicle.googleapis.com。

旧版提取 API 导出工具

  • 如果您使用选项 2 中的数据注入身份验证文件，请将 exporters 代码块替换为以下内容。将 creds_file_path 设置为数据注入身份验证文件的路径，如果您的实例位于美国境外，请将 malachiteingestion-pa.googleapis.com 替换为您的区域端点（例如 europe-malachiteingestion-pa.googleapis.com）。

    exporters:
  chronicle/proofpoint_mail_filter:
    compression: gzip
    creds_file_path: '<CREDS_FILE_PATH>'
    customer_id: '<CUSTOMER_ID>'
    endpoint: malachiteingestion-pa.googleapis.com
    log_type: PROOFPOINT_MAIL_FILTER
    raw_log_field: body
    ingestion_labels:
      env: production

保存配置文件

  • 修改后，保存文件：
    • Linux：依次按 Ctrl+O、Enter 和 Ctrl+X
    • Windows：依次点击文件 > 保存

重启 Bindplane 代理以应用更改

  • 如需在 Linux 中重启 Bindplane 代理，请运行以下命令：

    sudo systemctl restart observiq-otel-collector

    1. 验证服务是否正在运行：

      sudo systemctl status observiq-otel-collector

    2. 检查日志中的错误：

      sudo journalctl -u observiq-otel-collector -f

  • 如需在 Windows 中重启 Bindplane 代理，请选择以下选项之一：

    • 以管理员身份运行命令提示符或 PowerShell：

      net stop observiq-otel-collector && net start observiq-otel-collector

    • “服务”控制台：

      1. 按 Win+R，输入 services.msc，然后按 Enter 键。
      2. 找到 observIQ OpenTelemetry 收集器。
      3. 右键点击，然后选择重新启动。

      4. 验证服务是否正在运行：

        sc query observiq-otel-collector

      5. 检查日志中是否存在错误：

        type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"

配置 Proofpoint Email Protection syslog 转发

方法 1：在 Proofpoint PPS 中配置 syslog 转发

  1. 登录 Proofpoint Protection Server (PPS) 管理控制台。
  2. 依次前往系统 > 日志和报告 > 日志设置。
  3. 在远程日志设置部分中，配置以下内容：
    • 协议：选择 Syslog。
    • Syslog 服务器：输入 Bindplane 代理主机的 IP 地址（例如 192.168.1.100）。
    • 端口：输入 514（必须与 Bindplane 代理接收器端口一致）。
    • 传输：选择 TCP（必须与 Bindplane 代理接收器配置匹配）。TLS 还支持安全转发。
  4. 在本地日志选项部分，根据需要配置日志记录详细程度。

  5. 点击保存更改。

方法 2：配置 CEF 日志集成

  1. 登录 Proofpoint Protection Server (PPS) 管理控制台。
  2. 依次前往配置 > 集成 > 集成式 SIEM。
  3. 点击 SIEM Log Integration（SIEM 日志集成）标签页。
  4. 选择启用导出为 ArcSight 格式，以激活 CEF 日志集成。
  5. 配置 syslog 目标服务器：
    • 主机：输入 Bindplane 代理主机的 IP 地址（例如 192.168.1.100）。
    • 端口：输入 514（必须与 Bindplane 代理接收器端口匹配）。
  6. 点击保存。
  7. 通过检查 Bindplane 代理日志，验证是否正在接收 CEF 格式的日志。

UDM 映射表

日志字段 UDM 映射 逻辑
关于 事件的其他信息
adultscore、attachments、hops、routes、notroutes、eid、querydepth、selector、spamscore、phishscore、mod、status、folder additional.fields 无法在 UDM 模型的正式部分中充分表示的供应商特定事件数据
auth extensions.auth.type 使用的身份验证类型
中介 与事件相关的中间设备的信息
网域 intermediary.administrative_domain 中介机构的管理网域
hops-ip、lip、interm_ip intermediary.ip 中介的 IP 地址
metadata.event_type 事件类型（例如 USER_LOGIN、NETWORK_CONNECTION）
prod_event_type metadata.product_event_type 特定产品的事件类型
引擎 metadata.product_version 生成事件的产品的版本
proto, mailer network.application_protocol 网络连接中使用的应用协议
hfrom、from network.email.from 电子邮件发件人地址
m、msgid、net_mail_id、hdr_mid network.email.mail_id 电子邮件的唯一标识符
subject network.email.subject 邮件的主题行
至 network.email.to 电子邮件收件人地址
received_byte network.received_bytes 网络连接中接收的字节数
秒 network.session_id 网络会话的唯一标识符
cipher network.tls.cipher 使用的 TLS 加密套件
tls_version、version network.tls.version 使用的 TLS 版本
网域 principal.administrative_domain 主体的管理网域
proc principal.application 事件中涉及的应用
设备、主机 principal.asset.hostname 与主体相关联的资产的主机名
ip, srcip principal.asset.ip 与主体相关联的资产的 IP 地址
guid principal.asset_id 资产的唯一标识符
设备、主机 principal.hostname 主账号的主机名
ip, srcip principal.ip 主体的 IP 地址
国家/地区 principal.location.country_or_region 主体所在位置的国家或区域
cmd principal.process.command_line 用于启动进程的命令行
file, name principal.process.file.full_path 进程中所涉及文件的完整路径
sz、size principal.process.file.size 文件的大小（以字节为单位）
pid, process_id principal.process.pid 进程 ID
action, security_action security_result.action 安全产品采取的操作
分类器 security_result.category 安全结果的类别
class, internalId security_result.detection_fields 用于检测的字段
规则 security_result.rule_name 触发安全结果的规则的名称
security_desc security_result.summary 安全结果摘要
主机名 target.asset.hostname 与目标关联的资产的主机名
主机名 target.hostname 目标的主机名
metadata.product_name 生成事件的产品名称
metadata.vendor_name 生产该产品的供应商的名称
AppAccessContext.AADSessionId event.idm.read_only_udm.network.session_id 从更新日志映射
ClientAppName event.idm.read_only_udm.target.application 从更新日志映射
AppAccessContext.CorrelationId event.idm.read_only_udm.additional.fields 从更新日志映射
AppAccessContext.UniqueTokenId event.idm.read_only_udm.additional.fields 从更新日志映射
AppAccessContext.UserObjectId event.idm.read_only_udm.principal.user.product_object_id 从更新日志映射
Id event.idm.read_only_udm.target.resource.product_object_id 从更新日志映射
Operation event.idm.read_only_udm.metadata.product_event_type 从更新日志映射
RecordType event.idm.read_only_udm.security_result.detection_fields 从更新日志映射
UserKey event.idm.read_only_udm.principal.user.attribute.labels 从更新日志映射
UserType event.idm.read_only_udm.principal.user.attribute.labels 从更新日志映射
Version event.idm.read_only_udm.additional.fields 从更新日志映射
Workload event.idm.read_only_udm.principal.application 从更新日志映射
ClientIP event.idm.read_only_udm.principal.ip, event.idm.read_only_udm.principal.asset.ip 从更新日志映射
UserId event.idm.read_only_udm.principal.user.email_addresses 从更新日志映射
AuthenticationType event.idm.read_only_udm.extensions.auth.auth_details 从更新日志映射
BrowserName event.idm.read_only_udm.network.http.parsed_user_agent 从更新日志映射
BrowserVersion event.idm.read_only_udm.network.http.parsed_user_agent.browser_version 从更新日志映射
CorrelationId event.idm.read_only_udm.additional.fields 从更新日志映射
EventSource event.idm.read_only_udm.additional.fields 从更新日志映射
GeoLocation event.idm.read_only_udm.principal.location.name 从更新日志映射
IsManagedDevice event.idm.read_only_udm.security_result.detection_fields 从更新日志映射
ItemType event.idm.read_only_udm.additional.fields 从更新日志映射
ListId event.idm.read_only_udm.additional.fields 从更新日志映射
ListItemUniqueId event.idm.read_only_udm.additional.fields 从更新日志映射
Platform event.idm.read_only_udm.additional.fields 从更新日志映射
Site event.idm.read_only_udm.additional.fields 从更新日志映射
UserAgent event.idm.read_only_udm.network.http.user_agent 从更新日志映射
WebId event.idm.read_only_udm.additional.fields 从更新日志映射
HighPriorityMediaProcessing event.idm.read_only_udm.additional.fields 从更新日志映射
ListBaseType event.idm.read_only_udm.additional.fields 从更新日志映射
ListServerTemplate event.idm.read_only_udm.additional.fields 从更新日志映射
SourceRelativeUrl event.idm.read_only_udm.principal.url 从更新日志映射
net_mail_id" and "hdr_mid network.email.mail_id 从更新日志映射
delay about.resource.attribute.labels 从更新日志映射
relay intermediary.administrative_domain 从更新日志映射
device" from "intermediary.hostname principal.hostname 从更新日志映射

更新日志

查看相应解析器的更新日志

需要更多帮助？获得社区成员和 Google SecOps 专业人士的解答。