收集 Netscout Arbor Sightline 日志
本文档介绍了如何使用 Bindplane 代理将 Netscout Arbor Sightline 日志注入到 Google Security Operations 中。
Netscout Arbor Sightline(以前称为 Peakflow SP)是一个 DDoS 检测和网络可见性平台,可提供从全网络容量规划到识别和管理 DDoS 攻击缓解以及网络其他威胁的强大功能。Sightline 会收集并分析流量数据、BGP 路由信息和 SNMP 数据,以检测异常情况、生成提醒并协调缓解措施。
准备工作
请确保满足以下前提条件:
- Google SecOps 实例
- Windows Server 2016 或更高版本,或者具有
systemd的 Linux 主机 - Bindplane 代理与 Netscout Arbor Sightline 设备之间的网络连接
- 如果通过代理运行,请确保防火墙端口已根据 Bindplane 代理要求打开
- 对 Netscout Arbor Sightline 网页界面的管理员访问权限
- 对 Netscout Arbor Sightline 命令行界面 (CLI) 的管理访问权限,用于配置系统提醒
获取 Google SecOps 注入身份验证文件
- 登录 Google SecOps 控制台。
- 依次前往 SIEM 设置 > 收集代理。
下载注入身份验证文件。将文件安全地保存在将要安装 Bindplane 的系统上。
获取 Google SecOps 客户 ID
- 登录 Google SecOps 控制台。
- 依次前往 SIEM 设置 > 配置文件。
复制并保存组织详细信息部分中的客户 ID。
安装 Bindplane 代理
按照以下说明在 Windows 或 Linux 操作系统上安装 Bindplane 代理。
Windows 安装
- 以管理员身份打开命令提示符或 PowerShell。
运行以下命令:
msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet等待安装完成。
运行以下命令来验证安装:
sc query observiq-otel-collector该服务应显示为 RUNNING。
Linux 安装
- 打开具有 root 或 sudo 权限的终端。
运行以下命令:
sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh等待安装完成。
运行以下命令来验证安装:
sudo systemctl status observiq-otel-collector该服务应显示为有效(正在运行)。
其他安装资源
如需了解其他安装选项和问题排查信息,请参阅 Bindplane 代理安装指南。
配置 Bindplane 代理以注入 syslog 并将其发送到 Google SecOps
找到配置文件
Linux:
sudo nano /etc/bindplane-agent/config.yamlWindows:
notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
修改配置文件
将
config.yaml的全部内容替换为以下配置:receivers: udplog: listen_address: "0.0.0.0:514" exporters: chronicle/arbor_sightline: compression: gzip creds_file_path: '<CREDS_FILE_PATH>' customer_id: '<CUSTOMER_ID>' endpoint: malachiteingestion-pa.googleapis.com log_type: ARBOR_SIGHTLINE raw_log_field: body ingestion_labels: env: production service: pipelines: logs/arbor_to_chronicle: receivers: - udplog exporters: - chronicle/arbor_sightline替换以下占位符:
接收器配置:
- 接收器配置为在所有接口 (
0.0.0.0:514) 上侦听 UDP 端口 514 - 如果您需要使用其他端口(例如,对于非 root Linux 安装,使用
1514),请修改listen_address值 - 如果您偏好使用 TCP syslog,请将接收器部分和流水线中的
udplog替换为tcplog
- 接收器配置为在所有接口 (
导出器配置:
<CREDS_FILE_PATH>:提取身份验证文件的完整路径:- Linux:
/etc/bindplane-agent/ingestion-auth.json - Windows:
C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
- Linux:
<CUSTOMER_ID>:上一步中的客户 IDendpoint:区域端点网址(显示的默认网址为美国区域):- 美国:
malachiteingestion-pa.googleapis.com - 欧洲:
europe-malachiteingestion-pa.googleapis.com - 亚洲:
asia-southeast1-malachiteingestion-pa.googleapis.com - 如需查看完整列表,请参阅区域级端点
- 美国:
log_type:设置为ARBOR_SIGHTLINE(需要完全匹配)ingestion_labels:YAML 格式的可选标签(根据您的环境需要进行修改)
配置示例
receivers: udplog: listen_address: "0.0.0.0:514" exporters: chronicle/arbor_sightline: compression: gzip creds_file_path: '/etc/bindplane-agent/ingestion-auth.json' customer_id: 'a1b2c3d4-e5f6-g7h8-i9j0-k1l2m3n4o5p6' endpoint: malachiteingestion-pa.googleapis.com log_type: ARBOR_SIGHTLINE raw_log_field: body ingestion_labels: env: production source: sightline service: pipelines: logs/arbor_to_chronicle: receivers: - udplog exporters: - chronicle/arbor_sightline
保存配置文件
修改后,保存文件:
- Linux:依次按
Ctrl+O、Enter和Ctrl+X - Windows:依次点击文件 > 保存
重启 Bindplane 代理以应用更改
如需在 Linux 中重启 Bindplane 代理,请执行以下操作:
运行以下命令:
sudo systemctl restart observiq-otel-collector验证服务是否正在运行:
sudo systemctl status observiq-otel-collector检查日志是否存在错误:
sudo journalctl -u observiq-otel-collector -f
如需在 Windows 中重启 Bindplane 代理,请执行以下操作:
请从下列选项中选择一项:
以管理员身份运行命令提示符或 PowerShell:
net stop observiq-otel-collector && net start observiq-otel-collector服务控制台:
- 按
Win+R,输入services.msc,然后按 Enter 键。 - 找到 observIQ OpenTelemetry 收集器。
- 右键点击并选择重新启动。
- 按
验证服务是否正在运行:
sc query observiq-otel-collector检查日志是否存在错误:
type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
配置 Netscout Arbor Sightline syslog 转发
如需将日志发送到 Google SecOps,您必须将 Netscout Arbor Sightline 配置为将 syslog 事件转发到 Bindplane 代理。这包括创建通知组、配置全局通知设置和设置提醒通知规则。
创建通知组
- 以管理员身份登录 Netscout Arbor Sightline 网页界面。
- 依次前往管理 > 通知 > 群组。
- 点击 Add Notification Group。
- 提供以下配置详细信息:
- 目的地:输入 Bindplane 代理主机(例如
192.168.1.100)的 IP 地址。 - 端口:输入
514(或在 Bindplane 代理中配置的端口,例如1514)。 - 功能:选择一个 syslog 功能(例如
local0或user)。 - 严重程度:选择
info。信息严重程度会收集信息事件级别及更高级别的所有事件消息。
- 目的地:输入 Bindplane 代理主机(例如
- 点击保存。
点击 Configuration Commit 以应用配置更改。
配置全局通知设置
Netscout Arbor Sightline 中的全局通知提供与特定提醒规则无关的系统通知。
- 在 Netscout Arbor Sightline 网页界面中,依次前往 Administration > Notification > Global Settings。
- 在默认通知组字段中,选择您为 Google SecOps 创建的通知组。
- 点击保存。
- 点击 Configuration Commit 以应用配置更改。
启用系统提醒通知
系统提醒需要通过命令行界面 (CLI) 进行额外配置。
- 以管理员身份登录 Netscout Arbor Sightline 命令行界面。
列出当前系统提醒配置:
services sp alerts system_errors show如需列出可配置的可用系统提醒字段名称,请运行:
services sp alerts system_errors ?启用系统提醒通知。对于要启用的每种提醒类型,请运行:
services sp alerts system_errors <alert_name> notifications enable将
<alert_name>替换为具体的系统提醒字段名称(例如disk_full、flow_collector_down、license_expiring)。提交配置更改:
config write
配置提醒通知规则
提醒通知规则用于确定哪些提醒会触发发送到 Google SecOps 的 syslog 通知。
- 在 Netscout Arbor Sightline 网页界面中,依次前往 Administration > Notification > Rules。
- 根据需要,执行以下操作之一:
- 点击现有规则即可进行修改。
- 点击添加规则以创建新的通知规则。
- 配置以下值:
- 名称:为规则输入一个描述性名称(例如
Chronicle-DDoS-Alerts)。 - 资源:输入 CIDR 地址,或从 Sightline 资源列表中选择一个受管理的对象。如需将规则应用于所有资源,请将此字段留空或选择全部。
- 重要性:选择提醒的最低重要性级别(例如
Low、Medium、High或Critical)。达到或高于此级别的提醒会触发通知。 - 通知组:选择您为 Google SecOps 创建的通知组。
- 名称:为规则输入一个描述性名称(例如
- 根据需要重复上述步骤,为不同的资源或重要程度配置其他规则。
- 点击保存。
点击 Configuration Commit 以应用配置更改。
测试 syslog 连接
配置通知组和规则后,验证 syslog 消息是否已发送到 Bindplane 代理。
在 Netscout Arbor Sightline CLI 中,测试 syslog 连接:
services sp notification test syslog group <notification_group_name>将
<notification_group_name>替换为您创建的通知组的名称。该命令应返回:
Server returned: Success检查 Bindplane 代理日志,验证是否收到了测试消息:
Linux:
sudo journalctl -u observiq-otel-collector -fWindows:
type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"在 Google SecOps 控制台中,前往搜索,并验证 Netscout Arbor Sightline 日志是否显示了提取标签
ARBOR_SIGHTLINE。
转发到 Google SecOps 的事件类型
Netscout Arbor Sightline 通过 syslog 转发以下事件类别:
- 拒绝服务攻击 (DoS) 事件:DDoS 攻击检测提醒,包括容量耗尽攻击、协议攻击和应用层攻击
- 身份验证事件:用户登录成功和失败、身份验证尝试
- 漏洞利用事件:检测到的漏洞利用尝试和可疑流量模式
- 可疑活动事件:异常流量行为和潜在安全威胁
- 系统事件:设备健康状况、服务状态、配置变更和操作提醒
- 缓解事件:DDoS 攻击的缓解开始、停止和状态更新
UDM 映射表
| 日志字段 | UDM 映射 | 逻辑 |
|---|---|---|
| msg1 | additional.fields | 如果每个字段的标签不为空,则会与这些标签合并,并使用特定键(例如“message_description”用于 msg1,“config_version”用于 config_version 等)。 |
| config_version | additional.fields | |
| prin_user | additional.fields | |
| old_bgp_attributes | additional.fields | |
| new_bgp_attributes | additional.fields | |
| reason | additional.fields | |
| sample_rate | additional.fields | |
| proto | additional.fields | |
| 流程 | additional.fields | |
| 标识符 | additional.fields | |
| expected_bps | additional.fields | |
| actual_bps | additional.fields | |
| 服务器 | additional.fields | |
| 状态 | additional.fields | |
| 百分比 | additional.fields | |
| 税率 | additional.fields | |
| rateunit | additional.fields | |
| flags | additional.fields | |
| 路由器 | additional.fields | |
| 接口 | additional.fields | |
| ip_ver | additional.fields | |
| protocol_id | additional.fields | |
| router_name | additional.fields | |
| interface_id | additional.fields | |
| interface_name | additional.fields | |
| 优先级 | additional.fields | |
| log_level | additional.fields | |
| 水塘 | additional.fields | |
| thread_id | additional.fields | |
| timeout | additional.fields | |
| 尝试 | additional.fields | |
| vulns | extensions.vulns.vulnerabilities | 如果漏洞不为空,则合并 |
| 降序 | metadata.description | 如果 desc 和 desc2 均不为空,则设置为“%{desc}: %{desc2}”,否则设置为 desc;如果 message_desc 不为空,则会被其覆盖 |
| desc2 | metadata.description | |
| message_desc | metadata.description | |
| event_time | metadata.event_timestamp | 使用日期过滤器转换,格式为 MMM dd HH:mm:ss 或 MMM d HH:mm:ss,时区为 Europe/London |
| desc2 | metadata.event_type | 如果 desc2 与“(DNS Amplification |
| 消息 | metadata.event_type | |
| src_ip | metadata.event_type | |
| has_target_ip | metadata.event_type | |
| has_network_protocol | metadata.event_type | |
| host_name | metadata.event_type | |
| 消息 | metadata.product_event_type | 如果消息与“Host Detection”匹配,则设置为“Host Detection”;如果消息与“started”匹配,则设置为“TMS Mitigation started”;如果消息与“stopped”匹配,则设置为“TMS Mitigation stopped” |
| metadata.product_name | metadata.product_name | 设置为“ARBOR_SIGHTLINE” |
| metadata.vendor_name | metadata.vendor_name | 设置为“NETSCOUT” |
| 方向 | network.direction | 如果方向为“incoming”,则设置为“INBOUND” |
| proto | network.ip_protocol | 如果 proto 为“6”,则设置为“TCP”;否则,如果与“(?i)(TCP |
| network_protocol | network.ip_protocol | |
| 字节 | network.sent_bytes | 直接复制的值,已转换为无符号整数 |
| 数据包 | network.sent_packets | 直接复制的值,已转换为整数 |
| 时长 | network.session_duration.seconds | 如果不为空且不为“0”,则直接复制值;否则,转换为整数 |
| host_name | principal.hostname | 直接复制值 |
| src_ip | principal.ip | 从 src_ip 和 nameserver_ip 合并 |
| nameserver_ip | principal.ip | |
| 命名空间 | principal.namespace | 直接复制值 |
| filename | principal.process.file.full_path | 直接复制值 |
| alert_id | principal.process.pid | 直接复制值 |
| prin_url | principal.url | 直接复制值 |
| prin_user | principal.user.userid | 直接复制值 |
| 影响 | security_result.detection_fields | 与以下键合并:“Impact”(来自 impact)、“Importance”(来自 importance)、“Signature”(来自 signature)、“Leader”(来自 leader)、“parent_managed_object”(来自 parent_managed_object)、“Alert ID”(来自 alert_id) |
| 重要性 | security_result.detection_fields | |
| signature | security_result.detection_fields | |
| leader | security_result.detection_fields | |
| parent_managed_object | security_result.detection_fields | |
| alert_id | security_result.detection_fields | |
| 和程度上减少 | security_result.severity | 如果严重程度在 ["10","9"] 中,则设置为“INFORMATIONAL”;如果在 ["8","7"] 中,则设置为“LOW”;如果为“6”,则设置为“MEDIUM”;如果在 ["5","4"] 中,则设置为“HIGH”;如果在 ["3","2","1"] 中,则设置为“CRITICAL” |
| desc2 | security_result.threat_status | 如果说明与“主机检测提醒”匹配,且消息为“start”而非“stop”,则设置为“ACTIVE”;如果说明与“主机检测提醒”匹配,且消息为“stop”,则设置为“CLEARED” |
| 消息 | security_result.threat_status | |
| intem_host | target.group.product_object_id | 直接复制值 |
| dst_ip | target.ip | 直接复制值 |
| dst_port | target.port | 直接复制的值,已转换为整数 |
| file_path | target.process.file.full_path | 直接复制值 |
| stop_time | vulns.vulnerabilities.scan_end_time | 使用日期过滤器转换,格式为 yyyy-MM-dd HH:mm:ss |
| start_time | vulns.vulnerabilities.scan_start_time | 使用日期过滤条件转换,格式为 yyyy-MM-dd HH:mm:ss 或 yyyy-MM-dd |
需要更多帮助?获得社区成员和 Google SecOps 专业人士的解答。