收集 F5 DNS 日志
解析器版本:5.0
本文档介绍了如何使用 Bindplane 代理将 F5 DNS 日志注入到 Google Security Operations。
F5 BIG-IP DNS 是一种 DNS 传送解决方案,可为 DNS 查询、响应和系统事件生成 syslog 消息。解析器会从 syslog 格式的日志中提取字段,并将其映射到统一数据模型 (UDM)。
准备工作
请确保满足以下前提条件:
- Google SecOps 实例
- Windows Server 2016 或更高版本,或者具有
systemd的 Linux 主机 - Bindplane 代理与 F5 BIG-IP 设备之间的网络连接
- 如果在代理后面运行,请确保防火墙端口已根据 Bindplane 代理要求打开
- 对 F5 BIG-IP 的特权访问权限
获取 Google SecOps 注入身份验证文件
- 登录 Google SecOps 控制台。
- 依次前往 SIEM 设置 > 收集代理。
下载数据注入身份验证文件。将该文件安全地保存在将要安装 Bindplane 的系统上。
获取 Google SecOps 客户 ID
- 登录 Google SecOps 控制台。
- 依次前往 SIEM 设置 > 配置文件。
复制并保存组织详细信息部分中的客户 ID。
安装 Bindplane 代理
按照以下说明在 Windows 或 Linux 操作系统上安装 Bindplane 代理。
Windows 安装
- 以管理员身份打开命令提示符或 PowerShell。
运行以下命令:
msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet等待安装完成。
运行以下命令,验证安装是否成功:
sc query observiq-otel-collector该服务应显示为 正在运行。
Linux 安装
- 打开具有 root 或 sudo 权限的终端。
运行以下命令:
sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh等待安装完成。
运行以下命令,验证安装是否成功:
sudo systemctl status observiq-otel-collector该服务应显示为有效(正在运行)。
其他安装资源
如需了解其他安装选项和问题排查信息,请参阅 Bindplane 代理安装指南。
配置 Bindplane 代理以注入 syslog 并将其发送到 Google SecOps
找到配置文件
Linux:
sudo nano /etc/bindplane-agent/config.yamlWindows:
notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
修改配置文件
将
config.yaml的全部内容替换为以下配置:receivers: udplog: listen_address: "0.0.0.0:514" exporters: chronicle/f5_dns: compression: gzip creds_file_path: '/etc/bindplane-agent/ingestion-auth.json' customer_id: '<customer_id>' endpoint: malachiteingestion-pa.googleapis.com log_type: F5_DNS raw_log_field: body service: pipelines: logs/f5_dns_to_chronicle: receivers: - udplog exporters: - chronicle/f5_dns
配置参数
替换以下占位符:
接收器配置:
listen_address:要监听的 IP 地址和端口:0.0.0.0侦听所有接口(推荐)- 端口
514是标准 syslog 端口(在 Linux 上需要 root 权限;对于非 root 用户,请使用1514)
导出器配置:
creds_file_path:提取身份验证文件的完整路径:- Linux:
/etc/bindplane-agent/ingestion-auth.json - Windows:
C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
- Linux:
customer_id:从 Google SecOps 控制台复制的客户 IDendpoint:区域端点网址:- 美国:
malachiteingestion-pa.googleapis.com - 欧洲:
europe-malachiteingestion-pa.googleapis.com - 亚洲:
asia-southeast1-malachiteingestion-pa.googleapis.com - 如需查看完整列表,请参阅区域级端点
- 美国:
保存配置文件
- 修改后,保存文件:
- Linux:依次按
Ctrl+O、Enter和Ctrl+X - Windows:依次点击文件 > 保存
- Linux:依次按
重启 Bindplane 代理以应用更改
如需在 Linux 中重启 Bindplane 代理,请运行以下命令:
sudo systemctl restart observiq-otel-collector验证服务是否正在运行:
sudo systemctl status observiq-otel-collector检查日志是否存在错误:
sudo journalctl -u observiq-otel-collector -f
如需在 Windows 中重启 Bindplane 代理,请选择以下选项之一:
以管理员身份运行命令提示符或 PowerShell:
net stop observiq-otel-collector && net start observiq-otel-collector服务控制台:
- 按
Win+R,输入services.msc,然后按 Enter 键。 - 找到 observIQ OpenTelemetry 收集器。
- 右键点击并选择重新启动。
验证服务是否正在运行:
sc query observiq-otel-collector检查日志是否存在错误:
type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
- 按
配置远程日志记录服务器池
- 登录 F5 BIG-IP 网页界面。
- 在主标签页上,依次前往 DNS > Delivery > Load Balancing > Pools 或 Local Traffic > Pools。
- 点击创建。
- 提供以下配置详细信息:
- 名称:为池输入一个唯一名称。
- 使用新成员设置:
- 在 Address 字段中输入 Bindplane 代理 IP 地址。
- 在服务端口字段中,输入 Bindplane 代理端口号。
- 依次点击添加 > 完成。
配置远程日志目的地
- 在主标签页上,依次前往系统 > 日志 > 配置 > 日志目的地。
- 点击创建。
- 提供以下配置详细信息:
- 名称:为此目的地输入一个唯一名称。
- 类型:选择远程高速日志。
- 池名称:选择您希望 BIG-IP 系统将日志消息发送到的远程日志服务器池。
- 协议:选择所使用的协议。
- 点击 Finished。
创建格式化的远程日志目标位置
- 在主标签页上,依次前往系统 > 日志 > 配置 > 日志目的地。
- 点击创建。
- 提供以下配置详细信息:
- 名称:为此目的地输入一个唯一名称。
- 类型:选择远程 Syslog。
- 格式:选择日志格式。
- 转发到:选择高速日志目的地 > 指向远程 Syslog 服务器池的目的地。
- 点击 Finished。
配置日志发布者
- 在主标签页上,依次前往系统 > 日志 > 配置 > 日志发布者。
- 点击创建。
- 提供以下配置详细信息:
- 名称:为此发布商输入一个唯一名称。
- 目标:从可用列表中选择新创建的 Remote Syslog 目标,然后点击移动将该目标移动到已选择列表中。
- 点击 Finished。
配置自定义 DNS 日志记录配置文件
- 在主标签页上,依次前往 DNS > 交付 > 配置文件 > 其他 > DNS 日志记录或本地流量 > 配置文件 > 其他 > DNS 日志记录。
- 点击创建。
- 提供以下配置详细信息:
- 名称:为此配置文件输入一个唯一名称。
- 日志发布者:选择新创建的目的地,系统会将 DNS 日志条目发送到该目的地。
- 记录查询:选中已启用复选框。
- 记录响应:选中已启用复选框。
- Include Query ID(包含查询 ID):选中已启用复选框。
- 点击 Finished。
将 DNS 配置文件添加到 DNS 监听器
- 在主标签页上,依次前往 DNS > Delivery > Listeners > 选择 DNS 监听器。
- 在服务部分的 DNS 配置文件中,选择您之前配置的 DNS 配置文件。
- 点击更新。
UDM 映射表
| 日志字段 | UDM 映射 | 逻辑 |
|---|---|---|
application |
principal.application |
直接从 application 字段映射。 |
cipher_name |
network.tls.cipher |
直接从 cipher_name 字段映射。 |
command_line |
principal.process.command_line |
直接从 command_line 字段映射。 |
desc |
security_result.description |
直接从 desc 字段映射。 |
desc_icrd |
security_result.description |
直接从 desc_icrd 字段映射。 |
dest_ip |
target.ip |
直接从 dest_ip 字段映射。 |
dest_port |
target.port |
直接从 dest_port 字段映射。 |
file_path |
principal.process.file.full_path |
直接从 file_path 字段映射。如果 level 为“alert”,则设置为 true;否则不设置。如果 level 为“alert”,则设置为 true,否则不设置。 |
msg3 |
security_result.description |
当 application 为“run-parts”时,直接从 msg3 字段映射。 |
metadata.event_type |
如果 event_type 为空,则设置为 GENERIC_EVENT;否则从 event_type 进行映射。硬编码为“DNS”。硬编码为“F5”。 |
|
principal_hostname |
principal.hostname |
直接从 principal_hostname 字段映射。 |
proc_id |
principal.process.pid |
直接从 proc_id 字段映射。 |
received_bytes |
network.received_bytes |
直接从 received_bytes 字段映射。 |
resource_id |
target.resource.id |
直接从 resource_id 字段映射。 |
resource_parent |
principal.resource.parent |
直接从 resource_parent 字段映射。 |
response_code |
network.http.response_code |
直接从 response_code 字段映射。根据 level 字段确定。 |
src_ip |
principal.ip |
直接从 src_ip 字段映射。 |
src_port |
principal.port |
直接从 src_port 字段映射。 |
tls_version |
network.tls.version |
直接从 tls_version 字段映射。 |
userName |
principal.user.userid |
直接从 userName 字段映射。 |
when |
event.timestamp |
根据 datetime1 和 timezone 或 datetime 和 timezone 计算得出。 |
query_response_code |
event.idm.read_only_udm.network.dns.response_code |
从变更日志映射 |
User |
event.idm.read_only_udm.principal.user.userid |
从变更日志映射 |
attemptCount |
event.idm.read_only_udm.security_result.detection_fields |
从变更日志映射 |
rule_id_val |
event.idm.read_only_udm.security_result.rule_id |
从变更日志映射 |
query_type |
event.idm.read_only_udm.question.type |
从变更日志映射 |
record_type |
event.idm.read_only_udm.question.type |
从变更日志映射 |
dns_class |
event.idm.read_only_udm.network.dns.question.class |
从变更日志映射 |
intermediary_host |
event.idm.read_only_udm.network.dns.answer.data |
从变更日志映射 |
intermediary_ip |
event.idm.read_only_udm.network.dns.answer.data |
从变更日志映射 |
ttl_data |
event.idm.read_only_udm.network.dns.answer.ttl |
从变更日志映射 |
dns_answer_domain |
event.idm.read_only_udm.network.dns.answer.name |
从变更日志映射 |
qclass |
event.idm.read_only_udm.network.dns.answer.class |
从变更日志映射 |
dns_name |
event.idm.read_only_udm.question.name |
从变更日志映射 |
src_ip |
event.idm.read_only_udm.principal.asset.ip |
从变更日志映射 |
dest_ip |
event.idm.read_only_udm.target.asset.ip |
从变更日志映射 |
user |
event.idm.read_only_udm.principal.user.userid |
从变更日志映射 |
host |
event.idm.read_only_udm.principal.ip 和 event.idm.read_only_udm.principal.asset.ip |
从变更日志映射 |
partition |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
level |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
attempts |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
tty |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
start |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |
end |
event.idm.read_only_udm.additional.fields |
从变更日志映射 |