收集 AlgoSec 安全管理日志

解析器版本：4.0

支持：

本文档介绍了如何使用 Bindplane 代理将 AlgoSec Security Management 日志注入到 Google Security Operations。

AlgoSec Security Management Suite (ASMS) 可跨防火墙、SDN 和云平台提供网络安全政策管理。它包括用于风险和合规性分析的防火墙分析器、用于变更管理自动化的 FireFlow，以及用于应用连接可见性的 AppViz。

准备工作

请确保满足以下前提条件：

  • Google SecOps 实例
  • Windows Server 2016 或更高版本，或者具有 systemd 的 Linux 主机
  • Bindplane 代理与 AlgoSec 设备之间的网络连接
  • 如果在代理后面运行，请确保按照 Bindplane 代理要求打开防火墙端口
  • 对 AlgoSec Firewall Analyzer、FireFlow 和 AppViz 的特权访问权限

获取 Bindplane 代理的 Google SecOps 凭证

如需向 Google SecOps 验证 Bindplane 代理，请选择以下方法之一：

  • 新部署：使用 Chronicle API（选项 1）。
  • 旧版部署：继续使用提取身份验证文件（方法 2），直到提取 API 于 2027 年 7 月 20 日停用。
  1. 登录 Google Cloud 控制台，然后选择与您的 Google SecOps 实例关联的 Google Cloud 项目。
  2. 前往 IAM 和管理 > 服务账号。
  3. 点击创建服务账号。
  4. 提供以下配置详细信息：
    • 服务账号名称：输入账号的名称（例如 bindplane-ingest）。
    • 服务账号说明：输入说明（例如 Bindplane agent log ingestion）。
  5. 点击创建并继续。
  6. 在向此服务账号授予对项目的访问权限部分，点击选择角色，然后选择 Chronicle Editor。
  7. 点击继续，然后点击完成。
  8. 点击您创建的服务账号，然后前往密钥标签页。
  9. 依次点击添加密钥> 创建新密钥。
  10. 选择 JSON，然后点击创建。密钥文件会下载到您的计算机上。
  11. 将密钥文件另存为 Bindplane 收集器目录（在 Linux 上为 /opt/observiq-otel-collector/ingestion-auth.json，在 Windows 上为 C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json）中的 ingestion-auth.json，或更新 config.yaml 中的 creds_file_path 以与您保存密钥文件的路径相匹配。
  12. 前往 IAM 和管理 > 设置，然后复制项目编号。您在配置导出器时需要用到该名称。

方法 2：下载数据注入身份验证文件（旧版）

  1. 登录 Google SecOps 控制台。
  2. 依次前往 SIEM 设置 > 收集代理。
  3. 下载数据注入身份验证文件。
  4. 将文件安全地保存在将要安装 Bindplane 代理的系统上。

获取 Google SecOps 客户 ID

  1. 登录 Google SecOps 控制台。
  2. 依次前往 SIEM 设置 > 配置文件。

  3. 从组织详细信息部分复制并保存客户 ID。

安装 Bindplane 代理

根据以下说明，在 Windows 或 Linux 操作系统上安装 Bindplane 代理。

Windows 安装

  1. 以管理员身份打开命令提示符或 PowerShell。

  2. 运行以下命令：

    msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet

  3. 等待安装完成。

  4. 运行以下命令，验证安装是否成功：

    sc query observiq-otel-collector

    该服务应显示为 RUNNING。

Linux 安装

  1. 打开具有 root 或 sudo 权限的终端。

  2. 运行以下命令：

    sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh

  3. 等待安装完成。

  4. 运行以下命令，验证安装是否成功：

    sudo systemctl status observiq-otel-collector

    该服务应显示为有效（正在运行）。

其他安装资源

如需了解其他安装选项和问题排查信息，请参阅 Bindplane 代理安装指南。

配置 Bindplane 代理以注入 syslog 并将其发送到 Google SecOps

找到配置文件

  • Linux：

    sudo nano /opt/observiq-otel-collector/config.yaml

  • Windows：

    notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"

修改配置文件

  • 将 config.yaml 的全部内容替换为以下配置：

    receivers:
  udplog:
    listen_address: "0.0.0.0:514"

exporters:
  chronicle/algosec:
    protocol: https
    # Region of your instance, for example us, europe, asia-southeast1
    location: <LOCATION>
    # Project number of the Google Cloud project linked to the instance
    project: '<PROJECT_NUMBER>'
    compression: gzip
    creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
    customer_id: '<customer_id>'
    endpoint: chronicle.googleapis.com
    log_type: ALGOSEC
    raw_log_field: body

service:
  pipelines:
    logs/algosec_to_chronicle:
      receivers:
        - udplog
      exporters:
        - chronicle/algosec

配置参数

替换以下占位符：

  • 接收器配置：

    • listen_address：要监听的 IP 地址和端口：
      • 0.0.0.0 在所有接口上监听（推荐）
      • 端口 514 是标准 syslog 端口（在 Linux 上需要 root 权限；对于非 root 用户，请使用 1514）

  • 导出器配置：

    • creds_file_path：服务账号 JSON 密钥文件的完整路径（选项 1）：
      • Linux：/opt/observiq-otel-collector/ingestion-auth.json
      • Windows：C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
    • customer_id：从 Google SecOps 控制台复制的客户 ID
    • location：将 <LOCATION> 替换为 Google SecOps 实例的区域（例如 us、europe 或 asia-southeast1）。导出器会使用此值作为 chronicle.googleapis.com 的前缀。如需查看完整列表，请参阅区域级端点。
    • project：将 <PROJECT_NUMBER> 替换为 IAM 和管理 > 设置中的项目编号。
    • endpoint：保持设置为 chronicle.googleapis.com。

旧版提取 API 导出工具

  • 如果您使用选项 2 中的提取身份验证文件，请将 exporters 代码块替换为以下内容。将 creds_file_path 设置为数据注入身份验证文件的路径，如果您的实例位于美国境外，请将 malachiteingestion-pa.googleapis.com 替换为您的区域端点（例如 europe-malachiteingestion-pa.googleapis.com）。

    exporters:
  chronicle/algosec:
    compression: gzip
    creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
    customer_id: '<customer_id>'
    endpoint: malachiteingestion-pa.googleapis.com
    log_type: ALGOSEC
    raw_log_field: body

保存配置文件

  • 修改后，保存文件：
    • Linux：依次按 Ctrl+O、Enter 和 Ctrl+X
    • Windows：依次点击文件 > 保存

重启 Bindplane 代理以应用更改

  • 如需在 Linux 中重启 Bindplane 代理，请运行以下命令：

    sudo systemctl restart observiq-otel-collector

    1. 验证服务是否正在运行：

      sudo systemctl status observiq-otel-collector

    2. 检查日志中的错误：

      sudo journalctl -u observiq-otel-collector -f

  • 如需在 Windows 中重启 Bindplane 代理，请选择以下选项之一：

    • 以管理员身份运行命令提示符或 PowerShell：

      net stop observiq-otel-collector && net start observiq-otel-collector

    • 服务控制台：

      1. 按 Win+R，输入 services.msc，然后按 Enter 键。
      2. 找到 observIQ OpenTelemetry 收集器。
      3. 右键点击，然后选择重新启动。

      4. 验证服务是否正在运行：

        sc query observiq-otel-collector

      5. 检查日志中的错误：

        type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"

为 Firewall Analyzer 配置 syslog

  1. 使用 SSH 登录 AFA 设备。

  2. 前往 syslog-ng 配置目录：

    cd /etc/syslog-ng

  3. 备份现有配置：

    cp syslog-ng.conf syslog-ng.conf.orig

  4. 修改 syslog-ng 配置文件：

    vi syslog-ng.conf

  5. 添加以下行以定义远程 syslog 服务器：

    destination d_remote { udp("<BINDPLANE_IP>" port(514)); };
log { source(s_sys); destination(d_remote); };
    • 将 <BINDPLANE_IP> 替换为 Bindplane 代理的 IP 地址。

  6. 保存并退出编辑器。

  7. 重启 syslog-ng 服务以应用更改：

    service syslog-ng restart

  8. 可选：验证 Syslog 配置：

    1. 依次前往管理 > Syslog 服务器设置。
    2. 点击测试连接。

为 FireFlow 配置 syslog

  1. 以 root 身份登录 FireFlow 机器。

  2. 打开 /etc/syslog.conf 文件进行修改：

    vi /etc/syslog.conf

  3. 将以下代码行添加到文件中：

    local0.*@<BINDPLANE_IP>
    • 将 <BINDPLANE_IP> 替换为 Bindplane 代理服务器的 IP 地址。

为 AppViz 配置 Syslog

  1. 通过 SSH 登录 AppViz 设备。

  2. 前往 syslog-ng 配置目录：

    cd /etc/syslog-ng

  3. 备份现有配置：

    cp syslog-ng.conf syslog-ng.conf.orig

  4. 修改 syslog-ng 配置文件：

    vi syslog-ng.conf

  5. 添加以下内容以定义远程 syslog 服务器：

    destination d_remote { udp("<BINDPLANE_IP>" port(514)); };
log { source(s_sys); destination(d_remote); };
    • 将 <BINDPLANE_IP> 替换为 Bindplane 代理的 IP 地址。

  6. 保存并退出编辑器。

  7. 重启 syslog-ng 服务以应用更改：

    service syslog-ng restart

  8. 验证 syslog 配置：

    1. 在 AppViz 界面中，依次前往 Administration（管理）> Syslog Server Settings（Syslog 服务器设置）。
    2. 点击测试连接。

为登录和退出事件配置 syslog

  1. 通过 SSH 登录 ASMS 设备。

  2. 前往 syslog-ng 配置目录：

    cd /etc/syslog-ng

  3. 备份现有配置：

    cp syslog-ng.conf syslog-ng.conf.orig

  4. 修改 syslog-ng 配置文件：

    vi syslog-ng.conf

  5. 添加以下内容以定义远程 syslog 服务器：

    destination d_remote { udp("<BINDPLANE_IP>" port(514)); };
log { source(s_sys); destination(d_remote); };
    • 将 <BINDPLANE_IP> 替换为 Bindplane 代理的 IP 地址。

  6. 保存并退出编辑器。

  7. 重启 syslog-ng 服务以应用更改：

    service syslog-ng restart

UDM 映射表

日志字段 UDM 映射 逻辑
by_user principal.user.user_display_name 原始日志中 by_user 字段的值会分配给此 UDM 字段。
collection_time metadata.event_timestamp seconds 和 nanos 字段会合并以创建时间戳。
comm target.process.command_line 使用 grok 从 desc 字段中提取的 comm 字段的值会分配给此 UDM 字段。
datetime metadata.event_timestamp 系统会从原始日志中提取日期和时间，并将其用于填充事件时间戳。
desc metadata.description 如果没有其他说明，则原始日志中 desc 字段的值会分配给此 UDM 字段。
dest_ip target.ip 原始日志中的 dest_ip 字段的值会分配给此 UDM 字段。
dest_port target.port 原始日志中的 dest_port 字段的值会分配给此 UDM 字段。
details security_result.summary 原始日志中的 details 字段的值会分配给此 UDM 字段。
device principal.asset.hostname 原始日志中的 device 字段的值会分配给此 UDM 字段。
dst_ip target.ip 原始日志中 dst_ip 字段的值会分配给此 UDM 字段。
dst_port target.port 原始日志中 dst_port 字段的值会分配给此 UDM 字段。
event_id metadata.product_event_type 原始日志中 event_id 字段的值会分配给此 UDM 字段。它还用于解析器逻辑中，以确定 metadata.event_type 和其他字段。
event_name metadata.product_event_type 原始日志中 event_name 字段的值会分配给此 UDM 字段。
firewall target.hostname 原始日志中 firewall 字段的值会分配给此 UDM 字段。
host principal.hostname 原始日志中的 host 字段的值会分配给此 UDM 字段。
host_type principal.asset.category 原始日志中 host_type 字段的值会分配给此 UDM 字段。
iporhost principal.ip/principal.hostname/target.ip/target.hostname/observer.ip/observer.hostname 如果该值是 IP 地址，则会根据日志来源和事件类型映射到 principal.ip,target.ip, 或 observer.ip。如果是主机名，则会映射到 principal.hostname,target.hostname, 或 observer.hostname。
IP principal.ip 原始日志中的 IP 字段的值会分配给此 UDM 字段。
kv_data security_result.summary 原始日志中的 kv_data 字段的值会分配给此 UDM 字段。
log_type metadata.log_type 硬编码为 ALGOSEC。
metric security_result.action_details 原始日志中 metric 字段的值会分配给此 UDM 字段。
msg security_result.summary/security_result.description 原始日志中 msg 字段的值用于填充安全结果的摘要或说明，具体取决于上下文。它还用于 extractrisk_level,risk_count,risk_code, 和 risk_title 字段。
pid target.process.pid 使用 grok 从 desc 字段中提取的 pid 字段的值会分配给此 UDM 字段。
product metadata.product_name 原始日志中的 product 字段的值会分配给此 UDM 字段。
report security_result.description 原始日志中 report 字段的值包含在安全结果的说明中。
report_data.Device IP target.ip 已解析的 JSON 数据中 Device IP 字段的值会分配给此 UDM 字段。
report_data.Highest Risk Level security_result.description 解析后的 JSON 数据中的 Highest Risk Level 字段值会包含在安全结果的说明中。它还用于确定安全结果的严重程度。
report_data.Security Rating Score security_result.description 解析后的 JSON 数据中 Security Rating Score 字段的值会包含在安全结果的说明中。
Requestor.Email principal.user.email_addresses 解析后的 JSON 数据中 Request 对象内的 Email 字段值会分配给此 UDM 字段。
Requestor.Name principal.user.user_display_name 解析后的 JSON 数据中 Requestor 对象内的 Name 字段值会分配给此 UDM 字段。
RequestType target.resource.attribute.labels 原始日志中 RequestType 字段的值会作为标签添加到目标资源。
risk_title security_result.summary 原始日志中的 risk_title 字段的值会分配给此 UDM 字段。
src_ip principal.ip 原始日志中的 src_ip 字段的值会分配给此 UDM 字段。
src_port principal.port 原始日志中的 src_port 字段的值会分配给此 UDM 字段。
status security_result.description/security_result.action_details 原始日志中 status 字段的值会包含在安全结果或操作详情的说明中，具体取决于上下文。它还用于确定安全结果的严重程度。
target_app target.application 原始日志中的 target_app 字段的值会分配给此 UDM 字段。
TemplateName metadata.description 原始日志中 TemplateName 字段的值会分配给此 UDM 字段。
url security_result.url_back_to_product 原始日志中的 url 字段的值会分配给此 UDM 字段。
user principal.user.userid 原始日志中 user 字段的值会分配给此 UDM 字段。
vendor metadata.vendor_name 原始日志中 vendor 字段的值会分配给此 UDM 字段。
version metadata.product_version 原始日志中 version 字段的值会分配给此 UDM 字段。
WorkFlow target.resource.attribute.labels 原始日志中 WorkFlow 字段的值会作为标签添加到目标资源。
(Parser Logic) extensions.auth.type 硬编码为 MACHINE。
(Parser Logic) security_result.action 根据 event_id 和其他字段确定。通常设置为 ALLOW or BLOCK。
(Parser Logic) security_result.category 对于防火墙分析器事件，硬编码为 POLICY_VIOLATION。
(Parser Logic) security_result.description 根据其他字段构建，提供有关事件的背景信息和详细信息。
(Parser Logic) security_result.severity 根据 event_id,msg, 和其他字段确定。通常设置为 LOW,MEDIUM, 或 。
(Parser Logic) metadata.event_type 根据 event_id 和其他字段确定。示例包括 USER_LOGIN,USER_LOGOUT,USER_RESOURCE_ACCESS,GENERIC_EVENT,STATUS_UNCATEGORIZED,SCAN_HOST,NETWORK_CONNECTION, 和 STATUS_UPDATE。

更新日志

查看此解析器的更新日志

需要更多帮助？获得社区成员和 Google SecOps 专业人士的解答。