收集 Cloudian HyperStore 日志

解析器版本： 2.0

支持：

Google SecOps SIEM

本文档介绍了如何使用 Bindplane 代理将 Cloudian HyperStore 日志注入 Google Security Operations。

解析器使用 grok 模式从 Cloudian HyperStore Syslog 消息中提取字段，包括时间戳、IP 地址、用户名和说明。它将提取的字段映射到统一数据模型 (UDM)，并根据识别的活动设置适当的事件类型。

准备工作

请确保满足以下前提条件：

• Google SecOps 实例
• Windows Server 2016 或更高版本，或者具有 systemd 的 Linux 主机
• Bindplane 代理与 Cloudian HyperStore 系统之间的网络连接
• 如果通过代理运行，请确保防火墙端口根据 Bindplane 代理要求处于开放状态
• 对 Cloudian HyperStore 的特权访问权限

获取 Bindplane 代理的 Google SecOps 凭据

如需向 Google SecOps 验证 Bindplane 代理的身份，请选择以下方法之一：

• 新部署：使用 Chronicle API（方法 1）。
• 旧版部署：继续使用注入身份验证文件（方法 2），直到注入 API 于 2027 年 7 月 20 日停用为止。

方法 1：为 Chronicle API 创建服务帐号（推荐）

1. 登录 Google Cloud 控制台，然后选择与您的 Google SecOps 实例关联的 Google Cloud 项目。
2. 依次前往 IAM 和管理 > 服务账号。
3. 点击创建服务账号 。
4. 提供以下配置详细信息：
   • 服务账号名称：输入账号的名称（例如 bindplane-ingest）。
   • 服务账号说明：输入说明（例如 Bindplane agent log ingestion）。
5. 点击创建并继续 。
6. 在向此服务帐号授予对项目的访问权限 部分，点击选择角色 ，然后选择 Chronicle Editor 。
7. 点击继续 ，然后点击完成 。
8. 点击您创建的服务帐号，然后前往密钥 标签页。
9. 依次点击添加密钥 > 创建新密钥。
10. 选择 JSON ，然后点击创建 。密钥文件会下载到您的计算机上。
11. 将密钥文件另存为 Bindplane 收集器目录中的 ingestion-auth.json（在 Linux 上为 /opt/observiq-otel-collector/ingestion-auth.json，在 Windows 上为 C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json），或者更新 creds_file_path 在 config.yaml 中以与您保存该文件的路径匹配。
12. 依次前往 IAM 和管理 > 设置 ，然后复制项目编号 。您需要此编号进行导出器配置。

注意： JSON 密钥是一种凭据。请限制对 Bindplane 主机上文件的访问权限，并根据贵组织的政策轮换密钥。

方法 2：下载注入身份验证文件（旧版）

1. 登录 Google SecOps 控制台。
2. 依次前往 SIEM 设置 > 收集代理。
3. 下载注入身份验证文件 。
4. 将该文件安全地保存在将安装 Bindplane 代理的系统上。

注意： 此文件用于向旧版注入 API (malachiteingestion-pa.googleapis.com) 验证代理的身份，Google 已计划于 2027 年 7 月 20 日服务终止该 API。请计划在该日期之前改用方法 1。

获取 Google SecOps 客户 ID

1. 登录 Google SecOps 控制台。
2. 依次前往 SIEM 设置 > 个人资料。

3. 从组织详细信息 部分复制并保存客户 ID 。

   **注意：** 配置 Bindplane 代理导出器需要客户 ID。

安装 Bindplane 代理

按照以下说明在 Windows 或 Linux 操作系统上安装 Bindplane 代理。

Windows 安装

1. 以管理员身份打开命令提示符 或 PowerShell 。

2. 运行以下命令：

   msiexec /i "https://github.com/observIQ/bindplane-agent/releases/latest/download/observiq-otel-collector.msi" /quiet
   

3. 等待安装完成。

4. 运行以下命令，验证安装是否成功：

   sc query observiq-otel-collector
   

   该服务应显示为正在运行 。

Linux 安装

1. 打开具有根权限或 sudo 权限的终端。

2. 运行以下命令：

   sudo sh -c "$(curl -fsSlL https://github.com/observiq/bindplane-agent/releases/latest/download/install_unix.sh)" install_unix.sh
   

3. 等待安装完成。

4. 运行以下命令，验证安装是否成功：

   sudo systemctl status observiq-otel-collector
   

   该服务应显示为活跃 (正在运行) 。

其他安装资源

如需了解其他安装选项和问题排查信息，请参阅 Bindplane 代理安装指南。

注意： Chronicle API 导出器配置需要 Bindplane 收集器 v1.106.0 或更高版本。之前的命令会安装最新版本。如果您要更新现有安装，请先升级收集器，然后再更改配置。

配置 Bindplane 代理以注入 Syslog 并发送到 Google SecOps

找到配置文件

• Linux：

  sudo nano /opt/observiq-otel-collector/config.yaml
  

• Windows：

  notepad "C:\Program Files\observIQ OpenTelemetry Collector\config.yaml"
  

修改配置文件

• 将 config.yaml 的全部内容替换为以下配置：

  receivers:
    udplog:
      listen_address: "0.0.0.0:514"
  
  exporters:
    chronicle/cloudian_hyperstore:
      protocol: https
      # Region of your instance, for example us, europe, asia-southeast1
      location: <LOCATION>
      # Project number of the Google Cloud project linked to the instance
      project: '<PROJECT_NUMBER>'
      compression: gzip
      creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
      customer_id: '<customer_id>'
      endpoint: chronicle.googleapis.com
      log_type: CLOUDIAN_HYPERSTORE
      raw_log_field: body
  
  service:
    pipelines:
      logs/cloudian_hyperstore_to_chronicle:
        receivers:
          - udplog
        exporters:
          - chronicle/cloudian_hyperstore
  

配置参数

替换以下占位符：

• 接收器配置：

  • listen_address：要监听的 IP 地址和端口：
    • 0.0.0.0 以监听所有接口（推荐）
    • 端口 514 是标准 Syslog 端口（在 Linux 上需要根权限；对于非根用户，请使用 1514）

• 导出器配置：

  • creds_file_path：服务帐号 JSON 密钥文件的完整路径（方法 1）：
    • Linux: /opt/observiq-otel-collector/ingestion-auth.json
    • Windows: C:\Program Files\observIQ OpenTelemetry Collector\ingestion-auth.json
  • customer_id：从 Google SecOps 控制台复制的客户 ID
  • location：将 <LOCATION> 替换为 Google SecOps 实例的区域（例如 us、europe 或 asia-southeast1）。导出器会使用此值为 chronicle.googleapis.com 添加前缀。如需查看完整列表，请参阅区域级端点。
  • project：将 <PROJECT_NUMBER> 替换为 IAM 和管理 > 设置 中的项目编号。
  • endpoint：保持设置为 chronicle.googleapis.com。

旧版注入 API 导出器

• 如果您使用方法 2 中的注入身份验证文件，请将 exporters 块替换为以下内容。将 creds_file_path 设置为注入身份验证文件的路径，并且如果您的实例位于美国境外，请将 malachiteingestion-pa.googleapis.com 替换为您的 区域级端点（例如 europe-malachiteingestion-pa.googleapis.com）。

  exporters:
    chronicle/cloudian_hyperstore:
      compression: gzip
      creds_file_path: '/opt/observiq-otel-collector/ingestion-auth.json'
      customer_id: '<customer_id>'
      endpoint: malachiteingestion-pa.googleapis.com
      log_type: CLOUDIAN_HYPERSTORE
      raw_log_field: body
  

注意： 此导出器将在注入 API 于 2027 年 7 月 20 日停用后停止工作。

保存配置文件

• 修改后，保存文件：
  • Linux：按 Ctrl+O，然后按 Enter，再按 Ctrl+X
  • Windows：依次点击文件 > 保存

重启 Bindplane 代理以应用更改

• 如需在 Linux 中重启 Bindplane 代理，请运行以下命令：

  sudo systemctl restart observiq-otel-collector
  

  1. 验证服务是否正在运行：

     sudo systemctl status observiq-otel-collector
     

  2. 检查日志中是否存在错误：

     sudo journalctl -u observiq-otel-collector -f
     

• 如需在 Windows 中重启 Bindplane 代理，请选择以下选项之一：

  • 以管理员身份运行命令提示符或 PowerShell：

    net stop observiq-otel-collector && net start observiq-otel-collector
    

  • 服务控制台：

    1. 按 Win+R，输入 services.msc，然后按 Enter 键。
    2. 找到 observIQ OpenTelemetry Collector 。
    3. 右键点击并选择重启 。

    4. 验证服务是否正在运行：

       sc query observiq-otel-collector
       

    5. 检查日志中是否存在错误：

       type "C:\Program Files\observIQ OpenTelemetry Collector\log\collector.log"
       

配置 Cloudian HyperStore Syslog

1. 使用 CLI 登录 HyperStore Config Controller 节点。

2. 运行以下 hsctl 命令：

   hsctl config set logging.syslog.remote.enabled=true
   hsctl config set logging.syslog.remote.host=<BINDPLANE_IP>
   hsctl config set logging.syslog.remote.protocol=<UDP_OR_TCP>
   hsctl config set logging.syslog.remote.port=<BINDPLANE_PORT>
   hsctl config apply ALL
   hsctl service restart s3 iam hyperstore firewall --nodes=ALL
   hsctl config set monitoring.agent.logging.level=INFO
   hsctl config apply monitoring
   

   • 将 <BINDPLANE_IP> 替换为 Bindplane 代理 IP 地址。
   • 将 <UDP_OR_TCP> 替换为在 Bindplane 代理中配置的协议。
   • 将 <BINDPLANE_PORT> 替换为 Bindplane 代理端口号。

UDM 映射表

日志字段	UDM 映射	逻辑
description	metadata.description	直接映射
datetime	metadata.event_timestamp	解析为 RFC 3339
method	network.http.method	已重命名/映射
url	network.http.referral_url	直接映射
status_code	network.http.response_code	已重命名/映射
session_id	network.session_id	直接映射
application	principal.application	直接映射
hostname	principal.hostname	直接映射
source_ip	principal.ip	已合并
request_id	principal.process.pid	直接映射
target_ip	target.ip	已合并
port	target.port	已重命名/映射
file_path	target.process.file.full_path	直接映射
user	target.user.user_display_name	直接映射
不适用	extensions.auth.type	常量：AUTHTYPE_UNSPECIFIED
不适用	metadata.event_type	常量：NETWORK_CONNECTION
不适用	metadata.product_name	常量：Cloudian Hyperstore
不适用	metadata.vendor_name	常量：Cloudian

需要更多帮助？获得社区成员和 Google SecOps 专业人士的解答。