Google SecOps 架構和資料流程

支援的服務:

現代資安環境會透過雲端原生基礎架構、微服務和分散式端點,產生大量遙測資料。傳統的安全資訊與事件管理 (SIEM) 架構往往難以因應這些資料量進行擴充,導致查詢速度緩慢,且能見度不完整。

Google Security Operations 平台提供整合式高效能安全性分析層,這項解決方案採用建構 Google 核心全球服務時使用的基礎架構,可擷取及查詢 PB 規模的安全遙測資料,延遲時間不到一秒,同時消除傳統熱資料和冷資料層之間的區別。

本文說明 Google SecOps 架構和資料流程,包括擷取、UDM 正規化、YARA-L 威脅偵測和自動應變。

整合情報、數據分析和應變機制

Google SecOps 整合了以往各自獨立的資安營運功能,這項服務將 SIEM 數據分析與資安調度管理、自動化與應變 (SOAR) 整合至緊耦合的平台。此外,這項服務也將 Google Threat Intelligence 和 VirusTotal 的威脅情報,以及 Gemini 支援的生成式 AI 功能,直接嵌入調查和偵測工作流程。

平台架構總覽

Google SecOps 是雲端原生的專用安全層,建構於核心 Google Cloud 基礎架構之上。這項服務繼承了基礎 Google 服務 (包括 Spanner 和 Colossus) 的擴充性、耐用性和效能屬性。

系統背景資料

Google SecOps 是安全環境的中央作業平台,可管理三個主要階段的資料:

  • 輸入:從混合環境擷取遙測資料,包括地端部署收集器 (例如 Bindplane 代理程式)、Chronicle API 擷取方法,以及直接第三方軟體式服務 (SaaS) 連接器。
  • 處理核心:將原始遙測資料正規化為結構化 UDM 結構定義、使用 YARA-L 偵測引擎評估事件,以及使用 SOAR 案件管理引擎自動化調度管理工作流程。
  • 輸出:向分析師提供可做為行動依據的安全情報和 AI 篩選洞察,同時透過 API 和遠端代理,將自動化圍堵指令傳回目標環境。

下圖說明系統背景資訊和資料流程。

高階平台架構和生態系統背景資訊

基礎架構優勢

Google SecOps 的主要架構優勢在於統一的熱儲存空間模型。傳統架構會將舊的遙測資料移至冷儲存空間,導致查詢速度變慢,或需要手動重新凍結。相較之下,Google SecOps 會將所有擷取的遙測資料,保留在可透過索引搜尋的熱狀態,最長可達 12 個月。這種設計可讓您查詢一整年的歷來資料,效能與查詢過去一小時的資料相同。

資料收集和正規化管道

Google SecOps 採用高處理量擷取管道,可將原始非結構化記錄轉換為結構化統一資料模型 (UDM)。在正規化期間,管道會使用實體內容圖中的情境中繼資料,充實每個事件。

集合架構

資料擷取主要透過三個管道進行:

  • 收集器:部署在區域網路中的代理程式型收集器 (例如 Bindplane 代理程式或 OpenTelemetry 代理程式),用於匯總 syslog 和封包資料。收集器會先在傳輸層 (TLS) 緩衝、壓縮及加密遙測資料,再轉送至 Google SecOps。
  • Ingestion API:直接使用 Chronicle API 擷取方法,從雲端服務、自訂應用程式和無伺服器管道,擷取結構化和非結構化遙測資料。
  • 第三方整合服務:內建的提取式連接器,可直接從外部 SaaS 平台和 Cloud API (例如 Microsoft 365 或 Microsoft Entra ID) 擷取記錄、警示和目錄資料。

資料收集和準備管道流程

下圖詳細說明從原始資料轉換為 UDM 格式的具體步驟。

資料收集和準備管道流程

統一資料模型結構定義總覽

統合資料模型 (UDM) 會將不同供應商的記錄正規化,轉換為單一結構化結構定義。這種標準表示法可確保等效實體 (例如 IP 位址、使用者名稱或檔案雜湊) 在所有記錄來源中,共用一致的欄位路徑,進而簡化數據分析和搜尋作業。

UDM 結構定義架構

UDM 採用強型別階層式結構定義,用來表示安全性事件和實體。並將資料整理成下列核心邏輯結構:

  • 中繼資料:記錄事件本身的背景資訊,包括事件時間戳記、擷取時間、供應商產品名稱和事件類型。
  • 主體:發起活動的實體 (例如來源使用者、主機、IP 位址或程序)。
  • 目標:直接受活動影響的實體 (例如目標檔案、目的地主機或使用者帳戶)。
  • 來源、中介和觀察者:參與交易的次要網路參與者 (例如轉送 Proxy、防火牆或轉送躍點)。
  • 網路:網路通訊協定屬性和交易構件 (包括應用程式通訊協定、DNS 查詢和 HTTP 要求詳細資料)。
  • 安全性結果:安全性裝置回報的動作或嚴重性結果 (例如 ALLOWED、BLOCKED 或 QUARANTINED)。
  • 擴充功能:不屬於標準核心架構的供應商專屬自訂欄位和鍵/值組合。如要進一步瞭解對應定義和剖析器開發,請參閱「設定自訂剖析器」和「重要 UDM 欄位」。

UDM 類別圖表

下圖提供 UDM 的結構藍圖。

UDM 類別圖表

搜尋架構

Google SecOps 提供強大的搜尋機制,可依據不同的調查工作流程調整。您可以查詢熱儲存空間中的正規化遙測資料、對未剖析的原始記錄執行模式比對,或搜尋結構化案件資料。如需最佳化指南,請參閱「UDM 搜尋最佳做法」。

下表摘要說明平台的主要搜尋功能:

搜尋類型 建築功能
UDM 搜尋 主要結構化搜尋引擎,可查詢 12 個月熱門期間內標準化、已建立索引的 UDM 事件。可對不同記錄來源進行多欄位篩選、匯總和關聯分析。
原始記錄檔搜尋 掃描擷取記錄的原始未剖析文字字串。這項功能支援規則運算式 (regex) 和子字串搜尋,可用於搜尋未對應至特定 UDM 語法的構件和自訂參數。
自然語言搜尋 使用 Gemini AI 將自然語言問題直接轉譯為正式的 UDM 搜尋語法,加快查詢編寫和調查工作流程。
案件搜尋 回應層中的專用搜尋引擎,可查詢 SOAR 資料庫中的調查案件、警示、應對手冊和已加上註解的實體中繼資料。

威脅偵測與應變迴圈

Google SecOps 架構會在偵測分析和自動應變之間,建立持續的意見回饋循環。偵測規則會產生高準確度的警示,觸發應變工作流程,而調查結果則會提供意見回饋,用於調整及微調日後的偵測邏輯。

偵測漏斗架構

偵測引擎採用多級式漏斗方法,將大量原始安全性遙測資料精煉為高保真度警示:

  1. 擷取及正規化:系統會持續擷取原始記錄,並將其格式化為標準 UDM 事件結構。
  2. 充實:系統會動態充實事件,加入別名對應、情境資產資料,以及來自 Google Threat Intelligence 等來源的全球威脅情報。
  3. 偵測評估:有狀態的 YARA-L 2.0 引擎會根據行為和威脅規則,在較長的時間範圍內評估擴充事件。如需規則最佳化指南,請參閱「YARA-L 最佳做法」。
  4. 排定優先順序和分組:系統會將相符的偵測項目匯總為警告、指派動態風險評分,並分組為統一案件。

這項漏斗策略結合情境資產資料與威脅情報,可篩除無害的異常狀況 (減少偽陽性),並找出真正的威脅 (減少偽陰性),協助資安團隊專注處理可採取行動的事件。

修復迴圈

自動修復和意見回饋循環

偵測與應變管道結合了有狀態規則評估、自動分類和遏止機制:

  1. 持續評估:透過有狀態的 YARA-L 2.0 偵測引擎,強化 UDM 遙測串流。
  2. 建立案件和 AI 分類:符合規則條件時,Google SecOps 會產生警示並建立案件。AI 輔助的分類與調查代理會執行動態搜尋和威脅情報查詢,評估發現項目。
  3. 自動執行應對手冊:如果 AI 分類確認為真陽性,平台會觸發自動應變應對手冊 (例如透過遠端代理隔離端點或停權使用者帳戶)。如果歸類為偽陽性,案件會自動結案。
  4. 持續調整:修復結果和分析師分類判定結果會回饋至系統,用於調整偵測門檻,減少日後偽陽性。
修復迴圈

威脅偵測層

YARA-L 2.0 引擎會使用多階段串流管道評估傳入的 UDM 遙測資料,偵測長時間範圍內的異常行為和多事件攻擊模式。您也可以使用 Gemini 生成及調整 YARA-L 規則。

每項 YARA-L 規則的處理生命週期,都會經過五個不同的評估階段:

  1. 擷取 (Ingest):經過擴充的 UDM 事件會即時進入偵測評估管道。
  2. 篩選 (Filter):系統會根據規則的事件條件 (events 區段) 評估傳入事件。不相符的事件會遭到捨棄,相符的事件則會傳送至有狀態評估。
  3. 比對時間範圍 (Window):比對事件會依指定關聯鍵,在定義的時間範圍內 (從幾秒到 12 個月) 分組。隨著事件累積,引擎會追蹤多個並行的有狀態計時器 (TimerStart 到 TimerEnd)。
  4. 條件評估 (Condition):比對時間範圍結束或觸發時,引擎會評估規則 condition 區段中定義的門檻需求和數學運算式 (例如事件計數、不重複門檻或跨資料彙整)。
  5. 觸發 (Trigger):如果條件評估為 True,引擎會產生偵測結果、觸發警示,並在應變層開啟或更新案件。如果設為 False,系統會清除狀態,不會觸發快訊。

規則執行狀態機器

下圖說明規則執行的生命週期。

規則執行狀態機器

應變架構和遠端執行

Google SecOps SOAR 是平台的應變支柱,Chronicle SOAR 運作時,會做為數據分析層上方的自動化調度管理引擎,擷取警示、分類案件,並執行自動化應變工作流程。

自動化調度管理、自動化和調查

應變層包含專門工具,可簡化資安營運中心 (SOC) 的調查、案件管理和應對手冊自動化工作流程:

  • 案件管理:將相關警示彙整成統一案件、排序及篩選事件佇列、指派工作,以及合作調查,並提供完整的稽核追蹤記錄。
  • 應對手冊設計工具:使用視覺化、無程式碼的拖放式畫布,搭配預先建構的整合動作,建構自動應變應對手冊。
  • 整合式開發環境 (IDE):使用內建的程式碼型 IDE 編寫自訂 Python 指令碼、修改現有的動作整合,以及對複雜的自動化工作流程進行偵錯。
  • 實體調查和安全圖譜:使用安全圖譜和實體探索工具,以視覺化方式呈現攻擊路徑和實體關係。您也可以在 SIEM 搜尋中調查實體,查看資產、IP 位址、檔案雜湊、網域和使用者背景資訊。
  • 資訊主頁和報表:使用現成的資訊主頁或自訂報表小工具,追蹤 SOC 作業指標、分析人員工作負載和平均應變時間 (MTTR)。

SOAR 元件架構

下圖說明傳入的警示如何流入案件管理引擎,並透過視覺化應對手冊和自訂 IDE 整合,觸發自動修復工作流程。

SOAR 元件架構

遠端代理架構

如要在私人網路 (例如地端部署資料中心或虛擬私有雲) 執行修復動作,Google SecOps 會仰賴安全、僅限外送的遠端代理程式架構。

在這個模式下,Google SecOps 平台絕不會對您的私人環境發起傳入連線:

  1. 啟動工作:如果 Playbook 動作需要在本機執行,Google SecOps 會透過 Google Cloud託管的安全發布者佇列發布指令。
  2. 非同步輪詢:部署在私人環境中的遠端代理,會透過傳出且經 TLS 加密的連線,持續輪詢發布者佇列。
  3. 本機執行:擷取工作指令後,遠端代理會在本機對內部安全性工具或網路端點執行必要動作 (例如停用帳戶或封鎖防火牆通訊埠)。
  4. 狀態回報:完成後,遠端代理會透過 TLS 將動作狀態和執行記錄傳回發布者佇列,並在 SOAR 案件檢視畫面中擷取及顯示。
遠端代理架構

安全性、法規遵循與共同責任

Google SecOps 是雲端原生平台,採用共同責任模式:Google 負責平台本身的安全,您則負責平台內的安全。

共同責任模式

Google SecOps 沿用 Google Cloud 基礎架構的核心安全設計、運算功能和儲存架構。在這個模式下:

  • Google 管理:實體資料中心安全、基礎雲端基礎架構、平台可用性,以及靜態資料和傳輸中資料的預設加密。
  • 您負責管理:資料治理、透過 Identity and Access Management (IAM) 設定的存取控管和資料 RBAC、自訂偵測規則,以及租戶法規遵循設定。

所有法規遵循規定、資料落地規則和存取權政策,都會從組織階層向下繼承並強制執行,一路經過資料夾和專案,直到受法規遵循控管的租戶。

法規遵循和企業就緒

為符合嚴格的法規和組織治理要求,Google SecOps 提供法規遵循控管租戶。這些租戶透過 Assured Workloads 強制執行嚴格的安全標準,同時支援法規遵循架構和技術資料保護套件。

支援的法規遵循架構:

  • FedRAMP:中等和高度影響等級 (FEDRAMP_MODERATE、FEDRAMP_HIGH)
  • DoD 影響等級:IL4 和 IL5 (IL4_AND_IL5)
  • 醫療照護和金融:HIPAA 和 PCI DSS (HIPAA、PCI_DSS)

如要部署受法規遵循控管的租戶,請將 Google SecOps 執行個體連結至 Google Cloud 專案,該專案必須位於已設定所需控管套件的 Assured Workloads 資料夾中。

Assured Workloads 設定

資料落地與資料存取透明化控管機制

Google SecOps 嚴格執行邏輯租戶隔離,並支援資料存取透明化控管機制,讓您能驗證管理員存取資料的控管和稽核情形。

支援的資料安全性和落地套件:

  • 客戶自行管理的加密金鑰 (CMEK):控管及管理用於加密靜態資料 (CMEK_V1) 的金鑰。
  • 進階資料落地:強制執行區域資料落地邊界和管理員存取權控管 (DRZ_ADVANCED)。
  • VPC Service Controls:使用 VPC Service Controls (VPC-SC) 為雲端安全性資源建立安全、自訂的 perimeter。

平台的安全架構採用四層繼承模式,管理安全控管機制建立在 Google 核心基礎架構的強化基礎上:

資料落地與資料存取透明化控管機制

四層安全防護堆疊:

  1. 客戶安全控管層:頂級管理控制項,包括透過 Identity and Access Management (IAM) 管理的角色式存取控管 (RBAC)、客戶自行管理的加密金鑰 (CMEK),以及區域資料落地政策。
  2. 平台安全層:邏輯租戶隔離、預設加密靜態和傳輸中資料 (TLS),以及資料存取透明化控管機制稽核記錄。
  3. Google 基礎架構層:核心運算和儲存基礎架構,包括 Borg 叢集管理工具、Colossus 分散式儲存空間,以及 Spanner 全球資料庫。
  4. 實體安全防護層:由 Google 企業資料中心、多重生物特徵辨識控制項和自訂 Titan 安全晶片 (roots of trust) 支援的基礎安全防護。

舉例來說,啟用資料存取透明化控管機制後,如果 Google 支援或工程專員為了處理支援單而存取您的租戶資料,就必須提交有效的密碼編譯存取理由。這項存取要求會安全地記錄下來,並近乎即時地顯示在稽核記錄中。

還有其他問題嗎?向社群成員和 Google SecOps 專業人員尋求解答。