使用 Sensitive Data Protection 掃描 BigQuery 資料
Sensitive Data Protection 可讓您檢查 BigQuery 資料表,在資料集成長和變更時,識別、管理及保護機密資料。定期掃描有助於符合法規遵循要求,並降低信用卡號碼、醫療資訊、身分證字號、駕照號碼、地址、全名和公司專屬機密等詳細資料外洩的風險。
本文說明如何從 Google Cloud 控制台的「BigQuery」BigQuery頁面執行隨選檢查。如要進一步瞭解 Sensitive Data Protection,請參閱 Sensitive Data Protection 說明文件。
掃描 BigQuery 資料的方法
Sensitive Data Protection 是一項全代管服務,可讓您大規模識別及保護機密資料。Sensitive Data Protection 使用超過 150 個預先定義的偵測工具,來識別模式、格式和總和檢查碼。Sensitive Data Protection 也提供一組工具,可對資料進行去識別化處理,包括遮蓋、代碼化、假名化和日期移位,且不會複製客戶資料。
掃描 BigQuery 資料的方式有兩種:
機密資料剖析。Sensitive Data Protection 可針對組織、資料夾或專案中的 BigQuery 資料產生設定檔。資料剖析檔包含資料表的指標和中繼資料,可協助您判斷機密和高風險資料的存放位置。Sensitive Data Protection 會在專案、資料表和資料欄層級回報這些指標。詳情請參閱「BigQuery 資料剖析」。
隨選檢查:Sensitive Data Protection 可對單一資料表或部分資料欄執行深度檢查,並回報儲存格層級的發現項目。這類檢查可協助您找出特定資料類型的個別例項,例如表格儲存格中信用卡號碼的精確位置。您可以透過Google Cloud 控制台中的 Sensitive Data Protection 頁面、 Google Cloud 控制台中的「BigQuery」BigQuery頁面,或透過 DLP API 以程式輔助方式,執行隨選檢查。
事前準備
- 請先熟悉 Sensitive Data Protection 定價和控管 Sensitive Data Protection 費用的方法。
確認建立 Sensitive Data Protection 工作的 使用者具備適當的預先定義 Sensitive Data Protection Identity and Access Management (IAM) 角色, 或有足夠的權限 可執行 Sensitive Data Protection 工作。
使用 Google Cloud 控制台掃描 BigQuery 資料
如要掃描 BigQuery 資料,請建立 Sensitive Data Protection 工作來分析資料表。您可以在 BigQuery Google Cloud 控制台,使用「Scan with Sensitive Data Protection」(使用 Sensitive Data Protection 掃描) 選項,快速掃描 BigQuery 資料表。
如要使用 Sensitive Data Protection 掃描 BigQuery 資料表,請按照下列步驟操作:
前往 Google Cloud 控制台的「BigQuery」頁面。
點選左側窗格中的 「Explorer」。

如果沒有看到左側窗格,請按一下 「Expand left pane」(展開左側窗格),開啟窗格。
在「Explorer」窗格中展開專案,依序點選「Datasets」(資料集) 和資料集。
依序點選「總覽」>「資料表」,然後選取資料表。
在詳細資料窗格中,依序點選 「More」(更多) >「Scan with Sensitive Data Protection」(使用 Sensitive Data Protection 掃描)。 Sensitive Data Protection 工作建立頁面會在新分頁中開啟。
在「步驟 1:選擇輸入資料」部分,輸入工作 ID。系統會自動產生「Location」(位置) 區段中的值。此外,「Sampling」(取樣) 區段會自動設定為對資料執行取樣掃描,但您可以視需要調整設定。
按一下「繼續」。
選用步驟:在「Step 2: Configure detection」(步驟 2:設定偵測作業),您可以設定要尋找的資料類型,稱為
infoTypes。執行下列其中一個步驟:
- 如要從預先定義的
infoTypes清單中選取,請按一下「Manage infoTypes」(管理 infoType)。接著,選取要搜尋的 infoType。 - 如要使用現有的檢查範本,請在「Template name」(範本名稱) 欄位中輸入範本的完整資源名稱。
如要進一步瞭解
infoTypes,請參閱 Sensitive Data Protection 說明文件中的「infoType 和 infoType 偵測工具」。- 如要從預先定義的
按一下「繼續」。
選用:在「Step 3: Add actions」(步驟 3:新增動作) 部分,開啟「Save to BigQuery」(儲存至 BigQuery),將 Sensitive Data Protection 發現項目發布至 BigQuery 資料表。如未儲存發現項目,已完成的工作只會包含與發現項目數量和
infoTypes相關的統計資料。將發現項目儲存至 BigQuery,即可儲存精確位置的詳細資料,以及各個發現項目的可信度。選用:如果您已開啟「Save to BigQuery」(儲存至 BigQuery),請在「Save to BigQuery」(儲存至 BigQuery) 區段中輸入下列資訊:
- 專案 ID:儲存結果的專案 ID。
- 資料集 ID:儲存結果的資料集名稱。
- 選用:資料表 ID:儲存結果的資料表名稱。如果未指定資料表 ID,系統會為新資料表指派類似此例的預設名稱:
dlp_googleapis_date_1234567890。如果您指定現有的資料表,發現項目就會附加至該資料表。
如要納入偵測到的實際內容,請開啟「包含引言」。
按一下「繼續」。
選用:在「Step 4: Schedule」(步驟 4:時間表) 部分,選取「Specify time span」(指定時間範圍) 或「Create a trigger to run the job on a periodic schedule」(建立觸發條件來定期執行工作),設定時間範圍或時間表。
按一下「繼續」。
選用:在「Review」(檢查) 頁面中,檢查工作詳細資料。視需要調整先前的設定。
點選「建立」。
Sensitive Data Protection 工作完成後,系統會將您重新導向至工作詳細資料頁面,並透過電子郵件通知您。您可以在工作詳細資料頁面查看掃描結果,也可以點選工作完成電子郵件中的連結,前往 Sensitive Data Protection 工作詳細資料頁面。
如果您選擇將 Sensitive Data Protection 發現項目發布至 BigQuery,請在「Job details」(工作詳細資料) 頁面中,按一下「View Findings in BigQuery」(在 BigQuery 中查看發現項目),在 Google Cloud 控制台中開啟資料表。接下來,您可以查詢資料表和分析發現項目。如要進一步瞭解如何在 BigQuery 中查詢結果,請參閱 Sensitive Data Protection 說明文件中的「查詢 Sensitive Data Protection 在 BigQuery 的發現結果」。
後續步驟
進一步瞭解如何使用 Sensitive Data Protection 檢查 BigQuery 和其他儲存空間存放區中的機密資料。
進一步瞭解如何剖析組織、資料夾或專案中的資料。
閱讀「身分與安全性」網誌文章:掌握資料控管權:使用 Sensitive Data Protection 去識別化及模糊處理機密資訊。
如要遮蓋或以其他方式去識別化 Sensitive Data Protection 掃描發現的機密資料,請參閱下列內容:
- 檢查文字,將機密資訊去識別化
- Sensitive Data Protection 說明文件中的「將機密資料去識別化」
- GoogleSQL 中的 AEAD 加密概念:瞭解如何加密資料表中的個別值
- 使用 Cloud KMS 金鑰保護資料:瞭解如何在 Cloud KMS 建立及管理自己的加密金鑰,以便加密 BigQuery 資料表