您可以在 Datastream 中查看串流的概略和詳細資訊,監控複製狀態並驗證配置設定。 Google Cloud 控制台會顯示指派的連線設定檔、包含的來源物件、目的地設定、補充進度、事件處理量,以及各串流的資料更新間隔。
如要查看串流的概略和詳細資訊,請按照下列步驟操作:
前往 Google Cloud 控制台的「Streams」(串流) 頁面。
按一下要查看詳細資訊的串流。這項資訊會顯示在「Stream details」(串流詳細資料) 頁面。
查看概略資訊
串流的概略資訊包括:
- 串流的名稱和狀態。
- 串流使用的來源和目的地連線設定檔,用於將資料從來源資料庫移轉至目的地。
- 連線設定檔的設定檔類型。
查看詳細資訊
除了查看串流的概略資訊外,您也可以點選串流查看其他資訊,包括:
- 儲存串流的區域。與所有資源一樣,串流會儲存在區域中。串流只能使用位於相同區域的連線設定檔和私人連線設定。
- 串流的建立、上次更新或復原時間。
- 新增至串流的任何標籤。這些標籤用於整理訊息串。
- 您為串流選取的 CDC 方法 (視來源資料庫而定)。
- Datastream 處理串流時,應納入的來源資料庫資料表和結構定義。
- Datastream 處理串流時,應排除的來源資料庫資料表和結構定義。
- 除了 PostgreSQL 以外,所有來源都適用為串流設定的 CDC 方法。
- Oracle 來源:記錄檔存取方法。
- 是否為串流啟用歷來資料補充。
- 如果啟用,來源資料庫中有多少結構定義和資料表會從回填作業中排除。
BigQuery 目的地:
- 目的地資料集是動態資料集還是預設資料集。
- 串流的寫入模式是否設為「合併」或「僅附加」。
- 如果選取「合併模式」,過時程度限制設定會套用至 Datastream 建立的新 BigQuery 資料表。
此外,如果是 Apache Iceberg 資料表目的地:
- 用於串流的 BigQuery 連線 ID。
- 儲存資料的 Cloud Storage bucket 統一資源 ID (URI)。
Cloud Storage 目的地:
- 串流將來源資料庫的結構定義、資料表和資料移轉至的目的地位置。
- 寫入目的地的檔案格式。Datastream 支援兩種輸出格式:Avro 和 JSON。
資料是以 Google 代管的金鑰 (Google 代管) 或您代管的金鑰 (客戶自行管理) 加密。
客戶自行管理的加密金鑰連結和路徑 (如果您管理加密)。
建立串流警告政策的連結。
顯示進行中、待處理或失敗的回填作業數量。
過去 7 天內由 Datastream 處理並載入至目的地的事件數量。
Datastream 在過去 7 天內無法處理的事件數量。
- 資料更新間隔圖表。這張圖表顯示資料在來源中的時間,與資料透過串流轉移至目的地之間的時間差距。計算基準為 Datastream 上次檢查來源中是否包含新資料後經過的時間。
如要進一步瞭解這張圖表,請參閱「監控串流」。