ストリームを表示する

Datastream でストリームの概要と詳細情報を表示して、レプリケーション ステータスをモニタリングし、構成設定を確認できます。 Google Cloud コンソールには、割り当てられた接続プロファイル、含まれるソース オブジェクト、宛先の設定、バックフィルの進行状況、イベント スループット、各ストリームのデータの更新速度が表示されます。

ストリームの概要と詳細情報を表示する手順は次のとおりです。

  1. Google Cloud コンソールの [ストリーム] ページに移動します。

    [ストリーム] ページに移動

  2. 詳細情報を表示するストリームをクリックします。この情報は、[ストリームの詳細] ページに表示されます。

概要情報の表示

ストリームの概要情報には、次のものが含まれます。

  • ストリームの名前とステータス。
  • ストリームが移行元データベースから移行先にデータを転送するために使用する移行元と移行先の接続プロファイル。
  • 接続プロファイルのプロファイル タイプ。

詳細情報の表示

ストリームの概要情報を表示するだけでなく、ストリームをクリックすると次のような追加情報を表示することもできます。

  • ストリームが保存されているリージョン。ストリームは、他のすべてのリソースと同様にリージョンに保存されます。ストリームで使用できるのは、同じリージョンにある接続プロファイルとプライベート接続構成のみです。
  • ストリームの作成、最終更新、復元の日時。
  • ストリームに追加されたラベル。これらのラベルは、ストリームを整理するために使用されます。
  • ソース データベースに応じて、ストリームに選択した CDC メソッド。
  • Datastream がストリームを処理するときに含めるソース データベース内のテーブルとスキーマ。
  • ストリームの処理時に Datastream が除外する必要があるソース データベース内のテーブルとスキーマ。
  • PostgreSQL 以外のすべてのソースの場合、ストリームに設定された CDC メソッド。
  • Oracle ソースの場合: ログファイルへのアクセス方法。
  • ストリームの履歴バックフィルが有効か無効か。
    • 有効になっていれば、ソース データベース内でバックフィルから除外されているスキーマとテーブルの数。
  • 宛先が BigQuery の場合:

    • 宛先データセットが動的データセットかデフォルト データセットか。
    • ストリームの書き込みモードが [マージ] または [追加のみ] に設定されているかどうか。
    • [マージモード] を選択した場合、Datastream によって作成された新しい BigQuery テーブルに適用される未更新に関する制限事項の構成。

    また、Apache Iceberg テーブルの宛先の場合は次のようになります。

    • ストリームに使用する BigQuery 接続の ID。
    • データを保存する Cloud Storage バケットの Uniform Resource Identifier(URI)。
  • 宛先が Cloud Storage の場合:

    • ストリームがソースデータベースからスキーマ、テーブル、データを転送する送信先の場所。
    • 宛先に書き込まれるファイルの形式。Datastream は、Avro と JSON の 2 つの出力形式をサポートしています。
  • お客様のデータが、Google により管理される鍵(Google マネージド)と、お客様により管理される鍵(お客様マネージド)のどちらで暗号化されているか

  • 顧客管理の暗号鍵へのリンクとパス(お客様が暗号化を管理する場合)

  • ストリームのアラート ポリシーを作成するためのリンク。

  • バックフィルの進行中、保留中、失敗の数。

  • 過去 7 日間に Datastream によって処理され、宛先に読み込まれたイベントの数。

  • 過去 7 日間に Datastream で処理できなかったイベントの数。

    • データの鮮度グラフ。このグラフは、ソースに存在するデータと、ストリームによって転送先に転送されるデータとの間の時間差を示しています。これは、Datastream がソースの新しいデータを最後に確認してから経過した時間として計算されます。

    このグラフの詳細については、ストリームをモニタリングするをご覧ください。

次のステップ