Afficher un flux

Vous pouvez afficher des informations générales et détaillées sur vos flux dans Datastream pour surveiller l'état de la réplication et vérifier les paramètres de configuration. La console Google Cloud affiche les profils de connexion attribués, les objets sources inclus, les paramètres de destination, la progression du remplissage, le débit d'événements et la fraîcheur des données pour chaque flux.

Pour afficher des informations générales et détaillées sur un flux, procédez comme suit :

  1. Accédez à la page Flux dans la console Google Cloud .

    Accéder à la page "Flux"

  2. Cliquez sur le flux pour lequel vous souhaitez afficher des informations détaillées. Ces informations s'affichent sur la page Détails du flux.

Afficher les informations générales

Les informations générales sur un flux incluent les éléments suivants :

  • Nom et état du flux.
  • Profils de connexion source et de destination que le flux utilise pour transférer des données d'une base de données source vers une destination.
  • Types de profils de connexion.

Afficher les informations détaillées

En plus d'afficher des informations générales sur un flux, vous pouvez cliquer sur un flux pour afficher des informations supplémentaires, telles que :

  • Région dans laquelle le flux est stocké. Comme toutes les ressources, les flux sont enregistrés dans une région. Les flux ne peuvent utiliser que des profils de connexion et des configurations de connectivité privée situés dans la même région.
  • Date de création, de dernière mise à jour ou de récupération du flux.
  • Tous les libellés ajoutés au flux. Ces libellés permettent d'organiser le flux.
  • Selon la base de données source, la méthode CDC que vous avez sélectionnée pour le flux.
  • Tables et schémas de la base de données source que Datastream doit inclure lors du traitement du flux.
  • Tables et schémas de la base de données source que Datastream doit exclure lors du traitement du flux.
  • Pour toutes les sources autres que PostgreSQL, méthode CDC définie pour le flux.
  • Pour les sources Oracle : méthode d'accès au fichier journal.
  • Si le remplissage historique est activé ou désactivé pour le flux.
    • Si cette option est activée, combien de schémas et de tables de la base de données source sont exclus du remplissage.

  • Pour les destinations BigQuery :

    • Indique si l'ensemble de données de destination est un ensemble de données dynamique ou par défaut.
    • Si le mode d'écriture du flux est défini sur Fusionner ou Ajout uniquement.
    • Si vous avez sélectionné le mode Fusion, la configuration de la limite d'obsolescence est appliquée aux nouvelles tables BigQuery créées par Datastream.

    De plus, pour les destinations de tables Apache Iceberg :

    • Identifiant de la connexion BigQuery que vous utilisez pour votre flux.
    • L'URI (Uniform Resource Identifier) du bucket Cloud Storage dans lequel vous stockez vos données.

  • Pour les destinations Cloud Storage :

    • Emplacement de la destination vers laquelle le flux transfère les schémas, les tables et les données d'une base de données source.
    • Format des fichiers écrits dans la destination. Datastream accepte deux formats de sortie : Avro et JSON.

  • Indique si vos données sont chiffrées avec une clé gérée par Google (gérée par Google) ou par vous (gérée par le client).

  • Un lien et le chemin d'accès à la clé de chiffrement gérée par le client (si vous gérez le chiffrement).

  • Un lien permettant de créer une règle d'alerte pour le flux.

  • Nombre de remplissages en cours, en attente ou ayant échoué.

  • Nombre d'événements traités et chargés vers la destination par Datastream au cours des sept derniers jours.

  • Nombre d'événements n'ayant pas pu être traités par Datastream au cours des sept derniers jours.

    • Graphique de fraîcheur des données. Ce graphique affiche l'écart de temps entre les données résidant dans la source et les données transférées vers la destination par le flux. Il est calculé en fonction du temps écoulé depuis la dernière vérification par Datastream de la présence de nouvelles données dans la source.

    Pour en savoir plus sur ce graphique, consultez Surveiller un flux.

Étapes suivantes