In diesem Dokument wird beschrieben, wie Sie mit Cloud Monitoring den Dienststatus von Knowledge Catalog (früher Dataplex Universal Catalog) verfolgen, die Leistung optimieren und Einblick in Ihre Datenplattform erhalten können. Durch proaktives Monitoring können Sie die Zuverlässigkeit von Datenanwendungen sicherstellen und fundierte Entscheidungen zur Ressourcenzuweisung und Kostenverwaltung treffen.
Informationen zu den Kosten finden Sie unter Monitoring-Preise.
Weitere Informationen zur Aufbewahrung von Messwertdaten finden Sie unter Kontingente und Limits für Monitoring.
Anwendungsfälle
Sie können Knowledge Catalog-Messwerte in Cloud Monitoring für die folgenden Anwendungsfälle verwenden:
- Zuverlässigkeit von Datenpipelines sicherstellen: Überwachen Sie die Erfolgs- und Fehlerraten von Knowledge Catalog-Aufgaben wie Datenaufnahme oder Datenqualitätsjobs. Konfigurieren Sie Benachrichtigungen für Fehler oder ungewöhnliche Laufzeiten, um Ausfallzeiten für kritische Arbeitslasten zu minimieren.
- Leistung optimieren: Messwerte für die Dauer von Jobs und die Ressourcennutzung im Blick behalten, um Leistungsengpässe bei der Datenverarbeitung, Datenqualität und Datenermittlung zu erkennen und zu beheben.
- Kosten verwalten: Überwachen Sie den Ressourcenverbrauch des Knowledge Catalog, um Möglichkeiten zur Kostenoptimierung zu ermitteln, Budgetkontrollen durchzusetzen und eine effiziente Ressourcennutzung zu gewährleisten.
- Data Governance aufrechterhalten: Messwerte im Zusammenhang mit der Metadatenerkennung und der Kataloganreicherung im Blick behalten, um sicherzustellen, dass Datenassets gemäß Ihren Governance-Richtlinien gescannt und getaggt werden.
Funktionsweise
Knowledge Catalog ist in Cloud Monitoring eingebunden, das Messwerte, Ereignisse und Metadaten aus Knowledge Catalog-Diensten erfasst. Diese Messwerte geben Aufschluss über Bereiche wie den Jobausführungsstatus, die API-Nutzung und den Ressourcenstatus. Sie können diese Messwerte mit Tools in Cloud Monitoring analysieren, z. B. mit dem Metrics Explorer, benutzerdefinierten Dashboards und Benachrichtigungen. Mit diesen Tools können Sie das Verhalten Ihres Dienstes visualisieren, Leistungstrends erkennen und Benachrichtigungsrichtlinien erstellen, die Sie benachrichtigen, wenn die Leistung von den definierten Schwellenwerten abweicht oder Fehler auftreten.
Auf Dienstmesswerte in Monitoring zugreifen
Messwerte zu Knowledge Catalog-Dienstressourcen werden automatisch für Knowledge Catalog-Dienste aktiviert. Verwenden Sie Monitoring, um sich diese Messwerte anzusehen.
Sie können über die Google Cloud -Konsole oder die Monitoring API auf Monitoring zugreifen.
Wenn Sie die Monitoring-Diagramme nicht sehen oder keine Benachrichtigungen erstellen können, benötigen Sie möglicherweise zusätzliche Monitoring-Berechtigungen.
Console
Wechseln Sie in der Google Cloud Console zur Seite Metrics Explorer.
Wählen Sie im Menü Messwert auswählen eine
Cloud Dataplex-Ressource aus.Wählen Sie eine Messwertkategorie und dann einen Messwert aus der Liste aus.
Wenn Sie Informationen zu einem Messwert aufrufen möchten, bewegen Sie den Mauszeiger auf den Messwertnamen.
Klicken Sie auf Übernehmen.
Optional: Wählen Sie Filter aus, gruppieren Sie nach Messwertlabels, führen Sie Aggregationen aus und wählen Sie Optionen für die Diagrammanzeige aus.
REST
Mit der Monitoring-Methode timeSeries.list können Sie Messwerte erfassen und auflisten, die durch einen filter-Ausdruck definiert werden.
Wenn Sie eine API-Anfrage senden und die Antwort aufrufen möchten, verwenden Sie auf der API-Seite die Vorlage API testen.
Messwerte für den Knowledge Catalog-Dienst in Monitoring
Mit den Dienstmesswerten von Knowledge Catalog lässt sich der Dienststatus überwachen.
Benutzerdefiniertes Monitoring-Dashboard erstellen
Sie können ein benutzerdefiniertes Monitoring-Dashboard erstellen, das Diagramme ausgewählter Knowledge Catalog-Dienstmesswerte anzeigt. Weitere Informationen zum Erstellen eines Dashboards finden Sie unter Benutzerdefinierte Dashboards erstellen und verwalten. Wenn Sie einen Messwert für ein Widget in Ihrem Dashboard auswählen, wählen Sie eine Cloud Dataplex-Ressource und dann einen Knowledge Catalog-Messwert aus.
Monitoring-Benachrichtigungen verwenden
Sie können eine Monitoring-Benachrichtigung erstellen, um informiert zu werden, wenn ein Knowledge Catalog-Dienst oder Jobmesswert einen bestimmten Grenzwert überschreitet.
Benachrichtigung erstellen
Folgen Sie zum Erstellen einer Benachrichtigung der Anleitung unter Benachrichtigungsrichtlinien mit Messwertschwellen erstellen.
Wenn Sie eine zu überwachende Zeitreihe auswählen, wählen Sie eine Cloud Dataplex-Ressource und dann einen Knowledge Catalog-Messwert aus.
Benachrichtigungen ansehen
Wenn eine Benachrichtigung durch eine Messwertschwellenbedingung ausgelöst wird, erstellt Monitoring einen Vorfall sowie ein entsprechendes Ereignis.
So rufen Sie einen Vorfall auf:
Rufen Sie in der Google Cloud -Console- die Seite Benachrichtigungen auf.
Wenn in der Benachrichtigungsrichtlinie eine Benachrichtigungsmethode wie E-Mail oder SMS definiert wurde, wird von Monitoring außerdem eine Benachrichtigung zu dem Vorfall gesendet.
Weitere Informationen zu Benachrichtigungen finden Sie unter Vorfälle für messwertbasierte Benachrichtigungen.