Verfügbarkeit von Ressourcen für Jobs verbessern

In diesem Dokument wird die Verfügbarkeit von Ressourcen erläutert und es werden Empfehlungen zur Verbesserung der Verfügbarkeit beim Erstellen und Ausführen von Batch-Jobs gegeben.

Was ist Erreichbarkeit?

Verfügbarkeit ist die Wahrscheinlichkeit, dass Ressourcen zum Ausführen Ihrer Arbeitslast verfügbar sind. Wenn keine Ressourcen verfügbar sind, schlägt Ihre Arbeitslast aufgrund von Ressourcenverfügbarkeitsfehlern fehl. Die Erreichbarkeit ist mit der Zuverlässigkeit verwandt, aber nicht identisch. Die Zuverlässigkeit ist die Wahrscheinlichkeit, dass Ihre Arbeitslast für ihre Nutzer verfügbar ist. (Verfügbarkeit kann sich auf einen oder beide Aspekte beziehen.)

Die Beziehung zwischen Verfügbarkeit und Zuverlässigkeit ist komplex. Ihre Arbeitslast muss Ressourcen erhalten, um zuverlässig zu sein. Aber während jede Flexibilität in Bezug auf Standort, Zeit und Hardware die Verfügbarkeit erhöht, steigt die Zuverlässigkeit nur mit Flexibilität, die den Anforderungen Ihrer Arbeitslast entspricht. Beachten Sie beispielsweise die folgenden komplexen Sachverhalte:

  • Maschinentypen mit höherer Leistung sind aufgrund der höheren Nachfrage möglicherweise weniger verfügbar, aber die Zuverlässigkeit nimmt ab, wenn Ihre Arbeitslast nicht genügend Leistung hat.
  • Die Standortflexibilität erhöht die Verfügbarkeit, aber dicht zugewiesene Maschinen verbessern die Netzwerkleistung.
  • Zeitliche Flexibilität erhöht die Verfügbarkeit, aber übermäßiges Warten kann zu unnötigen Verzögerungen führen.

Daher ist eine höhere Verfügbarkeit nicht immer besser. Das optimale Niveau der Erreichbarkeit variiert je nach Ihren Prioritäten und Anforderungen. Beispielsweise möchten Sie möglicherweise eine geringere Verfügbarkeit, um die Kosten zu senken. Auch wenn Sie die Zuverlässigkeit priorisieren möchten, müssen Sie möglicherweise die Vorteile einer höheren Verfügbarkeit mit den Risiken einer geringeren Leistung oder längeren Verzögerungen abwägen.

Empfehlungen zur Verbesserung der Auffindbarkeit von Jobs

In den folgenden Abschnitten erfahren Sie, wie Sie die Verfügbarkeit für Batchjobs verbessern können:

Empfehlungen für alle Nutzungsoptionen

  • Minimieren Sie Ihren Bedarf an großen und leistungsstarken Maschinentypen, indem Sie Ihre Arbeitslast aufteilen. Trennen Sie beispielsweise zuerst rechenintensive Vorgänge von Vorgängen mit geringem Bedarf, indem Sie abhängige Jobs verwenden. Reduzieren Sie dann die Mindestrechenressourcen, die jeder Job benötigt, so weit wie möglich, indem Sie die parallele Verarbeitung maximieren und eng gekoppelte Aufgaben minimieren.

    Weitere Informationen zu abhängigen Jobs sowie zu Rechenressourcen und Parallelität.

  • Maximieren Sie die Anzahl der Standorte, die für die Compute Engine-Ressourcen Ihres Jobs zulässig sind. Dies ist standardmäßig der Fall. Wenn Sie das Feld allowedLocations[] für einen Job nicht angeben, dürfen die Compute Engine-Ressourcen des Jobs in jeder Zone am Standort des Jobs ausgeführt werden.

    Weitere Informationen zu Standorten

  • Ziehen Sie Fail-Fast-Strategien in Betracht, bevor Sie auf eine bessere Verfügbarkeit warten. Um Verzögerungen zu vermeiden, sollten Sie Fail-Fast-Strategien wie die folgenden in Betracht ziehen:

    • Sie können Fehler bei der Ressourcenverfügbarkeit beheben, indem Sie Ihre Anfrage zu einem anderen Zeitpunkt stellen. Häufig ist es jedoch schneller, zuerst andere Standorte oder Hardware auszuprobieren.
    • Wenn Sie mehrere Nutzungsoptionen verwenden möchten, ist es oft schneller, zuerst die Nutzungsoptionen ohne Verzögerungen auszuprobieren: On-Demand-Reservierungen, On-Demand- und Spot-VMs.
    • Bei neuen Arbeitslasten, die Sie wiederholen möchten, können Sie die ersten Tests und die Fehlerbehebung beschleunigen, indem Sie vorübergehend Optionen verwenden, die schneller verfügbar sind.

Empfehlungen basierend auf der Nutzungsoption

Die von Ihnen ausgewählte Nutzungsoption ist ein wichtiger Faktor für die Verfügbarkeit eines Jobs. In diesem Abschnitt werden die einzelnen Verbrauchsoptionen kurz zusammengefasst und es wird empfohlen, wie Sie die Verfügbarkeit für die einzelnen Verbrauchsoptionen optimieren können.

Die folgenden Verbrauchsoptionen sind von der höchsten bis zur niedrigsten Verfügbarkeit aufgeführt:

  • Verwenden Sie für Arbeitslasten mit hohen Anforderungen an die Verfügbarkeit Reservierungen. Reservierungen bieten ein höheres Maß an Sicherheit beim Beschaffen von Kapazitäten als alle anderen Verbrauchsoptionen. Wenn Sie reservierte Kapazität verwenden möchten, müssen Sie zuerst vorhandene Reservierungen erstellen oder identifizieren, die Sie verwenden können. Anschließend konfigurieren Sie Instanzen so, dass sie diese reservierte Kapazität nutzen. Im Gegensatz zu anderen Verbrauchsoptionen fallen bei reservierten Instanzen aufgrund der Kapazitätssicherung auch dann Kosten an, wenn sie nicht verwendet werden, bis Sie sie löschen. Wählen Sie bei der Berücksichtigung der Verfügbarkeit zwischen den folgenden Reservierungstypen:

    • Wenn Sie reservierte Kapazität benötigen, nutzen Sie eine spezifisch ausgewählte Reservierung. Mit diesen Reservierungen können Sie am einfachsten prüfen, ob die reservierte Kapazität verfügbar ist und von Ihrer Arbeitslast genutzt werden kann. Wenn reservierte Kapazität nicht verfügbar und kompatibel ist, schlägt Ihre Arbeitslast fehl und gibt einen Fehler zurück. Eine speziell ausgewählte Reservierung umfasst alle Reservierungen für das Bereitstellungsmodell RESERVATION_BOUND und einige Reservierungen für das Bereitstellungsmodell STANDARD.

      Job erstellen, der Reservierungen verwendet

    • Für optionale reservierte Kapazität können Sie eine automatisch genutzte Reservierung verwenden und die Instanzflexibilität nutzen. Diese Reservierungsoptionen bieten ein hohes Maß an Sicherheit beim Beschaffen von Kapazitäten, aber nur, wenn reservierte Kapazität verfügbar ist, die von Ihrer Arbeitslast genutzt werden kann. Bei automatisch genutzten Reservierungen müssen Sie das Bereitstellungsmodell STANDARD angeben und manuell prüfen, ob die reservierte Kapazität verfügbar ist und der Instanzkonfiguration Ihrer Arbeitslast entspricht. Wenn die reservierte Kapazität nicht verfügbar ist oder nicht übereinstimmt, versucht Ihre Arbeitslast stattdessen, On-Demand-Kapazität zu verwenden. Im Gegensatz zu speziell ausgewählten Reservierungen können Sie die Instanzflexibilität jedoch mit automatisch genutzten Reservierungen verwenden, damit Ihre Arbeitslast versucht, mehrere automatisch genutzte Reservierungen zu nutzen.

      Hier erfahren Sie, wie Sie einen Job erstellen, der Reservierungen und Instanz-Flexibilität verwendet.

  • Für Arbeitslasten mit mittleren Anforderungen an die Verfügbarkeit können Sie entweder On-Demand-Kapazität mit Instanz-Flexibilität oder Flex-Start-VMs verwenden. Sie können zwischen diesen Optionen wählen:

    • Wenn Ihr Maschinentyp nicht zur A3-Maschinenserie gehört oder nicht unterstützt wird, sollten Sie die Verwendung von On-Demand-Kapazität mit Instanzflexibilität in Betracht ziehen. Für die On-Demand-Nutzungsoption ist das Bereitstellungsmodell STANDARD (Standard) erforderlich. Wenn Sie die Reservierungsnutzung nicht explizit blockieren, versucht Ihre Arbeitslast standardmäßig auch, automatisch genutzte Reservierungen zu nutzen. Wir empfehlen die On-Demand-Nutzung für die A3-Maschinenserie nicht.

      Hier erfahren Sie, wie Sie einen Job erstellen, der das Standardbereitstellungsmodell und die Instanzflexibilität verwendet.

    • Andernfalls oder wenn die On-Demand-Kapazität wiederholt nicht verfügbar ist, sollten Sie Flex-Start-VMs verwenden. Wenn Sie die Verbrauchsoption „Flex-Start-VMs“ verwenden möchten, geben Sie das Bereitstellungsmodell FLEX_START an. Bei Flex-Start-VMs muss Ihre Arbeitslast eine Wartezeit und eine begrenzte Ausführungsdauer tolerieren, aber Sie erhalten auch Rabatte über die Preise für Dynamic Workload Scheduler.

      Job erstellen, der Flex-Start-VMs verwendet

  • Verwenden Sie für Arbeitslasten mit geringen Anforderungen an die Verfügbarkeit Spot-VMs mit mehreren Verfügbarkeitsfeatures. Wenn Sie die Verbrauchsoption für Spot-VMs verwenden möchten, geben Sie das Bereitstellungsmodell SPOT an. Spot-VMs sind möglicherweise nicht immer verfügbar und können jederzeit vorzeitig beendet werden. Daher werden sie nur für fehlertolerante Arbeitslasten empfohlen, bieten aber möglicherweise die größten Rabatte durch die Spot-VM-Preise.

    Wir empfehlen generell, die Verfügbarkeit von Spot-VMs vor dem Erstellen zu prüfen und sicherzustellen, dass Ihre Arbeitslast mit dem vorzeitigen Beenden umgehen kann. Um die Verfügbarkeit von Spot-VMs in Batchjobs zu verbessern, empfehlen wir, die Instanz-Flexibilität mit mehreren Maschinentypen im selben Rang zu verwenden und automatische Wiederholungsversuche zu nutzen, um Spot-VMs nach einer vorzeitigen Beendigung automatisch neu zu erstellen.

    In der Compute Engine-Dokumentation erfahren Sie, wie Sie die Verfügbarkeit von Spot-VMs aufrufen und das vorzeitige Beenden von Spot-VMs verwalten. Anschließend erfahren Sie, wie Sie einen Job erstellen, der das Spot-VM-Bereitstellungsmodell, die Instanzflexibilität und automatische Wiederholungsversuche bei vorzeitiger Beendigung verwendet.

Nächste Schritte