本文档介绍了资源可获取性,并建议了如何在创建和运行批量作业时提高可获取性。
什么是可获取性?
可获取性是指资源可用于运行工作负载的概率。当资源不可用时,您的工作负载会因资源可用性错误而失败。可获取性与可靠性(工作负载可供用户使用的概率)相关,但又有所不同。(可用性可能意味着其中一个或两个。)
可获取性与可靠性之间的关系很复杂。您的工作负载需要获取资源才能可靠运行。不过,虽然位置、时间和硬件方面的任何灵活性都会提高可获取性,但只有满足工作负载要求的灵活性才能提高可靠性。例如,请注意以下复杂情况:
- 由于需求较高,高性能机器类型可能较难获得,但如果工作负载性能不足,可靠性就会降低。
- 位置灵活性可提高可获取性,但密集分配的机器可提高网络性能。
- 时间灵活性可提高可获取性,但过度等待可能会导致不必要的延迟。
因此,可获取性并非越高越好。最佳可获取性级别因您的优先级和要求而异。例如,您可能希望降低可获取性,以优先降低费用。即使您想优先考虑可靠性,也可能需要权衡提高可获取性的好处与降低性能或增加延迟时间的风险。
关于提高作业可获取性的建议
请参阅以下部分,了解如何提高批量作业的可获取性:
- 针对所有使用选项的建议:请查看针对每项作业的这些建议。
- 基于使用选项的建议:根据作业的使用选项选择建议。
针对所有使用选项的建议
通过分离工作负载,最大限度地减少对大型和高性能机器类型的需求。例如,首先使用依赖作业将计算密集型操作与低需求操作分开。然后,通过最大限度地提高并行处理能力并最大限度地减少紧密耦合的任务,尽可能减少每个作业所需的最低计算资源。
尽可能增加作业的 Compute Engine 资源允许的位置数量。默认情况下,此值为 true;除非您为作业指定
allowedLocations[]字段,否则该作业的 Compute Engine 资源可以在作业位置中的每个可用区中运行。详细了解位置。
考虑使用快速失败策略,而不是等待更好的可获取性。为尽量避免延迟,请考虑采用如下所示的快速失败策略:
- 虽然您可以通过在其他时间尝试请求来排查资源可用性错误,但通常先尝试不同的位置或硬件会更快。
- 如果您愿意使用多种使用选项,通常可以先尝试没有延迟的使用选项:按需预留、按需和 Spot 虚拟机。
- 对于您计划重复运行的新工作负载,您可能希望通过临时使用更易获取的选项来加快初始测试和问题排查。
基于使用选项的建议
您选择的使用选项是作业可获取性的主要因素。本部分简要总结了每种使用选项,并建议了如何优化每种使用选项的可获取性。
以下使用选项按可获取性从高到低的顺序列出:
对于具有高可获取性要求的工作负载,请使用预留。 与所有其他消费选项相比,预留为获取容量提供了更高级别的保障。如需使用预留容量,请先创建或确定可使用的现有预留。然后,将实例配置为使用该预留容量。与其他使用选项不同,预留实例即使在不使用时也会产生费用,直到您将其删除,因为它们具有容量保证。在考虑可获取性时,请在以下预留类型之间进行选择:
如需使用预留容量,请使用明确定向预留。这些预留可让您最轻松地验证预留容量是否可用且可供工作负载使用。只要预留容量不可用且不兼容,您的工作负载就会失败并返回错误。明确针对的预留包括
RESERVATION_BOUND预配模型的所有预留以及STANDARD预配模型的部分预留。了解如何创建使用预留的作业。
对于可选的预留容量,请使用自动使用的预留,并使用实例灵活性。 这些预留选项在获取容量方面提供了高度保障,但前提是工作负载可以使用的预留容量可用。对于自动使用的预留,您必须指定
STANDARD预配模型,并手动验证预留容量是否可用且与工作负载的实例配置匹配。只要预留容量不可用或不匹配,您的工作负载就会尝试改用按需容量。但是,与专门定位的预留不同,您可以将实例灵活性与自动使用的预留搭配使用,让工作负载尝试使用多个自动使用的预留。
对于具有中等可获取性要求的工作负载,请使用具有实例灵活性的按需容量或灵活启动虚拟机。 从以下选项中进行选择:
除非您的机器类型属于 A3 机器系列或不受支持,否则请考虑使用按需容量和实例灵活性。 按需使用选项需要
STANDARD(默认)预配模型。除非您明确禁止使用预留,否则默认情况下,您的工作负载也会尝试使用自动使用的预留。值得注意的是,我们不建议为 A3 机器系列使用按需模式。否则,或者如果按需容量反复不可用,请考虑使用灵活启动虚拟机。如需使用灵活启动型虚拟机使用选项,请指定
FLEX_START预配模型。灵活启动型虚拟机要求您的工作负载能够承受等待时间和有限的运行时间,但也会通过动态工作负载调度器价格提供折扣。了解如何创建使用灵活启动型虚拟机的作业。
对于获取性要求较低的工作负载,请使用具有多项获取性功能的 Spot 虚拟机。如需使用 Spot 虚拟机消耗选项,请指定
SPOT预配模型。Spot 虚拟机可能并非始终可用,并且随时可能被抢占,因此仅建议用于容错工作负载,但通过 Spot 虚拟机价格,它们可能会提供最大折扣。我们通常建议您在创建 Spot 虚拟机之前查看其可用性,并验证您的工作负载是否可以处理抢占。然后,为了专门提高批量作业中 Spot 虚拟机的可获取性,我们建议您使用实例灵活性,在同一排名中使用多种机器类型,并使用自动重试功能在抢占后自动尝试重新创建 Spot 虚拟机。
在 Compute Engine 文档中,了解如何查看 Spot 虚拟机的可用性以及管理 Spot 虚拟机抢占。然后,了解如何创建使用 Spot 虚拟机预配模型、实例灵活性和抢占后自动重试的作业。
后续步骤
- 详细了解更多作业创建选项。