Plataforma mínima de CPU

Esse recurso permite selecionar uma plataforma de CPU mínima para os clusters do Serviço Gerenciado para Apache Spark. Por exemplo, ao criar um cluster, é possível selecionar CPUs Intel Skylake para os nós do cluster para melhorar o desempenho do job.

Antes de usar esse recurso, consulte Regiões e zonas disponíveis, que lista as plataformas disponíveis em cada zona. Também é possível executar o comando gcloud compute zones describe zone para listar os availableCpuPlatforms na zona do cluster. Para mais informações, consulte Como especificar uma plataforma de CPU mínima para instâncias de VM.

Usar plataforma de CPU mínima

Console

Para especificar uma plataforma de CPU mínima para nós de cluster:

  1. Abra a página Criar cluster.
  2. Na seção Configuração do worker, em Plataforma de CPU e GPU, confirme ou selecione uma plataforma de CPU.
  3. Por padrão, as configurações do nó do driver (mestre) são as mesmas do worker primário. Em Configuração adicional, é possível editar o Nó do driver para desmarcar a caixa de seleção Nó do driver padrão é o mesmo que o do worker primário e especificar as configurações do nó do driver.

Comando da CLI gcloud

Para especificar uma plataforma de CPU mínima para os nós mestre e/ou de trabalho (incluindo os preemptivos) do cluster, transmita uma ou ambas as flags a seguir para o comando gcloud dataproc clusters create:

gcloud dataproc clusters create \
    --region=region \
    --master-min-cpu-platform=cpu-platform-name \
    --worker-min-cpu-platform=cpu-platform-name \
    other args ...

API REST

Para especificar uma plataforma de CPU mínima para os nós mestre, de worker primário e/ou de worker secundário (preemptivo) do cluster, defina o campo minCpuPlatform em InstanceGroupConfig para as instâncias mestre, de worker primário e/ou secundário (preemptivo) na solicitação cluster.create.