Plataforma mínima de CPU

Com esse recurso, você pode selecionar uma plataforma de CPU mínima para seus clusters do Serviço Gerenciado para Apache Spark. Por exemplo, quando você cria um cluster, pode selecionar as CPUs Intel Skylake para os nós do cluster e melhorar o desempenho do job.

Antes de usar esse recurso, consulte Regiões e zonas disponíveis, que lista as plataformas disponíveis em cada zona. Também é possível executar o comando gcloud compute zones describe zone para listar o availableCpuPlatforms na zona do cluster. Para mais informações, consulte Como especificar uma plataforma de CPU mínima para instâncias de VM.

Usar a plataforma de CPU mínima

Console

Para especificar uma plataforma de CPU mínima para nós do cluster:

  1. Abra a página Criar cluster.
  2. Na seção Configuração do worker, em Plataforma de CPU e GPU, confirme ou selecione uma plataforma de CPU.
  3. Por padrão, as configurações do nó do driver (mestre) são as mesmas do worker primário. Em Configuração adicional, edite Nó do driver para desmarcar a caixa de seleção Nó do driver padrão é o mesmo que o do worker primário e especifique as configurações do nó do driver.

Comando da CLI gcloud

Para especificar uma plataforma de CPU mínima para os nós mestre e/ou de trabalho do cluster (incluindo os preemptivos), transmita uma ou ambas as flags a seguir para o comando gcloud dataproc clusters create:

gcloud dataproc clusters create \
    --region=region \
    --master-min-cpu-platform=cpu-platform-name \
    --worker-min-cpu-platform=cpu-platform-name \
    other args ...

API REST

Para especificar uma plataforma de CPU mínima para os nós de trabalho mestre, worker primário e/ou secundário (preemptivos) do cluster, defina o campo minCpuPlatform em InstanceGroupConfig para o mestre, o worker primário e/ou Instâncias secundárias (preemptivas) na solicitação cluster.create.