通过此功能,您可以为您的 Managed Service for Apache Spark 集群选择满足最低要求的 CPU 平台。例如,创建集群时,您可以为集群节点选择 Intel Skylake CPU,以提高作业性能。
在使用此功能之前,请参阅可用的区域和地区,其中列出了每个地区支持的平台。您还可以运行 gcloud compute zones describe zone 命令以列出集群可用区中的 availableCpuPlatforms。如需了解详情,请参阅指定虚拟机实例的满足最低要求 CPU 平台。
使用满足最低要求的 CPU 平台
控制台
如需为集群节点指定最低要求 CPU 平台,请执行以下操作:
- 打开创建集群页面。
- 在工作器配置部分中的 CPU 平台和 GPU 下,确认或选择 CPU 平台。
- 默认情况下,驱动程序(主)节点设置与主要工作器设置相同。 在其他配置下,您可以修改驱动节点,清除将默认驱动节点设为与主要工作器相同复选框,然后指定驱动节点设置。
gcloud CLI 命令
要为集群的主节点和/或工作器(包括抢占式)节点指定满足最低要求的 CPU 平台,请将以下一个或两个标志传递给 gcloud dataproc clusters create 命令:
gcloud dataproc clusters create \ --region=region \ --master-min-cpu-platform=cpu-platform-name \ --worker-min-cpu-platform=cpu-platform-name \ other args ...
REST API
要为集群的主节点、主要工作器和/或辅助(抢占式)工作器节点指定满足最低要求的 CPU 平台,请在 InstanceGroupConfig 中为您的 cluster.create 请求中的主实例、主要工作器和/或辅助(抢占式)实例设置 minCpuPlatform 字段。