Cette fonctionnalité vous permet de sélectionner une configuration minimale de la plate-forme du processeur pour vos clusters Managed Service pour Apache Spark. Par exemple, lorsque vous créez un cluster, vous pouvez sélectionner des processeurs Intel Skylake pour les nœuds du cluster afin d'améliorer les performances des tâches.
Avant d'utiliser cette fonctionnalité, consultez la section Régions et zones disponibles qui répertorie les plates-formes disponibles dans chaque zone. Vous pouvez également exécuter la commande gcloud compute zones describe zone pour répertorier les availableCpuPlatforms dans la zone du cluster. Pour en savoir plus, consultez Spécifier une configuration minimum de la plate-forme du processeur pour les instances de VM.
Utiliser la configuration minimale de la plate-forme du processeur
Console
Pour spécifier une configuration minimale de plate-forme de processeur pour les nœuds de cluster :
- Ouvrez la page Créer un cluster.
- Dans la section Configuration du nœud de calcul, sous Plate-forme du processeur et GPU, confirmez ou sélectionnez une plate-forme de processeur.
- Par défaut, les paramètres du nœud pilote (maître) sont identiques à ceux du nœud de calcul principal. Sous Configuration supplémentaire, vous pouvez modifier Nœud pilote pour décocher la case Définir par défaut le nœud pilote sur la même configuration que le nœud de calcul principal, puis spécifier les paramètres du nœud pilote.
Commande gcloud CLI
Pour spécifier une configuration minimale de la plate-forme du processeur pour les nœuds maîtres et/ou de calcul (y compris les nœuds préemptifs) de votre cluster, transmettez l'un des indicateurs suivants à la commande gcloud dataproc clusters create :
gcloud dataproc clusters create \ --region=region \ --master-min-cpu-platform=cpu-platform-name \ --worker-min-cpu-platform=cpu-platform-name \ other args ...
API REST
Pour spécifier une configuration minimale de la plate-forme du processeur pour les nœuds de travail maître, principal et/ou secondaire (préemptifs) de votre cluster, définissez la valeur minCpuPlatform dans le champ InstanceGroupConfig pour vos instances maître, de calcul principale et/ou secondaire (préemptives) dans votre requête cluster.create.