Vous pouvez installer des composants supplémentaires tels que Hive WebHCat lorsque vous créez un cluster Managed Service pour Apache Spark à l'aide de la fonctionnalité Composants facultatifs. Cette page décrit le composant Hive WebHCat.
Le composant Hive WebHCat fournit une API REST pour HCatalog. Le service REST est disponible sur le port 50111 du premier nœud maître du cluster.
Installer le composant
Installez le composant lorsque vous créez un cluster Managed Service pour Apache Spark. Des composants peuvent être ajoutés aux clusters créés avec Managed Service pour Apache Spark version 1.3 et ultérieure.
Consultez la section Versions Managed Service pour Apache Spark compatibles pour obtenir la version de composant incluse dans chaque version d'image Managed Service pour Apache Spark.
Commande gcloud
Pour créer un cluster Managed Service pour Apache Spark incluant le composant Hive WebHCat, utilisez la commande cluster-name gcloud dataproc clusters create avec l'option --optional-components.
gcloud dataproc clusters create cluster-name \ --optional-components=HIVE_WEBHCAT \ --region=region \ ... other args
API REST
Le composant Hive WebHCat peut être spécifié via l'API Managed Service pour Apache Spark à l'aide de la propriété SoftwareConfig.Component dans le cadre d'une requête clusters.create.Console
- Activez le composant.
- Dans la console Google Cloud , ouvrez la page Managed Service pour Apache Spark Créer un cluster. Le panneau "Configurer un cluster" est sélectionné.
- Dans la section "Composants", sous "Composants facultatifs", sélectionnez Hive WebHCat et les autres composants facultatifs à installer sur votre cluster.