Componente opcional Hive WebHCat do Managed Service for Apache Spark

O componente Hive WebHCat permite interagir com o HCatalog por uma API REST. É possível instalar o WebHCat ao criar um cluster do Serviço Gerenciado para Apache Spark usando o recurso Componentes opcionais. O serviço REST está disponível na porta 50111 no primeiro nó mestre do cluster.

Instalar o componente

Instale o componente ao criar um cluster do Serviço Gerenciado para Apache Spark. Os componentes podem ser adicionados a clusters criados com o Serviço Gerenciado para Apache Spark versão 1.3 e posterior.

Consulte Versões compatíveis do Serviço Gerenciado para Apache Spark para saber qual versão do componente está incluída em cada versão da imagem do Serviço Gerenciado para Apache Spark.

Console doGoogle Cloud

  1. No console do Google Cloud , abra a página Criar cluster.
  2. Clique em Configuração adicional para abrir a seção.
  3. Edite os Componentes opcionais.
  4. No painel que será aberto, marque a caixa de seleção Hive WebHCat e clique em Salvar.

CLI da gcloud

Para criar um cluster do Serviço Gerenciado para Apache Spark que inclua o componente WebHCat do Hive, use o comando gcloud dataproc clusters create cluster-name com a flag --optional-components.

gcloud dataproc clusters create cluster-name \
    --optional-components=HIVE_WEBHCAT \
    --region=region \
    ... other args

API REST

O componente WebHCat do Hive pode ser especificado pela API Dataproc usando SoftwareConfig.Component como parte de uma solicitação clusters.create.