Utiliser Apache Hive avec Dataproc Metastore

Cette page vous montre un exemple d'utilisation d'Apache Hive avec un service Dataproc Metastore. Dans cet exemple, vous lancez une session Hive sur un cluster Managed Service for Apache Spark, puis exécutez des exemples de commandes pour créer une base de données et une table.

Avant de commencer

Se connecter à Apache Hive

Pour commencer à utiliser Hive, utilisez SSH pour vous connecter au cluster Managed Service for Apache Spark associé à votre service Dataproc Metastore. Une fois connecté, vous pouvez exécuter des commandes Hive depuis la fenêtre de terminal SSH de votre navigateur pour gérer vos métadonnées.

Se connecter à Hive

  1. Dans la console Google Cloud , accédez à la page Instances de VM.
  2. Dans la liste des instances de machines virtuelles, cliquez sur SSH sur la ligne de l'instance de VM Managed Service for Apache Spark à laquelle vous souhaitez vous connecter.

Une fenêtre de navigateur s'ouvre dans votre répertoire de base sur le nœud, avec une sortie semblable à ce qui suit :

Connected, host fingerprint: ssh-rsa ...
Linux cluster-1-m 3.16.0-0.bpo.4-amd64 ...
...
example-cluster@cluster-1-m:~$

Pour démarrer Hive et créer une base de données et une table, exécutez les commandes suivantes dans la session SSH :

  1. Démarrez Hive.

    hive

  2. Créez une base de données nommée myDatabase.

    create database myDatabase;

  3. Affichez la base de données que vous avez créée.

    show databases;

  4. Utilisez la base de données que vous avez créée.

    use myDatabase;

  5. Créez une table nommée myTable.

    create table myTable(id int,name string);

  6. Répertoriez les tables sous myDatabase.

    show tables;

  7. Affichez les lignes du tableau que vous avez créé.

    desc MyTable;

L'exécution des commandes suivantes génère un résultat semblable à celui-ci :

$hive

hive> show databases;
OK
default
hive> create database myDatabase;
OK
hive> use myDatabase;
OK
hive> create table myTable(id int,name string);
OK
hive> show tables;
OK
myTable
hive> desc myTable;
OK
id                      int                                         
name                    string

Étapes suivantes