Stocker les embeddings vectoriels

Sélectionnez une version de la documentation :

Cette page explique comment utiliser AlloyDB comme base de données vectorielle avec l'extension vector qui inclut les fonctions et les opérateurs pgvector. Ces fonctions et opérateurs vous permettent de stocker des embeddings en tant que valeurs vectorielles.

Extension de base de données requise

Utilisez l'extension vector, version 0.5.0.google-1 ou ultérieure, qui inclut pgvector fonctions et opérateurs, pour stocker les embeddings générés en tant que valeurs vector. Il s'agit d'une version de pgvector que Google a étendue avec des optimisations spécifiques à AlloyDB.

CREATE EXTENSION IF NOT EXISTS vector;

Stocker les embeddings générés

Assurez-vous d'avoir déjà créé une table dans votre base de données AlloyDB.

Pour stocker des embeddings vectoriels, procédez comme suit :

  1. Créez une colonne vector[] dans votre table pour stocker vos embeddings :

    ALTER TABLE TABLE ADD COLUMN EMBEDDING_COLUMN vector(DIMENSIONS);

    Remplacez les éléments suivants :

    • TABLE : nom de la table.

    • EMBEDDING_COLUMN : nom de la nouvelle colonne d'embeddings.

    • DIMENSIONS: nombre de dimensions acceptées par le modèle.

      Par exemple, si vous utilisez l'un des modèles text-embedding en anglais, par exemple text-embedding-005 avec Vertex AI, spécifiez 768.

  2. Copiez les vecteurs dans la colonne vectorielle. L'exemple suivant suppose que vos embeddings sont disponibles dans un fichier CSV :

    COPY TABLE (EMBEDDING_COLUMN) FROM 'PATH_TO_VECTOR_CSV (FORMAT CSV);

    Remplacez les éléments suivants :

    • PATH_TO_VECTOR_CSV: chemin d'accès complet à l'emplacement où vous avez stocké votre fichier CSV.

Une fois que vous avez stocké les embeddings, vous pouvez utiliser l'extension vector ou l'extension alloydb_scann pour créer des index afin d'améliorer les performances des requêtes.

Étape suivante