Stocker les embeddings vectoriels

L'extension vector dans AlloyDB pour PostgreSQL fournit des fonctions et des opérateurs pgvector qui vous permettent d'utiliser votre base de données comme un magasin de vecteurs. Vous pouvez ajouter des colonnes vector à vos tables et stocker les embeddings générés en tant que valeurs vectorielles pour la recherche sémantique et les charges de travail d'IA générative.

Extension de base de données requise

Utilisez l'extension vector, version 0.5.0.google-1 ou ultérieure, qui inclut des fonctions et des opérateurs pgvector, pour stocker les embeddings générés en tant que valeurs vector. Il s'agit d'une version de pgvector que Google a étendue avec des optimisations spécifiques à AlloyDB.

CREATE EXTENSION IF NOT EXISTS vector;

Stocker les embeddings générés

Assurez-vous d'avoir déjà créé une table dans votre base de données AlloyDB.

Pour stocker des embeddings vectoriels, procédez comme suit :

  1. Créez une colonne vector dans votre table pour stocker vos embeddings :

    ALTER TABLE TABLE ADD COLUMN EMBEDDING_COLUMN vector(DIMENSIONS);

    Remplacez les éléments suivants :

    • TABLE : nom de la table.

    • EMBEDDING_COLUMN : nom de la nouvelle colonne d'embeddings.

    • DIMENSIONS : nombre de dimensions acceptées par le modèle

      Par exemple, si vous utilisez l'un des modèles text-embedding en anglais (par exemple, text-embedding-005) avec Agent Platform, spécifiez 768.

  2. Copiez les vecteurs dans la colonne de vecteurs. L'exemple suivant suppose que vos embeddings sont disponibles dans un fichier CSV :

    COPY TABLE (EMBEDDING_COLUMN) FROM 'PATH_TO_VECTOR_CSV' (FORMAT CSV);

    Remplacez les éléments suivants :

    • TABLE : nom de la table

    • EMBEDDING_COLUMN : nom de la colonne d'embeddings.

    • PATH_TO_VECTOR_CSV : chemin d'accès complet à l'emplacement où vous avez stocké votre fichier .CSV.

Une fois les embeddings stockés, vous pouvez utiliser l'extension vector ou alloydb_scann pour créer des index afin d'accélérer les performances des requêtes.

Étapes suivantes