בדף הזה מוסבר על מסדי הנתונים הווקטוריים שנתמכים במנוע RAG. אתם יכולים גם לראות איך מחברים מסד נתונים וקטורי (מאגר וקטורים) לקורפוס RAG.
מסדי נתונים וקטוריים ממלאים תפקיד חיוני באחזור נתונים באפליקציות RAG. מסדי נתונים וקטוריים מספקים דרך ייחודית לאחסן ולשלוח שאילתות להטמעות וקטורים, שהן ייצוגים מתמטיים של טקסט או נתונים אחרים שמתעדים משמעות סמנטית וקשרים. הטמעות וקטורים מאפשרות למערכות RAG למצוא במהירות ובדייקנות את המידע הכי רלוונטי בתוך מאגר ידע עצום, גם כשמדובר בשאילתות מורכבות או מפורטות. בשילוב עם מודל הטמעה, מסדי נתונים וקטוריים יכולים לעזור להתגבר על המגבלות של מודלים גדולים של שפה (LLM) ולספק תשובות מדויקות, רלוונטיות ומקיפות יותר.
מסדי נתונים וקטוריים נתמכים
כשיוצרים קורפוס RAG, מנוע RAG מציע את RagManagedDb שמתאים לארגונים כמסד הנתונים הווקטורי שמוגדר כברירת מחדל, שלא דורש הקצאה או ניהול נוספים. ב-RagManagedDb יש אפשרויות חיפוש גם של KNN וגם של ANN, ואפשר לעבור למסלול בסיסי כדי ליצור אב טיפוס מהיר ולערוך ניסויים. מידע נוסף על בחירת אסטרטגיית אחזור ב-RagManagedDb או על עדכון הרמה זמין במאמר שימוש ב-RagManagedDb עם RAG. כדי שמנוע RAG ייצור וינהל בשבילכם את מסד הנתונים הווקטורי באופן אוטומטי, קראו את המאמר משאב REST: projects.locations.ragCorpora.
בנוסף ל-RagManagedDb שמוגדר כברירת מחדל, מנוע RAG מאפשר להקצות מסד נתונים וקטורי ולהשתמש בו בקורפוס RAG. במקרה כזה, אתם אחראים למחזור החיים ולמדרגיות של מסד הנתונים הווקטורי.
השוואה בין אפשרויות של מסדי נתונים וקטוריים
בטבלה הבאה מפורטים מסדי הנתונים הווקטוריים שנתמכים במנוע RAG, עם קישורים לדפים שמסבירים איך להשתמש במסדי הנתונים הווקטוריים בקורפוס ה-RAG.
| מסד נתונים וקטורי | יתרונות | למי זה מתאים | חסרונות | מדדי מרחק נתמכים | סוג החיפוש | שלב ההשקה |
|---|---|---|---|---|---|---|
RagManagedDb (ברירת המחדל) הוא שירות מסד נתונים שניתן להתאמה ומופץ אזורית, שמציע עקביות גבוהה מאוד וזמינות גבוהה, ואפשר להשתמש בו לחיפוש וקטורי.
easy simple fast quick |
|
|
|
cosine |
KNN (ברירת מחדל) ו-ANN | זמינות לכלל המשתמשים (GA) |
| חיפוש וקטורי הוא שירות מסד הנתונים הווקטורי ב-Agent Platform, שמותאם למשימות של למידת מכונה. |
|
|
|
cosinedot-product |
ANN | זמינות לכלל המשתמשים (GA) |
| Feature Store ב-Gemini Enterprise Agent Platform הוא שירות מנוהל לארגון, לאחסון ולהצגה של תכונות למידת מכונה. |
|
|
|
cosinedot-productL2 squared |
ANN | תצוגה מקדימה |
| Weaviate הוא מסד נתונים וקטורי בקוד פתוח, גמיש ומודולרי. |
|
|
|
cosinedot-productL2 squaredhammingmanhattan |
תמיכה ב-ANN ובחיפוש היברידי | תצוגה מקדימה |
| Pinecone הוא מסד נתונים וקטורי מבוסס-ענן ומנוהל, שמיועד לחיפוש דמיון עם ביצועים גבוהים. |
|
|
|
cosineeuclideandot-product |
ANN | זמינות לכלל המשתמשים (GA) |
המאמרים הבאים
כדי ליצור קורפוס RAG, ראו השיטה: ragCorpora.create
כדי להציג רשימה של קורפוסים של RAG, ראו Method: ragCorpora.list