בדף הזה מופיעה קבוצה של יישומי הפניה ל-Gemini Live API ב-Gemini Enterprise Agent Platform. ההדגמות האלה כוללות מגוון רחב של אפשרויות, החל מ-JavaScript starters ללא תלות ועד לארכיטקטורות מקיפות שמבוססות על React. הן מדגימות איך לבנות סוכני קולי חזקים בזמן אמת באמצעות Gemini Live API ו-ADK.
אפליקציות הדגמה
- אפליקציית הדגמה של React: לקוח React מקיף עם סטרימינג בזמן אמת, שימוש בכלים וטיפול במדיה.
- אפליקציית הדגמה של Plain JS: הטמעה של JavaScript ללא תלות, כדי להבין את המנגנונים העיקריים של ה-API.
- יועץ בזמן אמת: פרסונה של יועץ מומחה שיכולה לעבור בין מצב שקט למצב של דיבור.
- נציג שירות לקוחות: נציג מתקדם עם זיהוי רגשות, קלט רב-אופני והפעלת כלים.
- עוזר גיימינג: עוזר גיימינג עם אפשרות להחלפת פרסונה ושיתוף מסך.
- אפליקציית טלפוניה של Gemini Live: אפליקציה בזמן אמת להמרת קול ל-AI, שמשתמשת ב-Twilio לטלפוניה, ב-FastAPI backend וב-Gemini Live API ל-AI בממשק שיחה.
מדריך למפתחים בנושא סטרימינג דו-כיווני ב-ADK
הערכה לפיתוח סוכנים (ADK) מספקת מסגרת מוכנה לייצור ליצירת אפליקציות עם סטרימינג דו-כיווני באמצעות Live API. במדריך ובסרטוני ההדגמה הבאים מוצגת ארכיטקטורת הסטרימינג של ADK, שמאפשרת תקשורת דו-כיוונית בזמן אמת בין משתמשים לסוכני AI באמצעות ערוצים מרובי-אופנים (טקסט, אודיו, וידאו).
כלים נוספים
- כלי לניפוי באגים באודיו מסוג PCM: כלי עצמאי לבדיקה ולניפוי באגים בזרמי אודיו גולמיים מסוג PCM ובחיבורי WebSocket.