Gemini Enterprise Agent Platform Vision (in precedenza Vertex AI Vision) è una piattaforma basata sull'AI per acquisire, analizzare e archiviare dati video. Agent Platform Vision consente agli utenti di creare e implementare applicazioni con un'interfaccia utente semplificata.
Utilizzando Agent Platform Vision puoi creare soluzioni di visione artificiale end-to-end sfruttando l'integrazione di Agent Platform Vision con altri componenti principali, ovvero Live Video Analytics, flussi di dati e Vision Warehouse. L'API Vision della piattaforma di agenti Gemini Enterprise ti consente di creare un'app di alto livello da API di basso livello e di creare e aggiornare un flusso di lavoro di alto livello che combina più chiamate API individuali. Puoi quindi eseguire il flusso di lavoro come unità effettuando una singola richiesta di deployment al server della piattaforma Agent Platform Vision.
Con Agent Platform Vision puoi:
- Importa dati video in tempo reale
- Analizza i dati per ottenere approfondimenti utilizzando modelli di AI per la visione generici e personalizzati
- Archivia gli insight in Vision Warehouse per semplificare le query e le informazioni sui metadati
Workflow di Agent Platform Vision
I passaggi da completare per utilizzare Agent Platform Vision sono i seguenti:
Importare dati in tempo reale
L'architettura di Agent Platform Vision ti consente di eseguire lo streaming in modo rapido e conveniente dell'infrastruttura di importazione video in tempo reale in un cloud pubblico.
Analizzare i dati
Una volta inseriti i dati, il framework di Agent Platform Vision ti offre un accesso e un'orchestrazione semplici di un portafoglio ampio e in crescita di modelli di analisi generali, personalizzati e specializzati.
Archiviazione e query dell'output
Dopo che l'app analizza i dati, puoi inviare queste informazioni a una destinazione di archiviazione (Vision Warehouse o BigQuery) o ricevere i dati in tempo reale. Con Vision Warehouse puoi inviare l'output dell'app a un warehouse che generalizza il tuo lavoro di ricerca e gestisce più tipi di dati e casi d'uso.
Una nota sull'AI responsabile
In Google Cloud, diamo la priorità ad aiutare i clienti a sviluppare e implementare in modo sicuro soluzioni utilizzando Gemini Enterprise Agent Platform Vision. Per Gemini Enterprise Agent Platform Vision, abbiamo lavorato per sviluppare prestazioni eque e imparziali in conformità con i principi di Google AI.
Questo lavoro include test per verificare la presenza di bias durante lo sviluppo, ad esempio esaminando le prestazioni in base alle diverse tonalità della pelle e sviluppando funzionalità del prodotto per migliorare la privacy e limitare l'identificazione personale, come la sfocatura di persone e volti. Ci impegniamo a eseguire iterazioni e miglioramenti e continueremo a incorporare best practice e lezioni apprese nei nostri prodotti Vertex AI.
Quando Gemini Enterprise Agent Platform Vision è integrato nel contesto organizzativo unico di un cliente, è probabile che ci siano ulteriori considerazioni sull'AI responsabile. Invitiamo i clienti a sfruttare le best practice in materia di equità, interpretabilità, privacy e sicurezza durante l'implementazione di Gemini Enterprise Agent Platform Vision, soprattutto quando creano modelli personalizzati o addestrati con AutoML. In questa documentazione tecnica, abbiamo fornito ulteriori indicazioni e risorse per supportare questo lavoro. Per saperne di più, leggi i consigli di Google per le pratiche di AI responsabile.
Passaggi successivi
- Scopri di più nel post del blog "Vertex AI Vision: crea ed esegui il deployment di applicazioni di visione artificiale su larga scala con facilità".
- Scopri i dettagli di modelli specifici nella guida all'analisi dell'occupazione, nella guida alla sfocatura delle persone, nella guida al rilevatore di persone/veicoli o nella guida al filtro del movimento.
- Prova Agent Platform Vision nella Google Cloud console leggendo la Guida rapida per creare un'app nella console.
- Configura il tuo ambiente locale per utilizzare Agent Platform Vision.