Eseguire l'upgrade dei feed di dati di spazio di archiviazione sul cloud al framework del connettore v2
Per migliorare l'affidabilità, la scalabilità e il rendimento delle pipeline di importazione dati, stiamo eseguendo l'upgrade dei feed di dati di spazio di archiviazione sul cloud al nuovo framework del connettore v2. Questo nuovo framework utilizza Google Cloud Storage Transfer Service (STS).
Vantaggi del framework del connettore v2
L'upgrade al framework del connettore v2 sblocca miglioramenti significativi per i feed di dati, tra cui:
- Maggiore efficienza del polling: efficienza notevolmente migliorata durante il polling da origini come AWS.
- Maggiore affidabilità e sicurezza: la convalida in tempo reale delle credenziali di origine garantisce connessioni sicure e affidabili.
- Supporto delle identità esteso: supporto integrato per l'identità federata AWS.
Tempistiche della migrazione
Stiamo ritirando il framework del connettore v1 per i seguenti connettori legacy: Cloud Storage, Amazon S3, Amazon SQS e Azure Blob Storage.
Tieni presente le seguenti tappe fondamentali:
- 1° ottobre 2026 - Fine del supporto: non vengono forniti ulteriori aggiornamenti ai feed v1 ed è disponibile solo il supporto best effort. Ti consigliamo vivamente di eseguire la migrazione e di intraprendere azioni in modo che Google possa eseguire la migrazione dei tuoi feed prima di questa data per evitare interruzioni.
- 15 marzo 2027 - Disattivazione permanente: i connettori legacy raggiungono la fine del ciclo di vita. Dopo questa data, tutti i feed di dati che utilizzano ancora i connettori v1 smetteranno di funzionare e restituiranno un messaggio di errore.
Migrazione automatica e azioni richieste
Per facilitare una transizione senza problemi, forniamo servizi di migrazione automatica per tutti i feed di dati attivi che utilizzano i connettori v1 legacy.
A seconda del tipo di origine, devi intraprendere le seguenti azioni per assicurarti che la migrazione automatica vada a buon fine:
- Cloud Storage: concedi le autorizzazioni specifiche al nuovo account di servizio come descritto nella documentazione Concedere l'accesso al service account.
- Amazon S3: se il tuo ambiente utilizza l'elenco consentiti IP, devi aggiungere gli intervalli IP STS alla policy del bucket. Segui i passaggi per attivare l'accesso STS per Amazon S3.
- Amazon SQS: la migrazione supporta solo le code SQS che contengono messaggi provenienti da un singolo bucket Amazon S3. Se la coda riceve messaggi da più bucket, crea un feed separato per ogni bucket. Verifica che la coda SQS sia configurata correttamente e che le credenziali di accesso per la coda SQS e il bucket Amazon S3 siano identiche.
- Microsoft Azure: se utilizzi firewall o reti virtuali, consenti gli intervalli IP STS seguendo le istruzioni di accesso STS di Azure.
- Feed non riusciti: esamina i feed attuali e correggi quelli che non vanno a buon fine a causa di credenziali errate in modo che possano essere migrati correttamente.
Sicurezza e affidabilità
La procedura di migrazione automatica mira a prevenire la perdita di dati. La migrazione include limiti rigidi integrati. È prevista una duplicazione minima dei dati durante la breve durata della finestra di migrazione.
Hai bisogno di ulteriore assistenza? Ricevi risposte dai membri della community e dai professionisti di Google SecOps.