Google Cloud fornisce strumenti, prodotti, indicazioni e servizi professionali per aiutarti a eseguire la migrazione dei dati da Amazon Simple Storage Service (Amazon S3) a Cloud Storage. Questo documento descrive come progettare, implementare e convalidare un piano per la migrazione da Amazon S3 a Cloud Storage. Il documento descrive una parte del processo di migrazione complessivo in cui crei un inventario degli artefatti Amazon S3 e un piano per la gestione del processo di migrazione.
La discussione in questo documento è rivolta agli amministratori cloud che vogliono informazioni dettagliate su come pianificare e implementare un processo di migrazione. È destinato anche ai decisori che stanno valutando l'opportunità di eseguire la migrazione e che vogliono esplorare l'aspetto di una migrazione.
Questo documento fa parte di una serie in più parti sulla migrazione da AWS aGoogle Cloud che include i seguenti documenti:
- Inizia
- Esegui la migrazione da Amazon EC2 a Compute Engine
- Esegui la migrazione da Amazon S3 a Cloud Storage (questo documento)
- Esegui la migrazione da Amazon EKS a Google Kubernetes Engine
- Esegui la migrazione da Amazon RDS e Amazon Aurora per MySQL a Cloud SQL per MySQL
- Esegui la migrazione da Amazon RDS e Amazon Aurora per PostgreSQL a Cloud SQL per PostgreSQL e AlloyDB per PostgreSQL
- Esegui la migrazione da Amazon RDS per SQL Server a Cloud SQL per SQL Server
- Esegui la migrazione da AWS Lambda a Cloud Run
Per questa migrazione a Google Cloud, ti consigliamo di seguire il framework di migrazione descritto in Esegui la migrazione a Google Cloud: inizia.
Il seguente diagramma illustra il percorso di migrazione.
Potresti eseguire la migrazione dal tuo ambiente di origine a Google Cloud in una serie di iterazioni, ad esempio eseguendo prima la migrazione di alcuni workload e poi di altri. Per ogni singola iterazione della migrazione, segui le fasi del framework di migrazione generale:
- Valuta e scopri i tuoi workload e i tuoi dati.
- Pianifica e crea una base su Google Cloud.
- Esegui la migrazione dei tuoi workload e dei tuoi dati su Google Cloud.
- Ottimizza il tuo ambiente Google Cloud .
Per ulteriori informazioni sulle fasi di questo framework, consulta Esegui la migrazione a Google Cloud: inizia.
Per progettare un piano di migrazione efficace, ti consigliamo di convalidare ogni passaggio del piano e di assicurarti di avere una strategia di rollback. Per convalidare il tuo piano di migrazione, consulta Esegui la migrazione a Google Cloud: best practice per la convalida di un piano di migrazione.
Valuta l'ambiente di origine
Nella fase di valutazione, determini i requisiti e le dipendenze per eseguire la migrazione dell'ambiente di origine a Google Cloud.
La fase di valutazione è fondamentale per il successo della migrazione. Devi acquisire una conoscenza approfondita dei workload di cui vuoi eseguire la migrazione, dei loro requisiti, delle loro dipendenze e del tuo ambiente attuale. Devi comprendere il tuo punto di partenza per pianificare ed eseguire correttamente una migrazione a Google Cloud.
La fase di valutazione prevede le seguenti attività:
- Crea un inventario completo dei tuoi workload.
- Cataloga i workload in base alle loro proprietà e dipendenze.
- Forma e istruisci i tuoi team su Google Cloud.
- Crea esperimenti e proof of concept su Google Cloud.
- Calcola il costo totale di proprietà (TCO) dell'ambiente di destinazione.
- Scegli la strategia di migrazione per i tuoi workload.
- Scegli gli strumenti di migrazione.
- Definisci il piano e la cronologia della migrazione.
- Convalida il piano di migrazione.
Per ulteriori informazioni sulla fase di valutazione e su queste attività, consulta Esegui la migrazione a Google Cloud: valuta e scopri i tuoi workload. Le sezioni seguenti si basano sulle informazioni contenute in questo documento.
Crea un inventario dei bucket Amazon S3
Per definire l'ambito della migrazione, devi creare due inventari: un inventario dei tuoi bucket Amazon S3 e un inventario degli oggetti archiviati nei bucket.
Dopo aver creato l'inventario dei bucket Amazon S3, perfezionalo considerando i seguenti punti dati relativi a ciascun bucket Amazon S3:
- Come hai configurato la crittografia lato server del bucket Amazon S3.
- Le tue impostazioni per la gestione di identità e accessi del bucket Amazon S3.
- La configurazione per il blocco dell'accesso pubblico S3.
- Qualsiasi tag di allocazione dei costi per i bucket Amazon S3.
- La configurazione per il blocco degli oggetti S3.
- Come accedi al bucket Amazon S3.
- Come hai configurato Pagamenti del richiedente.
- Le impostazioni per il controllo delle versioni degli oggetti Amazon S3.
- La configurazione delle policy di AWS Backup per Amazon S3.
- Se utilizzi Amazon S3 Intelligent-Tiering.
- Come hai configurato la replica degli oggetti Amazon S3.
- Il ciclo di vita degli oggetti Amazon S3.
- Indica se il bucket è di un tipo specializzato, ad esempio S3 Tables, S3 Metadata o S3 Vectors.
Ti consigliamo inoltre di raccogliere dati sui bucket Amazon S3 che ti consentano di calcolare statistiche aggregate sugli oggetti contenuti in ciascun bucket. Ad esempio, se raccogli le dimensioni totali degli oggetti, le dimensioni medie degli oggetti e il conteggio degli oggetti, puoi stimare il tempo e il costo necessari per eseguire la migrazione da un bucket Amazon S3 a un bucket Cloud Storage.
Per creare l'inventario dei bucket Amazon S3 e raccogliere i punti dati relativi ai bucket Amazon S3, puoi implementare meccanismi e processi di raccolta dei dati che si basano su strumenti AWS, come i seguenti:
- Strumenti di monitoraggio di Amazon S3
- S3 Analytics
- Aggregazione dei dati multi-account e multiregione AWS
- API AWS
- Strumenti per sviluppatori AWS
- L'interfaccia a riga di comando AWS
Per aiutarti a evitare problemi durante la migrazione e a stimare l'impegno necessario per la migrazione, ti consigliamo di valutare in che modo le funzionalità dei bucket Amazon S3 vengono mappate a funzionalità simili dei bucket Cloud Storage. La tabella seguente riassume questa mappatura.
Come indicato in precedenza, le funzionalità elencate nella tabella precedente potrebbero sembrare simili quando le confronti. Tuttavia, le differenze nella progettazione e nell'implementazione delle funzionalità nei due provider cloud possono avere effetti significativi sulla migrazione da Amazon S3 a Cloud Storage.
Tipi di bucket Amazon S3 specializzati
Per aiutarti a evitare problemi durante la migrazione e a stimare l'impegno necessario per casi d'uso specializzati, ti consigliamo di valutare in che modo queste funzionalità dei bucket Amazon S3 vengono mappate ai servizi Google Cloud . La tabella seguente riassume questa mappatura.
| Funzionalità Amazon S3 | Funzionalità di Cloud Storage |
|---|---|
| Tabelle S3 | BigLake o BigQuery |
| Vettori S3 | Vector Search |
| Metadati S3 | Storage Insights |
Crea un inventario degli oggetti archiviati nel tuo archivio di oggetti Amazon S3
Dopo aver creato l'inventario dei bucket Amazon S3, ti consigliamo di creare un inventario degli oggetti archiviati in questi bucket utilizzando lo strumento Amazon S3 Inventory.
Per creare l'inventario degli oggetti Amazon S3, considera quanto segue per ogni oggetto:
- Nome oggetto Amazon S3
- Dimensioni degli oggetti Amazon S3
- Metadati degli oggetti Amazon S3
- Risorse secondarie degli oggetti Amazon S3
- Versioni degli oggetti Amazon S3 e se devi eseguire la migrazione di queste versioni
- URL prefirmati degli oggetti Amazon S3
- Trasformazioni degli oggetti Amazon S3
- Tag degli oggetti Amazon S3
- Classi di archiviazione degli oggetti Amazon S3
- Archiviazione di oggetti Amazon S3
- Checksum degli oggetti Amazon S3
Ti consigliamo inoltre di raccogliere dati sugli oggetti Amazon S3 per capire con quale frequenza tu e i tuoi workload create, aggiornate ed eliminate gli oggetti Amazon S3.
Per aiutarti a evitare problemi durante la migrazione e a stimare l'impegno necessario per la migrazione, ti consigliamo di valutare in che modo le funzionalità degli oggetti Amazon S3 vengono mappate a funzionalità degli oggetti Cloud Storage simili. La tabella seguente riassume questa mappatura.
Come indicato in precedenza, le funzionalità elencate nella tabella precedente potrebbero sembrare simili quando le confronti. Tuttavia, le differenze nella progettazione e nell'implementazione delle funzionalità nei due provider cloud possono avere effetti significativi sulla migrazione da Amazon S3 a Cloud Storage.
Completa la valutazione
Dopo aver creato gli inventari dal tuo ambiente Amazon S3, completa il resto delle attività della fase di valutazione, come descritto in Esegui la migrazione a Google Cloud: valuta e scopri i tuoi workload.
Pianifica e crea le tue basi
Nella fase di pianificazione e creazione, esegui il provisioning e la configurazione dell'infrastruttura per:
- Supporta i tuoi workload nel tuo ambiente Google Cloud .
- Collega l'ambiente di origine e l'ambiente Google Cloud per completare la migrazione.
La fase di pianificazione e creazione è composta dalle seguenti attività:
- Crea una gerarchia delle risorse.
- Configura Identity and Access Management (IAM) di Google Cloud.
- Configura la fatturazione.
- Configura la connettività di rete.
- Rafforza la sicurezza.
- Configura logging, monitoraggio e avvisi.
Per saperne di più su ciascuna di queste attività, consulta Esegui la migrazione a Google Cloud: pianifica e crea le tue basi.
Esegui la migrazione di dati e workload da Amazon S3 a Cloud Storage
Per eseguire la migrazione dei dati da Amazon S3 a Cloud Storage, ti consigliamo di progettare un piano di migrazione dei dati seguendo le indicazioni riportate in Esegui la migrazione a Google Cloud: trasferisci i tuoi set di dati di grandi dimensioni. Questo documento consiglia di utilizzare Storage Transfer Service, un prodotto Google Cloud che consente di eseguire la migrazione dei dati da diverse origini a Cloud Storage, ad esempio da ambienti on-premise o da altri provider di spazio di archiviazione sul cloud. Storage Transfer Service supporta diversi tipi di job di trasferimento di dati, ad esempio:
- Job di trasferimento eseguiti una sola volta, che trasferiscono i dati da Amazon S3 o da altre origini supportate a Cloud Storage on demand.
- Job di trasferimento pianificati, che trasferiscono i dati da Amazon S3 o da altre origini supportate a Cloud Storage in base a una pianificazione.
- Job di trasferimento basati su eventi, che trasferiscono automaticamente i dati quando Amazon S3 invia notifiche di eventi Amazon S3 ad Amazon Simple Queue Service (SQS).
Per implementare un piano di migrazione dei dati, puoi configurare uno o più job di trasferimento dei dati. Ad esempio, per ridurre la durata delle finestre di cutover durante la migrazione, puoi implementare una strategia di migrazione dei dati con replica continua come segue:
- Configura un job di trasferimento da eseguire una sola volta per copiare i dati da un bucket Amazon S3 al bucket Cloud Storage.
- Esegui controlli di convalida e coerenza dei dati per confrontare i dati nel bucket Amazon S3 con i dati copiati nel bucket Cloud Storage.
- Configura i job di trasferimento basati su eventi per trasferire automaticamente i dati dal bucket Amazon S3 al bucket Cloud Storage quando i contenuti del bucket Amazon S3 cambiano.
- Interrompi i workload e i servizi che hanno accesso ai dati di cui viene eseguita la migrazione (ovvero ai dati coinvolti nel passaggio precedente).
Rifattorizza i workload per utilizzare Cloud Storage anziché Amazon S3. Puoi rifattorizzare i workload utilizzando uno dei seguenti approcci o utilizzandoli in sequenza:
Semplice migrazione da Amazon S3 a Cloud Storage. In una migrazione semplice, utilizzi gli strumenti e le librerie esistenti che generano richieste REST autenticate ad Amazon S3 per generare richieste autenticate a Cloud Storage.
Ad esempio, Cloud Storage supporta l'eliminazione di un massimo di 1000 oggetti in una singola richiesta utilizzando l'API XML di eliminazione di più oggetti. Questa funzionalità è compatibile con l'API DeleteObjects di Amazon S3.
Esegui la migrazione completa da Amazon S3 a Cloud Storage. In una migrazione completa, puoi utilizzare tutte le funzionalità di Cloud Storage, inclusi più progetti e OAuth 2.0 per l'autenticazione.
Attendi che la replica sincronizzi completamente Cloud Storage con Amazon S3.
Avvia i workload.
Quando non hai più bisogno dell'ambiente Amazon S3 come opzione di riserva, ritiralo.
Storage Transfer Service può conservare determinati metadati quando esegui la migrazione di oggetti da un'origine supportata a Cloud Storage. Ti consigliamo di valutare se Storage Transfer Service può eseguire la migrazione dei metadati di Amazon S3 che ti interessano.
Quando progetti il piano di migrazione dei dati, ti consigliamo di valutare anche i costi del traffico in uscita dalla rete AWS e i costi di Amazon S3. Ad esempio, considera le seguenti opzioni per trasferire i dati:
- Tramite la rete internet pubblica.
- Utilizzando un link di interconnessione.
- Utilizzando Amazon CloudFront.
L'opzione scelta può influire sui costi di uscita dalla rete AWS e sui costi di Amazon S3. L'opzione può anche influire sull'impegno e sulle risorse necessari per eseguire il provisioning e la configurazione dell'infrastruttura. Per ulteriori informazioni sui costi, consulta le seguenti risorse:
- Trasferimento da Amazon S3 a Cloud Storage: opzioni di traffico in uscita
- Informazioni sugli addebiti per il trasferimento di dati nella documentazione di AWS
- Prezzi di Amazon S3
Quando esegui la migrazione dei dati da Amazon S3 a Cloud Storage, ti consigliamo di utilizzare i Controlli di servizio VPC per creare un perimetro che neghi esplicitamente la comunicazione tra i servizi Google Cloud , a meno che non siano autorizzati.
Ottimizza l'ambiente Google Cloud
L'ottimizzazione è l'ultima fase della migrazione. In questa fase, esegui l'iterazione delle attività di ottimizzazione finché l'ambiente di destinazione non soddisfa i requisiti di ottimizzazione. I passaggi di ogni iterazione sono i seguenti:
- Valuta l'ambiente, i team e il ciclo di ottimizzazione attuali.
- Stabilisci i requisiti e gli obiettivi di ottimizzazione.
- Ottimizza l'ambiente e i team.
- Ottimizza il ciclo di ottimizzazione.
Ripeti questa sequenza fino a raggiungere i tuoi obiettivi di ottimizzazione.
Per saperne di più sull'ottimizzazione dell'ambiente Google Cloud , consulta Esegui la migrazione a Google Cloud: ottimizza l'ambiente e Well-Architected Framework diGoogle Cloud : ottimizzazione delle prestazioni.
Passaggi successivi
- Scopri altri percorsi di migrazione da AWS a Google Cloud .
- Scopri come confrontare i servizi AWS e Azure con Google Cloud.
- Scopri dove trovare assistenza per le migrazioni.
- Segui il corso di formazione di Google Skills sulla migrazione a Google Cloud.
- Per ulteriori architetture di riferimento, diagrammi e best practice, esplora Cloud Architecture Center.
Collaboratori
Autore: Marco Ferrari | Cloud Solutions Architect