Migration de données non structurées et de stockage

Cette page fournit des conseils d'architecture et des stratégies de migration pour transférer des ensembles de données non structurés, un stockage d'objets et des partages de fichiers vers Cloud Storage sur Google Cloud.

Si vous êtes architecte cloud, ingénieur de données ou administrateur de stockage, utilisez les informations de cette page pour évaluer les méthodes de transfert de données, choisir des outils de transfert en ligne ou hors connexion, garantir l'intégrité des données et optimiser la bande passante réseau pendant la migration.

Avant de lire cette page, vous devez connaître la taille totale de vos ensembles de données sources, la bande passante de transfert réseau disponible et vos délais de migration cibles.

Choisir une méthode de transfert de données

Lorsque vous planifiez votre transfert de données, utilisez le tableau suivant pour choisir une méthode de transfert en fonction de la taille de votre ensemble de données et de la bande passante réseau :

Scénario Taille des ensembles de données Solution recommandée Remarques
Transfert de données en ligne sur un réseau à haute bande passante Téraoctets > pétaoctets Service de transfert de stockage Transfert en ligne continu et automatisé avec validation de la somme de contrôle.
Transfert de données hors connexion avec une bande passante limitée Plusieurs pétaoctets Transfer Appliance Expédition d'un appareil physique sécurisé pour contourner les contraintes réseau.

Transfert de données en ligne à l'aide du service de transfert de stockage

Le service de transfert de stockage automatise les transferts de données en ligne depuis un stockage sur site, des systèmes de fichiers POSIX ou des fournisseurs cloud tiers vers Cloud Storage.

Principales fonctionnalités du service de transfert de stockage

Le service de transfert de stockage offre les fonctionnalités suivantes :

  • Évolutivité gérée : effectuez un scaling automatique des transferts sans provisionner ni gérer de serveurs locaux.
  • Vérification de l'intégrité des données : vérifiez automatiquement l'exactitude des données pendant le transfert à l'aide de sommes de contrôle MD5 de bout en bout.
  • Synchronisation incrémentielle continue : synchronisez les fichiers modifiés en continu pour minimiser les temps d'arrêt lors du basculement.

Pour en savoir plus sur le workflow de transfert de bout en bout, consultez Créer des transferts.

Transfert de données hors connexion à l'aide de Transfer Appliance

Pour les ensembles de données volumineux où la bande passante réseau est limitée, utilisez Transfer Appliance pour envoyer physiquement des données à Google Cloud.

Étapes suivantes