Migração de dados não estruturados e armazenamento

Nesta página, fornecemos orientações de arquitetura e estratégias de migração para transferir conjuntos de dados não estruturados, repositórios de objetos e compartilhamentos de arquivos para o Cloud Storage no Google Cloud.

Se você é arquiteto de nuvem, engenheiro de dados ou administrador de armazenamento, use as informações desta página para avaliar métodos de transferência de dados, escolher ferramentas de transferência on-line ou off-line, garantir a integridade dos dados e otimizar a largura de banda da rede durante a migração.

Antes de ler esta página, você precisa saber o tamanho total dos conjuntos de dados de origem, a largura de banda de transferência de rede disponível e os cronogramas de migração de destino.

Escolher um método de transferência de dados

Ao planejar a transferência de dados, use a tabela a seguir para escolher um método de transferência com base no tamanho do conjunto de dados e na largura de banda da rede:

Cenário Tamanho do conjunto de dados Solução recomendada Considerações
Transferência de dados on-line em rede de alta largura de banda De terabytes a petabytes Serviço de transferência do Cloud Storage Transferência on-line automatizada e contínua com verificação de checksum.
Transferência de dados off-line com largura de banda limitada Vários petabytes Transfer Appliance Envio seguro de dispositivos físicos para ignorar restrições de rede.

Transferência de dados on-line usando o Serviço de transferência do Cloud Storage

O Serviço de transferência do Cloud Storage automatiza as transferências de dados on-line de armazenamento local, sistemas de arquivos POSIX ou provedores de nuvem de terceiros para o Cloud Storage.

Principais recursos do Serviço de transferência do Cloud Storage

O Serviço de transferência do Cloud Storage oferece os seguintes recursos:

  • Escalonabilidade gerenciada: escalone as transferências automaticamente sem provisionar ou gerenciar servidores locais.
  • Verificação de integridade de dados: verifique a precisão dos dados automaticamente durante a transferência usando checksums MD5 de ponta a ponta.
  • Sincronização incremental contínua: sincronize arquivos modificados continuamente para minimizar o tempo de inatividade da transição.

Para informações sobre o fluxo de trabalho de transferência completo, consulte Criar transferências.

Transferência de dados off-line usando o Transfer Appliance

Para grandes conjuntos de dados em que a largura de banda da rede é limitada, use o Transfer Appliance para enviar dados fisicamente para o Google Cloud.

A seguir