O Lakehouse sem fronteiras permite que você use o Interconexão entre nuvens para rotear leituras de dados de consulta remota e atualização de metadados em segundo plano entre provedores de nuvem. Neste documento, descrevemos os recursos e as classificações compatíveis do Interconexão entre nuvens e mapeamos as regiões da Amazon Web Services (AWS) para as regiões do Google Cloud para ajudar você a otimizar o desempenho das consultas.
Recursos compatíveis do Interconexão entre nuvens
O Lakehouse é compatível com o roteamento de leituras de dados de consulta, atualização de metadados em segundo plano ou ambos pelo Interconexão entre nuvens, dependendo se os requisitos de isolamento de rede e custo se aplicam a leituras de repositório de objetos, endpoints de catálogo do plano de controle ou tráfego entre nuvens de ponta a ponta:
- Transporte de consultas (
--service-directory-name): encaminha as leituras de consulta para o repositório de objetos remoto (Amazon S3 na AWS ou Microsoft Azure Data Lake Storage Gen2 no Azure) para ajudar a reduzir os custos de saída e fornecer uma capacidade de processamento de consulta previsível. - Atualização de metadados em segundo plano (
--metadata-service-directory-name): roteia solicitações de autenticação e atualização de metadados em segundo plano do plano de controle do catálogo do ambiente de execução do Lakehouse para endpoints do AWS PrivateLink ou do Azure Private Link do catálogo remoto. - Catálogos e nuvens compatíveis:
# disableFinding(CORRECTION_VARIABLE_CLOUD) #
Catálogo de dados do AWS Glue: AWS (Interconexão entre nuvens ou Interconexão entre nuvens por parceiro).- Catálogo do Unity do Databricks: AWS (Interconexão entre nuvens ou Interconexão entre nuvens por parceiro) e Azure (Interconexão entre nuvens).
- Catálogo do Snowflake Horizon: AWS (Interconexão entre nuvens ou Interconexão entre nuvens por parceiro) e Azure (Interconexão entre nuvens).
Para implantações do Azure, crie seu catálogo federado na região doGoogle Cloud mais próxima da região do Azure e do local de interconexão. Para locais de peering do Azure compatíveis, consulte Escolher locais para Interconexão entre nuvens para Azure.
Classificações do Interconnect
O Lakehouse é compatível com os dois tipos de conexões do Interconexão entre nuvens:
- Cross-Cloud Interconnect (parceiro): fornece conectividade pré-provisionada entre o Google Cloud e as regiões designadas da AWS por um parceiro compatível. Para mais informações, consulte a visão geral do Partner Interconexão entre nuvens para parceiros de nuvem gerenciada.
- Cross-Cloud Interconnect (dedicado): fornece uma conexão física direta entre a rede do Google e seu provedor de serviços de nuvem. O Interconexão entre nuvens é compatível com todas as regiões listadas da AWS e do Azure. Para mais informações, consulte a Visão geral do Cross-Cloud Interconnect.
Considerações
- Na tabela de mapeamento de regiões, a coluna Baixa latência indica pares de regiões em que a região da AWS, a instalação de interconexão e a região do Google Cloud mais próxima estão na mesma área metropolitana geográfica.
- Se possível, escolha um par de regiões com Baixa latência ou Cross-Cloud Interconnect (parceiro) para garantir o desempenho ideal ao federar grandes conjuntos de dados entre nuvens.
Mapeamento de regiões da AWS para o Google Cloud
| Nome da região da AWS | Região da AWS (área metropolitana) | Nome da região Google Cloud mais próxima | Área metropolitana da região Google Cloud mais próxima | Interconexão entre nuvens (por parceiro) | Baixa latência | As 3 principais regiões Google Cloud alternativas |
|---|---|---|---|---|---|---|
us-east-1 |
N. Virgínia | us-east4 |
Ashburn, VA | ✓ | ✓ | us-east1, us-east5, us-central1 |
us-east-2 |
Ohio | us-east5 |
Columbus, OH | ✓ | us-east4, us-east1, us-central1 |
|
us-west-1 |
N. Califórnia | us-west2 |
Los Angeles, CA | ✓ | us-west4, us-west1, us-west3 |
|
us-west-2 |
Oregon | us-west1 |
The Dalles, OR | ✓ | ✓ | us-west3, us-west4, us-west2 |
ca-central-1 |
Montreal | northamerica-northeast1 |
Montreal | ✓ | northamerica-northeast2, us-east4, us-east5 |
|
sa-east-1 |
São Paulo | southamerica-east1 |
São Paulo | ✓ | southamerica-west1, us-east1, us-south1 |
|
eu-west-1 |
Irlanda | europe-west1 |
Bélgica | europe-west2, europe-west9, europe-west4 |
||
eu-west-2 |
Londres | europe-west2 |
Londres | ✓ | ✓ | europe-west1, europe-west9, europe-west4 |
eu-west-3 |
Paris | europe-west9 |
Paris | ✓ | europe-west1, europe-west2, europe-west3 |
|
eu-central-1 |
Frankfurt | europe-west3 |
Frankfurt | ✓ | ✓ | europe-west4, europe-west1, europe-west6 |
eu-central-2 |
Zurique | europe-west6 |
Zurique | europe-west8, europe-west12, europe-west3 |
||
eu-north-1 |
Estocolmo | europe-north2 |
Estocolmo | ✓ | ✓ | europe-north1, europe-west4, europe-central2 |
eu-south-1 |
Milão | europe-west8 |
Milão | europe-west12, europe-west6, europe-west3 |
||
eu-south-2 |
Espanha (Aragão) | europe-southwest1 |
Madri | europe-west9, europe-west1, europe-west8 |
||
me-central-1 |
Emirados Árabes Unidos | me-central1 |
Doha | me-central2, me-west1, asia-south1 |
||
me-south-1 |
Barein | me-central2 |
Damã | me-central1, me-west1, asia-south1 |
||
af-south-1 |
Cidade do Cabo | europe-southwest1 |
Madri | me-central2, me-west1, europe-west1 |
||
ap-east-1 |
Hong Kong | asia-east2 |
Hong Kong | ✓ | asia-east1, asia-southeast3, asia-southeast1 |
|
ap-northeast-1 |
Tóquio | asia-northeast1 |
Tóquio | ✓ | asia-northeast2, asia-northeast3, asia-east1 |
|
ap-northeast-2 |
Seul | asia-northeast3 |
Seul | ✓ | asia-northeast2, asia-northeast1, asia-east1 |
|
ap-northeast-3 |
Osaka | asia-northeast2 |
Osaka | ✓ | asia-northeast1, asia-northeast3, asia-east1 |
|
ap-south-1 |
Mumbai | asia-south1 |
Mumbai | ✓ | asia-south2, me-central1, asia-southeast1 |
|
ap-south-2 |
Hyderabad | asia-south2 |
Délhi | asia-south1, asia-southeast1, me-central1 |
||
ap-southeast-1 |
Singapura | asia-southeast1 |
Singapura | ✓ | ✓ | asia-southeast2, asia-southeast3, asia-east1 |
ap-southeast-2 |
Sydney | australia-southeast1 |
Sydney | ✓ | ✓ | australia-southeast2, asia-southeast2, asia-southeast1 |
ap-southeast-3 |
Jacarta | asia-southeast2 |
Jacarta | ✓ | asia-southeast1, asia-southeast3, australia-southeast1 |
A seguir
- Configure uma conexão entre nuvens para AWS Glue, Databricks Unity Catalog, Snowflake Horizon Catalog, Workday Data Lake ou SAP Business Data Cloud.