Soluciona problemas habituales de Lakehouse sin bordes

Puedes diagnosticar y resolver errores en Lakehouse sin límites y sus recursos asociados, incluidos los problemas con las consultas de tablas de metadatos, los límites de tamaño de los archivos metadata.json y las configuraciones de catálogos multirregionales. Abordar estos problemas te ayuda a restablecer las operaciones de las tablas y la ejecución de consultas en tus cargas de trabajo de lakehouse.

No se pueden consultar las tablas de metadatos

Este problema se produce cuando consultas tablas de metadatos, como .snapshots o .files, para tus tablas de Apache Iceberg compatibles con el catálogo de tiempo de ejecución de Lakehouse en BigQuery con un identificador de nombre de cinco partes.

Para resolver este problema, consulta estas tablas con Apache Spark.

Límite de tamaño del archivo metadata.json

El tamaño del archivo metadata.json de Apache Iceberg está limitado a 1 MB. Este límite se aplica al archivo de metadatos que hace un seguimiento de las instantáneas de tablas, los esquemas y las especificaciones de partición. Si tu archivo de metadatos supera este tamaño, es posible que encuentres errores cuando realices operaciones de tabla a través del extremo del catálogo de REST de Apache Iceberg.

Para resolver este problema, comunícate con tu equipo de cuentas de Google y solicita un aumento del límite.

Errores NOT_FOUND cuando se consultan catálogos multirregionales

Este problema se produce cuando creas un catálogo en el catálogo de entorno de ejecución de Lakehouse con un bucket de Cloud Storage multirregional sin especificar una ubicación principal y, luego, intentas consultar el catálogo especificando una región virtual de BigQuery (como US o EU).

Cuando se crea un catálogo con un bucket multirregional, sus metadatos se almacenan en ubicaciones regionales específicas dentro del alcance geográfico de la multirregión, en lugar de en la región virtual de BigQuery correspondiente. Si fuerzas la ejecución de una consulta en una región virtual en la que no están presentes los metadatos, la consulta falla con un error NOT_FOUND.

Para resolver este problema, especifica la ubicación principal (por ejemplo, US o EU) cuando crees el catálogo. Para obtener más información, consulta Especifica regiones principales para las multirregiones de EE.UU. y la UE.