Cuotas y límites del sistema para Lakehouse sin fronteras

Los recursos de Lakehouse sin fronteras tienen cuotas configurables y límites fijos del sistema para ayudar a controlar el consumo de recursos y mantener la estabilidad del servicio. Las cuotas establecen asignaciones de referencia que puedes ajustar solicitando un aumento o usando el ajustador de cuotas, mientras que los límites del sistema son umbrales operativos fijos que no se pueden cambiar.

Para obtener información sobre cómo funcionan las cuotas a nivel de proyecto de Google Cloud y cómo hacer un seguimiento del consumo, consulta la descripción general de las cuotas de Cloud.

Obtén los nombres de las métricas de cuotas y límites del sistema

Las cuotas y los límites del sistema tienen dos tipos de nombres: nombres visibles y nombres de métricas. Los nombres visibles tienen espacios y mayúsculas que facilitan su lectura para las personas. Es más probable que los nombres de las métricas estén en minúsculas y delimitados por guiones bajos en lugar de espacios; el formato exacto depende del servicio.

En las siguientes instrucciones, se muestra cómo obtener nombres de métricas para cuotas y límites del sistema con la consola de Google Cloud o Google Cloud CLI.

Console

  1. En la consola de Google Cloud , ve a la página Identity and Access Management (IAM) y administración > Cuotas y límites del sistema:

    Ir a Cuotas y límites del sistema

    En la tabla de esta página, se muestran las cuotas y los límites del sistema que tienen uso o valores ajustados, y una entrada de referencia para otras cuotas. La entrada de referencia tiene la palabra "predeterminada" entre paréntesis al final de la lista en la columna Nombre. Por ejemplo, SetIAM Policy requests per minute per region (default) es la entrada de referencia para la cuota SetIamPolicyRequestsPerMinutePerProject.

  2. Si no ves la columna Métrica, sigue estos pasos.

    1. Haz clic en Opciones de visualización de columnas.
    2. Selecciona Métrica.
    3. Haz clic en Aceptar. La columna Métrica aparecerá en la tabla.

    En la columna Métrica, se muestran los nombres de las métricas. Para filtrar los resultados, ingresa el nombre o el valor de una propiedad en el campo junto a Filtro.

gcloud

Para obtener los nombres de las métricas de un servicio con gcloud CLI, ejecuta el comando quotas info list. Para omitir las líneas que no enumeran nombres de métricas, pasa el resultado a un comando como grep con metric: como término de búsqueda o usa la marca --format de gcloud CLI:

gcloud quotas info list --project=PROJECT_ID_OR_NUMBER \
    --service=SERVICE_NAME --format="value(metric)"

Reemplaza lo siguiente:

  • PROJECT_ID_OR_NUMBER: el ID del proyecto o número de proyecto.
  • SERVICE_NAME: Es el nombre del servicio cuyas métricas de cuota deseas ver, por ejemplo, el nombre del servicio de Compute Engine es compute.googleapis.com. Incluye la parte googleapis.com del nombre del servicio.

Solicita un aumento de la cuota

Para ajustar la mayoría de las cuotas, usa la consola de Google Cloud . Para obtener más información, consulta Solicita un ajuste de cuota.

Cuotas

Las siguientes cuotas se aplican a Lakehouse:

Catálogo de tiempo de ejecución de Lakehouse

Los siguientes límites se aplican al catálogo de tiempo de ejecución de Lakehouse:

Límite Predeterminada Notas
Modificaciones de la tabla por día 1,500 modificaciones

Tu proyecto puede realizar hasta 1,500 modificaciones de tabla por día. Un trabajo de carga, un trabajo de copia o un trabajo de consulta que agrega o reemplaza datos de la tabla cuenta como una modificación de la tabla. Este límite no puede cambiarse.

Las sentencias DML se excluyen y no se consideran en la cantidad de modificaciones de tablas por día.

Los datos de transmisión se excluyen y no se consideran en la cantidad de modificaciones de tablas por día.
Frecuencia máxima de operaciones de actualización de metadatos de tabla por tabla 5 operaciones cada 10 segundos Tu proyecto puede realizar hasta cinco operaciones de actualización de metadatos de tablas cada 10 segundos por tabla. Este límite se aplica a todas las operaciones de actualización de metadatos de la tabla, realizadas por: Este límite incluye el total combinado de todos los trabajos de carga, de copia y de consulta que anexan o reemplazan una tabla de destino o que usan una declaración DML, DELETE, INSERT, MERGE, TRUNCATE TABLE o UPDATE para escribir datos en una tabla. Ten en cuenta que, aunque las sentencias DML se toman en cuenta en este límite, no están sujetas a él si se alcanza. Las operaciones DML tienen límites de frecuencia dedicados.

Si excedes este límite, recibirás un mensaje de error como Exceeded rate limits: too many table update operations for this table. Este error es transitorio. puedes volver a intentarlo con una retirada exponencial.

Para identificar las operaciones que se consideran en este límite, puedes inspeccionar tus registros. Consulta Soluciona problemas de errores de cuota para obtener información sobre cómo diagnosticar y resolver este error.

Cantidad máxima de columnas por tabla 10,000 columnas Cada tabla, resultado de la consulta o definición de la vista puede tener hasta 10,000 columnas. Esto incluye columnas anidadas y repetidas.

Acceso a datos multinube

Cuota Valor
Cantidad máxima total de espacios de nombres en un catálogo federado 100 espacios de nombres
Cantidad máxima de tablas por espacio de nombres en un catálogo federado 300 tablas por espacio de nombres
Cantidad máxima total de tablas en un catálogo federado 10,000 tablas
Cantidad máxima de filtros de espacio de nombres en un catálogo federado 16 filtros de espacio de nombres

Límites del sistema

En la siguiente tabla, se enumeran los límites del sistema que se aplican a Lakehouse y el valor de cada límite del sistema:

Límite del sistema Valor
Cantidad máxima de tablas de Apache Iceberg administradas por Lakehouse por bucket de Cloud Storage que admite un análisis de descubrimiento 1,000 tablas por bucket