Le risorse Borderless Lakehouse hanno quote configurabili e limiti di sistema fissi per aiutare a controllare il consumo di risorse e mantenere la stabilità del servizio. Le quote impostano allocazioni di base che puoi modificare richiedendo un aumento o utilizzando l'aggiustamento delle quote, mentre i limiti di sistema sono soglie operative fisse che non possono essere modificate.
Per scoprire come funzionano le quote a livello di progetto Google Cloud e come monitorare il consumo, consulta la panoramica di Cloud Quotas.
Ottieni i nomi delle metriche relative alle quote e ai limiti di sistema
Le quote e i limiti di sistema hanno due tipi di nomi: nomi visualizzati e nomi delle metriche. I nomi visualizzati contengono spazi e lettere maiuscole che li rendono più facili da leggere per le persone. I nomi delle metriche hanno maggiori probabilità di essere in minuscolo e delimitati da trattini bassi anziché da spazi; il formato esatto dipende dal servizio.
Le seguenti istruzioni mostrano come ottenere i nomi delle metriche per le quote e i limiti di sistema utilizzando la console Google Cloud o Google Cloud CLI.
Console
Nella console Google Cloud , vai alla pagina Identity and Access Management (IAM) e amministrazione > Quote e limiti di sistema:
Vai a Quote e Limiti di sistema
La tabella in questa pagina mostra le quote e i limiti di sistema che hanno un utilizzo o valori modificati, nonché una voce di riferimento per altre quote. La voce di riferimento contiene la parola "default" tra parentesi alla fine dell'elenco nella colonna Nome. Ad esempio,
SetIAM Policy requests per minute per region (default)è la voce di riferimento per la quotaSetIamPolicyRequestsPerMinutePerProject.Se non vedi la colonna Metrica, segui questi passaggi.
- Fai clic su Opzioni di visualizzazione delle colonne.
- Seleziona Metrica.
- Fai clic su OK. La colonna Metrica viene visualizzata nella tabella.
La colonna Metrica mostra i nomi delle metriche. Per filtrare i risultati, inserisci il nome o il valore di una proprietà nel campo accanto a Filtro.
gcloud
Per ottenere i nomi delle metriche per un servizio utilizzando gcloud CLI, esegui il comando quotas info list. Per saltare le righe che non elencano i nomi delle metriche, passa l'output a un comando come grep con metric: come termine di ricerca o utilizza il flag --format di gcloud CLI:
gcloud quotas info list --project=PROJECT_ID_OR_NUMBER \
--service=SERVICE_NAME --format="value(metric)"
Sostituisci quanto segue:
PROJECT_ID_OR_NUMBER: l'ID progetto o il numero del progetto.SERVICE_NAME: il nome del servizio di cui vuoi visualizzare le metriche della quota, ad esempio il nome del servizio per Compute Engine ècompute.googleapis.com. Includi la partegoogleapis.comdel nome del servizio.
Richiedi un aumento della quota
Per modificare la maggior parte delle quote, utilizza la console Google Cloud . Per ulteriori informazioni, consulta Richiedi un aggiustamento delle quote.
Quote
Le seguenti quote si applicano a Lakehouse:
Catalogo di runtime Lakehouse
Al catalogo di runtime Lakehouse si applicano i seguenti limiti:
| Limite | Predefinito | Note |
|---|---|---|
| Modifiche delle tabelle al giorno | 1500 modifiche | Il tuo progetto può apportare fino a 1500 modifiche alla tabella per tabella al giorno. Un job di caricamento, un job di copia o un job di query che aggiunge o sovrascrive i dati della tabella viene conteggiato come una modifica alla tabella. Questo limite non può essere modificato. Le istruzioni DML sono escluse e non vengono conteggiate nel numero di modifiche alla tabella al giorno. I dati in streaming sono esclusi e non vengono conteggiati nel numero di modifiche alla tabella al giorno. |
| Frequenza massima delle operazioni di aggiornamento dei metadati della tabella per tabella | 5 operazioni ogni 10 secondi |
Il tuo progetto può eseguire fino a cinque operazioni di aggiornamento dei metadati della tabella ogni 10 secondi per tabella. Questo limite si applica a tutte le operazioni di aggiornamento dei metadati della tabella, eseguite da:
DELETE, INSERT, MERGE,
TRUNCATE TABLE o UPDATE per scrivere
dati in una tabella. Tieni presente che, sebbene le istruzioni DML vengano conteggiate ai fini di questo limite, non sono soggette a questo limite se viene raggiunto. Le operazioni DML hanno limiti di frequenza dedicati.
Se superi questo limite, ricevi un messaggio di errore simile a
Per identificare le operazioni che vengono conteggiate ai fini di questo limite, puoi esaminare i log. Consulta Risolvi gli errori relativi alle quote per indicazioni su come diagnosticare e risolvere questo errore. |
| Numero massimo di colonne per tabella | 10.000 colonne | Ogni tabella, risultato di query o definizione di vista può avere fino a 10.000 colonne. Sono incluse le colonne nidificate e ripetute. |
Accesso ai dati cross-cloud
| Quota | Valore |
|---|---|
| Numero totale massimo di spazi dei nomi in un catalogo federato | 100 namespace |
| Numero massimo di tabelle per spazio dei nomi in un catalogo federato | 300 tabelle per spazio dei nomi |
| Numero totale massimo di tabelle in un catalogo federato | 10.000 tabelle |
| Numero massimo di filtri dello spazio dei nomi in un catalogo federato | 16 filtri per spazi dei nomi |
Limiti del sistema
La tabella seguente elenca i limiti di sistema che si applicano a Lakehouse e il valore di ciascun limite di sistema:
| Limite di sistema | Valore |
|---|---|
| Numero massimo di tabelle Apache Iceberg gestite da Lakehouse per bucket Cloud Storage supportate da una scansione di rilevamento | 1000 tabelle per bucket |