Questo documento elenca le quote che si applicano a Dataplex Universal Catalog.
Google Cloud utilizza le quote per garantire l'equità e ridurre i picchi di utilizzo e disponibilità delle risorse. Una quota limita la quantità di una Google Cloud risorsa che Google Cloud il progetto può utilizzare. Le quote si applicano a una serie di tipi di risorse, inclusi hardware, software e componenti di rete. Ad esempio, le quote possono limitare il numero di chiamate API a un servizio, il numero di bilanciatori del carico utilizzati contemporaneamente dal tuo progetto o il numero di progetti che puoi creare. Le quote proteggono la community degli utentiGoogle Cloud impedendo il sovraccarico dei servizi. Le quote ti aiutano inoltre a gestire le tue Google Cloud risorse.
Il sistema delle quote di Cloud esegue le seguenti operazioni:
- Monitora il tuo consumo di Google Cloud prodotti e servizi
- Limita il consumo di queste risorse
- Fornisce un modo per richiedere modifiche al valore della quota e automatizzare gli aggiustamenti della quota
Nella maggior parte dei casi, quando provi a utilizzare una risorsa per un volume maggiore di quello consentito dalla quota, il sistema blocca l'accesso alla risorsa e l'attività che stai tentando di eseguire non va a buon fine.
In genere, le quote si applicano a livello di Google Cloud progetto. L'utilizzo di una risorsa in un progetto non influisce sulla quota disponibile in un altro progetto. All'interno di un progetto Google Cloud , le quote vengono condivise tra tutte le applicazioni e gli indirizzi IP.
Per maggiori informazioni, consulta la panoramica delle quote di Cloud.
Esistono anche limiti di sistema per le risorse Dataplex Universal Catalog. I limiti di sistema non possono essere modificati.
Dataplex Universal Catalog applica quote al numero di richieste API durante un periodo di tempo specifico e al numero di risorse che possono essere create in un progetto. Le quote ti proteggono da picchi di utilizzo imprevisti e da servizi sovraccarichi. Scopri di più sul motivo per cui vengono applicate le quote.
Le tue esigenze di quota potrebbero aumentare man mano che utilizzi Dataplex Universal Catalog. Se una quota è troppo bassa per soddisfare le tue esigenze o prevedi un aumento imminente dell'utilizzo, puoi richiedere un aumento della quota in modo proattivo.
Quote per le richieste API Dataplex
L'API Dataplex applica quote per la gestione delle risorse e le richieste di ricerca di Dataplex Universal Catalog a diversi livelli, indipendentemente dalla loro origine. Sono incluse le richieste provenienti direttamente dalle chiamate API, dalle librerie client, Google Cloud CLI e dalla console. Google Cloud
Le seguenti quote si applicano alle richieste Dataplex Universal Catalog:
| Quota | Predefinito |
|---|---|
| Richieste di lettura per voci e aspetti per progetto per regione al minuto | 6000 |
| Richieste di scrittura per voci e aspetti per progetto per regione al minuto | 1500 |
| Richieste di lettura per tipi di aspetto, tipi di voci e gruppi di voci per progetto per utente al minuto | 100 |
| Richieste di lettura per tipi di aspetto, tipi di voci e gruppi di voci per progetto al minuto | 200 |
| Richieste di scrittura per tipi di aspetto, tipi di voci e gruppi di voci per progetto per utente al minuto | 10 |
| Richieste di scrittura per tipi di aspetto, tipi di voci e gruppi di voci per progetto al minuto | 20 |
| Richieste di ricerca per progetto per utente al minuto | 900 |
| Richieste di ricerca per progetto al minuto | 1200 |
| Richieste di ricerca per organizzazione al minuto | 2400 |
| Richieste di ricerca per organizzazione al giorno | 345600 |
| Richieste di lettura per job di metadati per progetto per regione al minuto | 400 |
| Richieste di lettura per job di metadati per progetto, per utente, per regione al minuto | 200 |
| Richieste di scrittura per job di metadati per progetto per regione al minuto | 20 |
| Richieste di scrittura per job di metadati per progetto per utente per regione al minuto | 10 |
| Quantità di metadati esportati dai job di esportazione dei metadati, per organizzazione al giorno | 10 GB |
|
Quantità di metadati scansionati per l'esportazione dai job di esportazione dei metadati, per organizzazione al giorno Questa quota valuta il volume totale di metadati esistenti nell'organizzazione, nei progetti o nei gruppi di voci inclusi nell'ambito del job di esportazione dei metadati. |
100 GB |
Per ogni richiesta di Dataplex Universal Catalog elencata nella tabella seguente, la quota viene applicata sia a livello di progetto sia a livello di progetto per utente.
| Quota | Esempi |
|---|---|
| Richieste di lettura per la gestione delle risorse | Ottieni un lake, elenca le zone |
| Richieste di scrittura per la gestione delle risorse | Crea un lake, elimina una risorsa |
| Richieste di recupero dei metadati | Recuperare un'entità, recuperare una partizione |
| Richieste di elenco per i metadati | Elenca entità, elenca partizioni |
| Richieste di scrittura per i metadati | Aggiornare un'entità, eliminare una partizione |
| Richieste di lettura per risorse di attività e job | Recuperare un'attività, elencare i job |
| Richieste di scrittura per risorse di attività e job | Crea un'attività, annulla un job |
| Imposta richieste di policy IAM | Imposta un criterio IAM |
Quote per le richieste API Data Lineage
L'API Data Lineage applica quote per quanto segue:
- Richieste di lettura che restituiscono solo i dati
- Scrivere richieste che creano o modificano i dati
- Crea Open Lineage
Le seguenti quote si applicano alle richieste di data lineage:
| Quota | Valore predefinito |
|---|---|
| Richieste di lettura per progetto, per utente, per regione al minuto | 1000 |
| Richieste di scrittura per progetto, per utente, per regione al minuto | 6000 |
| Richieste Open Lineage per progetto, per utente, per regione al minuto | 3000 |
Quote per le risorse
La quota di risorse viene applicata a livello di progetto per i seguenti tipi di risorse: lake, zona, asset, attività on demand, attività ricorrente. Puoi controllare l'utilizzo corrente della quota di Dataplex Universal Catalog nella pagina Quote della console Google Cloud .
Richiedi un aumento della quota
Nella console Google Cloud , vai alla pagina Quote.
Seleziona la quota che vuoi modificare.
Fai clic su Altre azioni > Modifica quota.
Inserisci il nuovo valore di quota e una descrizione della richiesta.
Fai clic su Avanti.
Inserisci i dati di contatto.
Fai clic su Invia richiesta.
Per modificare la maggior parte delle quote, utilizza la console Google Cloud . Per ulteriori informazioni, consulta Richiedi un aggiustamento delle quote.
Dipendenze delle quote
L'utilizzo di Dataplex Universal Catalog potrebbe coinvolgere altri Google Cloud prodotti. Ad esempio, l'individuazione dei dati richiede l'invocazione delle API Cloud Storage e/o BigQuery per interagire con le risorse sottostanti. Questi prodotti hanno quote a livello di progetto che includono le quote applicabili all'utilizzo di Dataplex Universal Catalog.
Pagine delle quote di altri prodotti che potresti utilizzare con Dataplex Universal Catalog:
Questo elenco non è esaustivo.
Limiti
A Dataplex Universal Catalog si applicano i seguenti limiti:
| Limite | Valore |
|---|---|
| Dimensioni di una richiesta per voce e aspetti (incluso l'aspetto dello schema) | 2 MB |
| Lunghezza di un ID voce | 4000 caratteri |
| Lunghezza di un nome completo in una voce | 4000 caratteri |
| Lunghezza del nome visualizzato dell'origine della voce in una voce | 500 caratteri |
| Lunghezza della descrizione dell'origine della voce in una voce | 2000 caratteri |
| Lunghezza della risorsa di origine della voce in una voce | 4000 caratteri |
| Lunghezza del sistema di origine della voce in una voce | 64 caratteri |
| Lunghezza della piattaforma di origine della voce in una voce | 64 caratteri |
| Lunghezza delle etichette delle origini di una voce | 128 caratteri per ogni chiave e valore |
| Dimensione dei contenuti JSON in un aspetto (tranne l'aspetto dello schema) | 120 kB |
| Dimensione totale di una voce | 5 MB |
| Numero massimo di aspetti in una voce | 10.000 |
| Lunghezza del nome visualizzato del tipo di voce, del tipo di aspetto e del gruppo di voci | 256 |
| Lunghezza della descrizione del tipo di voce, del tipo di aspetto e del gruppo di voci | 1024 |
| Lunghezza del nome del campo in un modello di tipo di aspetto | 63 |
| Numero massimo di tipi di aspetto obbligatori in un tipo di voce | 20 |
| Numero massimo di valori di enumerazione in un modello di tipo di aspetto | 1024 |
| Numero massimo di elementi nei risultati di ricerca di Dataplex Universal Catalog | 500 (modalità di ricerca solo per parole chiave nella console Google Cloud o
semanticSearch=false quando si utilizza l'API)100 (tutti gli altri casi di ricerca) |