Questo documento elenca le quote che si applicano a Knowledge Catalog (in precedenza Dataplex Universal Catalog).
Google Cloud utilizza le quote per garantire l'equità e ridurre i picchi di utilizzo e disponibilità delle risorse. Una quota limita la quantità di una Google Cloud risorsa che Google Cloud il progetto può utilizzare. Le quote si applicano a una serie di tipi di risorse, inclusi hardware, software e componenti di rete. Ad esempio, le quote possono limitare il numero di chiamate API a un servizio, il numero di bilanciatori del carico utilizzati contemporaneamente dal tuo progetto o il numero di progetti che puoi creare. Le quote proteggono la community degli utentiGoogle Cloud impedendo il sovraccarico dei servizi. Le quote ti aiutano inoltre a gestire le tue Google Cloud risorse.
Il sistema delle quote di Cloud esegue le seguenti operazioni:
- Monitora il tuo consumo di Google Cloud prodotti e servizi
- Limita il consumo di queste risorse
- Fornisce un modo per richiedere modifiche al valore della quota e automatizzare gli aggiustamenti della quota
Nella maggior parte dei casi, quando provi a utilizzare una risorsa per un volume maggiore di quello consentito dalla quota, il sistema blocca l'accesso alla risorsa e l'attività che stai tentando di eseguire non va a buon fine.
In genere, le quote si applicano a livello di Google Cloud progetto. L'utilizzo di una risorsa in un progetto non influisce sulla quota disponibile in un altro progetto. All'interno di un progetto Google Cloud , le quote vengono condivise tra tutte le applicazioni e gli indirizzi IP.
Per saperne di più, consulta la Panoramica delle quote di Cloud.
Esistono anche limiti di sistema per le risorse Knowledge Catalog. I limiti di sistema non possono essere modificati.
Knowledge Catalog applica le quote al numero di richieste API durante un periodo di tempo specifico e al numero di risorse che possono essere create in un progetto. Le quote ti proteggono da picchi di utilizzo imprevisti e da servizi sovraccarichi. Scopri di più sul motivo per cui vengono applicate le quote.
Le tue esigenze di quota potrebbero aumentare man mano che utilizzi Knowledge Catalog. Se una quota è troppo bassa per soddisfare le tue esigenze o prevedi un aumento imminente dell'utilizzo, puoi richiedere in modo proattivo un aumento della quota.
Informazioni sui tipi di richieste API
Le richieste API per le varie funzionalità di Knowledge Catalog, come la gestione delle risorse, i metadati, le attività e le scansioni dei dati, vengono classificate in bucket generici per gestire l'utilizzo e la protezione dei servizi.
Richieste di lettura
Le richieste di lettura sono operazioni progettate per recuperare informazioni sulle risorse, sui metadati o sulla cronologia di esecuzione esistenti senza modificare la configurazione o lo stato. Queste operazioni non sono mutanti e non attivano nuovi job di elaborazione.
Le operazioni di richiesta di lettura includono Get, List e Describe. Ad esempio, la visualizzazione della definizione di una scansione dei dati o dello stato di un job di scansione è una richiesta di lettura.
Richieste di scrittura
Le richieste di scrittura includono tutte le operazioni che creano, aggiornano o eliminano le definizioni delle risorse, nonché quelle che modificano le policy di sicurezza. Si tratta di operazioni che modificano lo stato dell'ambiente.
Le operazioni di richiesta di scrittura includono Create, Update, Delete, Cancel e SetIamPolicy. Ad esempio, la configurazione di una scansione della qualità dei dati o l'aggiornamento di una scansione del profilo di dati esistente è una richiesta di scrittura.
Richieste di esecuzione
Le richieste di esecuzione si riferiscono in modo specifico all'attivazione dell'esecuzione attiva di una risorsa preconfigurata. A differenza di una richiesta di scrittura (che potrebbe creare una pianificazione ricorrente), una richiesta di esecuzione viene spesso utilizzata per l'esecuzione on demand della logica configurata.
Ad esempio, l'avvio manuale dell'esecuzione di una scansione dei dati è una richiesta di esecuzione.
Quote per le richieste API Dataplex
L'API Dataplex applica le quote per la gestione delle risorse e le richieste di ricerca di Knowledge Catalog a diversi livelli, indipendentemente dalla loro origine. Sono incluse le richieste provenienti direttamente dalle chiamate API, dalle librerie client, da Google Cloud CLI e dalla Google Cloud console.
Le seguenti quote si applicano alle richieste di Knowledge Catalog:
| Quota | Predefinito |
|---|---|
| Richieste di lettura per voci e aspetti per progetto per regione al minuto | 6000 |
| Richieste di scrittura per voci e aspetti per progetto per regione al minuto | 1500 |
| Richieste di lettura per tipi di aspetti, tipi di voci e gruppi di voci per progetto per utente al minuto | 100 |
| Richieste di lettura per tipi di aspetti, tipi di voci e gruppi di voci per progetto al minuto | 200 |
| Richieste di scrittura per tipi di aspetti, tipi di voci e gruppi di voci per progetto per utente al minuto | 10 |
| Richieste di scrittura per tipi di aspetti, tipi di voci e gruppi di voci per progetto al minuto | 20 |
| Richieste di ricerca per progetto per utente al minuto | 900 |
| Richieste di ricerca per progetto al minuto | 1200 |
| Richieste di ricerca per organizzazione al minuto | 2400 |
| Richieste di ricerca per organizzazione al giorno | 345600 |
| Richieste di lettura per job di metadati per progetto per regione al minuto | 400 |
| Richieste di lettura per job di metadati per progetto per utente per regione al minuto | 200 |
| Richieste di scrittura per job di metadati per progetto per regione al minuto | 20 |
| Richieste di scrittura per job di metadati per progetto per utente per regione al minuto | 10 |
| Richieste di lettura per scansioni dei dati per progetto per regione al minuto | 1200 |
| Richieste di lettura per scansioni dei dati per progetto per utente per regione al minuto | 600 |
| Richieste di scrittura per scansioni dei dati per progetto per regione al minuto | 200 |
| Richieste di scrittura per scansioni dei dati per progetto per utente per regione al minuto | 100 |
| Richieste di esecuzione per scansioni dei dati per progetto per regione al minuto | 60 |
| Richieste di esecuzione per scansioni dei dati per progetto per utente per regione al minuto | 30 |
| Quantità di metadati esportati dai job di esportazione dei metadati, per organizzazione al giorno | 10 GB |
|
Quantità di metadati scansionati per l'esportazione dai job di esportazione dei metadati, per organizzazione al giorno Questa quota valuta il volume totale di metadati esistenti nell'organizzazione, nei progetti o nei gruppi di voci inclusi nell'ambito del job di esportazione dei metadati. |
100 GB |
Per ogni richiesta di Knowledge Catalog elencata nella tabella seguente, la quota viene applicata sia a livello di progetto sia a livello di progetto per utente.
| Quota | Esempi |
|---|---|
| Richieste di lettura per la gestione delle risorse | Recupera un lake, elenca le zone |
| Richieste di scrittura per la gestione delle risorse | Crea un lake, elimina una risorsa |
| Richieste di recupero per i metadati | Recupera un'entità, recupera una partizione |
| Richieste di elenco per i metadati | Elenca le entità, elenca le partizioni |
| Richieste di scrittura per i metadati | Aggiorna un'entità, elimina una partizione |
| Richieste di lettura per le risorse di attività e job | Recupera un'attività, elenca i job |
| Richieste di scrittura per le risorse di attività e job | Crea un'attività, annulla un job |
| Richieste di impostazione della policy IAM | Imposta una policy IAM |
Quote per le richieste API Data Lineage
L'API Data Lineage applica le quote per quanto segue:
- Richieste di lettura che restituiscono solo i dati
- Richieste di scrittura che creano o modificano i dati
- Crea Open Lineage
Le seguenti quote si applicano alle richieste di derivazione dei dati:
| Quota | Valore predefinito |
|---|---|
| Richieste di lettura per progetto per utente per regione al minuto | 1000 |
| Richieste di scrittura per progetto per utente per regione al minuto | 6000 |
| Richieste Open Lineage per progetto per utente per regione al minuto | 3000 |
Quote per le risorse
La quota delle risorse viene applicata a livello di progetto per i seguenti tipi di risorse: lake, zona, asset, attività on demand, attività ricorrente. Puoi controllare l'utilizzo attuale della quota di Knowledge Catalog nella pagina Quote della Google Cloud console.
Richiedi un aumento della quota
Nella Google Cloud console, vai alla pagina Quote.
Seleziona la quota che vuoi modificare.
Fai clic su Altre azioni > Modifica quota.
Inserisci il nuovo valore della quota e una descrizione della richiesta.
Fai clic su Avanti.
Inserisci i dati di contatto.
Fai clic su Invia richiesta.
Per modificare la maggior parte delle quote, utilizza la Google Cloud console. Per ulteriori informazioni, consulta Richiedi un aggiustamento delle quote.
Dipendenze delle quote
L'utilizzo di Knowledge Catalog potrebbe coinvolgere altri Google Cloud prodotti. Ad esempio, il rilevamento dei dati richiede la chiamata delle API Cloud Storage e/o BigQuery per interagire con le risorse sottostanti. Questi prodotti hanno quote a livello di progetto che includono le quote applicabili all'utilizzo di Knowledge Catalog.
Pagine delle quote di altri prodotti che potresti utilizzare con Knowledge Catalog:
Questo elenco non è completo.
Limiti
I seguenti limiti si applicano a Knowledge Catalog:
| Limite | Valore |
|---|---|
| Dimensioni di una richiesta per la voce e gli aspetti (incluso l'aspetto dello schema) | 2 MB |
| Lunghezza di un ID voce | 4000 caratteri |
| Lunghezza di un nome completo in una voce | 4000 caratteri |
| Lunghezza del nome visualizzato dell'origine della voce in una voce | 500 caratteri |
| Lunghezza della descrizione dell'origine della voce in una voce | 2000 caratteri |
| Lunghezza della risorsa di origine della voce in una voce | 4000 caratteri |
| Lunghezza del sistema di origine della voce in una voce | 64 caratteri |
| Lunghezza della piattaforma di origine della voce in una voce | 64 caratteri |
| Lunghezza delle etichette di origine della voce in una voce | 128 caratteri per ogni chiave e valore |
| Dimensioni del contenuto JSON in un aspetto (ad eccezione degli aspetti dello schema e del profilo di dati) | 120 KB |
| Dimensioni del contenuto JSON in un aspetto del profilo di dati | 1 MB |
| Dimensioni totali di una voce | 5 MB |
| Numero massimo di aspetti in una voce | 10.000 |
| Lunghezza del nome visualizzato del tipo di voce, del tipo di aspetto e del gruppo di voci | 256 |
| Lunghezza della descrizione del tipo di voce, del tipo di aspetto e del gruppo di voci | 1024 |
| Lunghezza del nome del campo in un modello di tipo di aspetto | 63 |
| Numero massimo di tipi di aspetti obbligatori in un tipo di voce | 20 |
| Numero massimo di valori di enumerazione in un modello di tipo di aspetto | 1024 |
| Numero massimo di elementi nei risultati di ricerca di Knowledge Catalog | 500 (modalità di ricerca solo per parole chiave nella Google Cloud console o
semanticSearch=false quando si utilizza l'API)100 (tutti gli altri casi di ricerca) |
| Numero massimo di scansioni dei dati per progetto per regione | 1000 |
| Numero massimo di prodotti di dati per progetto per regione | 50 |
| Numero massimo di asset di dati per prodotto di dati | 10 |