Questo documento elenca le quote che si applicano a Knowledge Catalog (in precedenza Dataplex Universal Catalog).
Google Cloud utilizza le quote per garantire l'equità e ridurre i picchi di utilizzo e disponibilità delle risorse. Una quota limita la quantità di una Google Cloud risorsa che Google Cloud il progetto può utilizzare. Le quote si applicano a una serie di tipi di risorse, inclusi hardware, software e componenti di rete. Ad esempio, le quote possono limitare il numero di chiamate API a un servizio, il numero di bilanciatori del carico utilizzati contemporaneamente dal tuo progetto o il numero di progetti che puoi creare. Le quote proteggono la community degli utentiGoogle Cloud impedendo il sovraccarico dei servizi. Le quote ti aiutano inoltre a gestire le tue Google Cloud risorse.
Il sistema delle quote di Cloud esegue le seguenti operazioni:
- Monitora il tuo consumo di Google Cloud prodotti e servizi
- Limita il consumo di queste risorse
- Fornisce un modo per richiedere modifiche al valore della quota e automatizzare gli aggiustamenti della quota
Nella maggior parte dei casi, quando provi a utilizzare una risorsa per un volume maggiore di quello consentito dalla quota, il sistema blocca l'accesso alla risorsa e l'attività che stai tentando di eseguire non va a buon fine.
In genere, le quote si applicano a livello di Google Cloud progetto. L'utilizzo di una risorsa in un progetto non influisce sulla quota disponibile in un altro progetto. All'interno di un progetto Google Cloud , le quote vengono condivise tra tutte le applicazioni e gli indirizzi IP.
Per saperne di più, consulta Panoramica delle quote di Cloud.
Esistono anche limiti di sistema per le risorse Knowledge Catalog. I limiti di sistema non possono essere modificati.
Knowledge Catalog applica quote al numero di richieste API durante un periodo di tempo specifico e al numero di risorse che possono essere create in un progetto. Le quote ti proteggono da picchi di utilizzo imprevisti e da servizi sovraccarichi. Scopri di più sul motivo per cui vengono applicate le quote.
Le tue esigenze di quota potrebbero aumentare man mano che utilizzi Knowledge Catalog. Se una quota è troppo bassa per soddisfare le tue esigenze o prevedi un aumento imminente dell'utilizzo, puoi richiedere un aumento della quota in modo proattivo.
Informazioni sui tipi di richieste API
Le richieste API per varie funzionalità di Knowledge Catalog, come gestione delle risorse, metadati, attività e scansioni dei dati, sono classificate in bucket generici per gestire l'utilizzo e la protezione del servizio.
Richieste di lettura
Le richieste di lettura sono operazioni progettate per recuperare informazioni su risorse, metadati o cronologia di esecuzione esistenti senza modificare alcuna configurazione o stato. Queste operazioni non sono mutanti e non attivano nuovi job di elaborazione.
Le operazioni di richiesta di lettura includono Get, List e Describe. Ad esempio,
la visualizzazione della definizione di una scansione dei dati o dello stato di un job di scansione è una richiesta di lettura.
Richieste di scrittura
Le richieste di scrittura includono tutte le operazioni che creano, aggiornano o eliminano definizioni di risorse, nonché quelle che modificano le norme di sicurezza. Si tratta di operazioni che modificano lo stato dell'ambiente.
Le operazioni di richiesta di scrittura includono Create, Update, Delete, Cancel e
SetIamPolicy. Ad esempio, la configurazione di un'analisi della qualità dei dati o l'aggiornamento di un'analisi del profilo di dati esistente è una richiesta di scrittura.
Esegui richieste
Le richieste di esecuzione si riferiscono in modo specifico all'attivazione dell'esecuzione attiva di una risorsa preconfigurata. A differenza di una richiesta di scrittura (che potrebbe creare una pianificazione ricorrente), una richiesta di esecuzione viene spesso utilizzata per l'esecuzione on demand della logica configurata.
Ad esempio, l'avvio manuale di un'esecuzione di scansione dei dati è una richiesta di esecuzione.
Quote per le richieste API Dataplex
L'API Dataplex applica quote per la gestione delle risorse Knowledge Catalog e le richieste di ricerca a diversi livelli, indipendentemente dalla loro origine. Sono incluse le richieste provenienti direttamente dalle chiamate API, dalle librerie client, da Google Cloud CLI e dalla console Google Cloud .
Le seguenti quote si applicano alle richieste Knowledge Catalog:
| Quota | Predefinito |
|---|---|
| Richieste di lettura per voci e aspetti per progetto per regione al minuto | 6000 |
| Richieste di scrittura per voci e aspetti per progetto per regione al minuto | 1500 |
| Richieste di lettura per tipi di aspetto, tipi di voci e gruppi di voci per progetto per utente al minuto | 100 |
| Richieste di lettura per tipi di aspetto, tipi di voci e gruppi di voci per progetto al minuto | 200 |
| Richieste di scrittura per tipi di aspetto, tipi di voci e gruppi di voci per progetto per utente al minuto | 10 |
| Richieste di scrittura per tipi di aspetto, tipi di voci e gruppi di voci per progetto al minuto | 20 |
| Richieste di ricerca per progetto per utente al minuto | 900 |
| Richieste di ricerca per progetto al minuto | 1200 |
| Richieste di ricerca per organizzazione al minuto | 2400 |
| Richieste di ricerca per organizzazione al giorno | 345600 |
| Richieste di lettura per job di metadati per progetto per regione al minuto | 400 |
| Richieste di lettura per job di metadati per progetto, per utente, per regione al minuto | 200 |
| Richieste di scrittura per job di metadati per progetto per regione al minuto | 20 |
| Richieste di scrittura per job di metadati per progetto per utente per regione al minuto | 10 |
| Richieste di lettura per scansioni dei dati per progetto per regione al minuto | 1200 |
| Richieste di lettura per scansioni dei dati per progetto, per utente, per regione al minuto | 600 |
| Richieste di scrittura per scansioni dei dati per progetto per regione al minuto | 200 |
| Richieste di scrittura per scansioni dei dati per progetto, per utente, per regione al minuto | 100 |
| Richieste di esecuzione di scansioni dei dati per progetto al minuto per regione | 60 |
| Esegui richieste di scansioni dei dati per progetto, per utente, per regione al minuto | 30 |
| Quantità di metadati esportati dai job di esportazione dei metadati, per organizzazione al giorno | 10 GB |
|
Quantità di metadati scansionati per l'esportazione dai job di esportazione dei metadati, per organizzazione al giorno Questa quota valuta il volume totale di metadati esistenti nell'organizzazione, nei progetti o nei gruppi di voci inclusi nell'ambito del job di esportazione dei metadati. |
100 GB |
Per ogni richiesta di Knowledge Catalog elencata nella tabella seguente, la quota viene applicata sia a livello di progetto sia a livello di progetto per utente.
| Quota | Esempi |
|---|---|
| Richieste di lettura per la gestione delle risorse | Ottieni un lake, elenca le zone |
| Richieste di scrittura per la gestione delle risorse | Crea un lake, elimina una risorsa |
| Richieste di recupero dei metadati | Recuperare un'entità, recuperare una partizione |
| Richieste di elenco per i metadati | Elenca entità, elenca partizioni |
| Richieste di scrittura per i metadati | Aggiornare un'entità, eliminare una partizione |
| Richieste di lettura per risorse di attività e job | Recuperare un'attività, elencare i job |
| Richieste di scrittura per risorse di attività e job | Creare un'attività, annullare un job |
| Imposta richieste di policy IAM | Imposta un criterio IAM |
Quote per le richieste API Data Lineage
L'API Data Lineage applica quote per quanto segue:
- Richieste di lettura che restituiscono solo i dati
- Scrivere richieste che creano o modificano i dati
- Crea Open Lineage
Le seguenti quote si applicano alle richieste di data lineage:
| Quota | Valore predefinito |
|---|---|
| Richieste di lettura per progetto, per utente, per regione al minuto | 1000 |
| Richieste di scrittura per progetto, per utente, per regione al minuto | 6000 |
| Richieste Open Lineage per progetto, per utente, per regione al minuto | 3000 |
Quote per le richieste API dei prodotti di dati
L'API Dataplex applica limiti di frequenza alle operazioni sui metadati e alle richieste del ciclo di vita per i prodotti dati e gli asset di dati. Questi limiti si applicano indipendentemente dal fatto che le richieste provengano dalla console Google Cloud , da Google Cloud CLI, dalle librerie client o da chiamate API dirette.
Le seguenti quote si applicano alle richieste di prodotti e asset di dati:
| Quota | Valore predefinito |
|---|---|
| Richieste di lettura per prodotti di dati per progetto per regione al minuto | 500 |
| Richieste di lettura per prodotti di dati per progetto, per utente, per regione al minuto | 250 |
| Richieste di creazione ed eliminazione di prodotti di dati per progetto per regione al minuto | 250 |
| Richieste di creazione ed eliminazione di prodotti di dati per progetto per utente per regione al minuto | 125 |
| Richieste di aggiornamento per i prodotti di dati per progetto al minuto | 10 |
| Richieste di aggiornamento per i prodotti di dati per progetto per utente al minuto | 5 |
| Richieste di lettura per asset di dati per progetto per regione al minuto | 500 |
| Richieste di lettura per asset di dati per progetto, per utente, per regione al minuto | 250 |
| Richieste di scrittura per asset di dati per progetto per regione al minuto | 30 |
| Richieste di scrittura per asset di dati per progetto per utente per regione al minuto | 15 |
Quote per le risorse
La quota di risorse viene applicata a livello di progetto per i seguenti tipi di risorse: lake, zona, asset, attività on demand, attività ricorrente. Puoi controllare l'utilizzo attuale della quota di Knowledge Catalog nella pagina Quote della console Google Cloud .
Richiedi un aumento della quota
Nella console Google Cloud , vai alla pagina Quote.
Seleziona la quota che vuoi modificare.
Fai clic su Altre azioni > Modifica quota.
Inserisci il nuovo valore di quota e una descrizione della richiesta.
Fai clic su Avanti.
Inserisci i dati di contatto.
Fai clic su Invia richiesta.
Per modificare la maggior parte delle quote, utilizza la console Google Cloud . Per ulteriori informazioni, consulta Richiedi un aggiustamento delle quote.
Dipendenze delle quote
L'utilizzo di Knowledge Catalog potrebbe coinvolgere altri Google Cloud prodotti. Ad esempio, l'individuazione dei dati richiede l'invocazione delle API Cloud Storage o BigQuery per interagire con le risorse sottostanti. Questi prodotti hanno quote a livello di progetto che includono le quote applicabili all'utilizzo di Knowledge Catalog.
Pagine delle quote di altri prodotti che potresti utilizzare con Knowledge Catalog:
Questo elenco non è esaustivo.
Limiti
A Knowledge Catalog si applicano i seguenti limiti:
| Limite | Valore |
|---|---|
| Dimensioni di una richiesta per voce e aspetti (incluso l'aspetto dello schema) | 2 MB |
| Lunghezza di un ID voce | 4000 caratteri |
| Lunghezza di un nome completo in una voce | 4000 caratteri |
| Lunghezza del nome visualizzato dell'origine della voce in una voce | 500 caratteri |
| Lunghezza della descrizione dell'origine della voce in una voce | 2000 caratteri |
| Lunghezza della risorsa di origine della voce in una voce | 4000 caratteri |
| Lunghezza del sistema di origine della voce in una voce | 64 caratteri |
| Lunghezza della piattaforma di origine della voce in una voce | 64 caratteri |
| Lunghezza delle etichette delle origini di una voce | 128 caratteri per ogni chiave e valore |
| Dimensioni dei contenuti JSON in un aspetto (ad eccezione degli aspetti schema e profilo dei dati) | 120 kB |
| Dimensione dei contenuti JSON in un aspetto del profilo dei dati | 1 MB |
| Dimensione totale di una voce | 5 MB |
| Numero massimo di aspetti in una voce | 10.000 |
| Lunghezza del nome visualizzato del tipo di voce, del tipo di aspetto e del gruppo di voci | 256 |
| Lunghezza della descrizione del tipo di voce, del tipo di aspetto e del gruppo di voci | 1024 |
| Lunghezza del nome del campo in un modello di tipo di aspetto | 63 |
| Numero massimo di tipi di aspetto obbligatori in un tipo di voce | 20 |
| Numero massimo di valori di enumerazione in un modello di tipo di aspetto | 1024 |
| Numero massimo di elementi nei risultati di ricerca di Knowledge Catalog | 500 (modalità di ricerca solo per parole chiave nella console Google Cloud o
semanticSearch=false quando si utilizza l'API)100 (tutti gli altri casi di ricerca) |
| Numero massimo di scansioni dei dati per progetto per regione | 1000 |
| Numero massimo di prodotti di dati per progetto per regione | 200 |
| Numero massimo di asset di dati per prodotto di dati | 50 |