Questa pagina descrive come stimare il costo della profilazione dei dati di BigQuery in un'organizzazione o una cartella. Se vuoi creare una stima per un progetto, consulta Stima i costi di profilazione dei dati per un singolo progetto.
Per saperne di più sulla profilazione dei dati di BigQuery, consulta Profili di dati per dati BigQuery.
Panoramica
Prima di iniziare a generare profili di dati, puoi eseguire una stima per capire quanti dati di BigQuery hai e quanto potrebbe costare profilarli. Per eseguire una stima, devi crearne una.
Quando crei una stima, devi specificare la risorsa (organizzazione, cartella o progetto) contenente i dati che vuoi profilare. Puoi impostare filtri per perfezionare la selezione dei dati. Puoi anche impostare le condizioni che devono essere soddisfatte prima che Sensitive Data Protection profili una tabella. Sensitive Data Protection basa la stima sulla forma, sulle dimensioni e sul tipo di dati al momento della creazione della stima.
Ogni stima include dettagli come il numero di tabelle corrispondenti trovate nella risorsa, la dimensione totale di tutte queste tabelle e il costo stimato della profilazione della risorsa una volta e su base mensile.
Per saperne di più su come vengono calcolati i prezzi, consulta Prezzi della profilazione dei dati.
Prezzi per la stima
La creazione di una stima è senza costi.
Conservazione
Ogni stima viene eliminata automaticamente dopo 28 giorni.
Limitazioni
Se la tua organizzazione o cartella ha un progetto protetto da un perimetro di servizio Controlli di servizio VPC, Sensitive Data Protection potrebbe sottostimare la quantità di dati di BigQuery nella risorsa. Se hai perimetri di servizio, crea una stima per ogni perimetro di servizio in modo indipendente.
Prima di iniziare
Per ottenere le autorizzazioni necessarie per creare e gestire le stime dei costi di profilazione dei dati,
chiedi all'amministratore di concederti il
ruolo IAM Amministratore DLP (roles/dlp.admin) nell'organizzazione o nella cartella.
Per saperne di più sulla concessione dei ruoli, consulta Gestisci l'accesso a progetti, cartelle e organizzazioni.
Potresti anche riuscire a ottenere le autorizzazioni richieste tramite i ruoli personalizzati o altri ruoli predefiniti.
Creare una stima
Vai alla pagina Crea una stima del profilo di dati.
Seleziona la tua organizzazione.
Le seguenti sezioni forniscono ulteriori informazioni sui passaggi della pagina Crea una stima del profilo di dati. Alla fine di ogni sezione, fai clic su Continua.
Seleziona risorsa da scansionare
Esegui una delle seguenti operazioni:- Per creare una stima per un'organizzazione, seleziona Scansiona l'intera organizzazione.
- Per creare una stima per una cartella, seleziona Scansiona la cartella selezionata. Quindi, fai clic su Sfoglia e seleziona la cartella.
Filtri e condizioni di input
Puoi saltare questa sezione se vuoi includere tutte le tabelle di BigQuery nell'organizzazione o nella cartella nella stima.In questa sezione, devi creare filtri per specificare determinati sottoinsiemi di dati da includere o escludere dalla stima. Per i sottoinsiemi inclusi nella stima, devi anche specificare le condizioni che una tabella nel sottoinsieme deve soddisfare per essere inclusa nella stima.
Per impostare filtri e condizioni:
- Fai clic su Aggiungi filtri e condizioni.
Nella sezione Filtri, definisci uno o più filtri che specificano le tabelle incluse nell'ambito della stima.
Specifica almeno uno dei seguenti elementi:
- Un ID progetto o un'espressione regolare che specifica uno o più progetti.
- Un ID set di dati o un'espressione regolare che specifica uno o più set di dati.
- Un ID tabella o un'espressione regolare che specifica una o più tabelle.
Le espressioni regolari devono seguire la sintassi RE2.
Ad esempio, se vuoi che tutte le tabelle di un progetto siano incluse nel filtro, specifica l'ID del progetto e lascia vuoti gli altri due campi.
Se vuoi aggiungere altri filtri, fai clic su Aggiungi filtro e ripeti questo passaggio.
Se i sottoinsiemi di dati definiti dai filtri devono essere esclusi dalla stima, disattiva l'opzione Includi le tabelle corrispondenti nella stima. Se disattivi questa opzione, le condizioni descritte nel resto di questa sezione vengono nascoste.
(Facoltativo) Nella sezione Condizioni, specifica le condizioni che le tabelle corrispondenti devono soddisfare per essere incluse nella stima. Se salti questo passaggio, Sensitive Data Protection include tutte le tabelle supportate che corrispondono ai filtri, indipendentemente dalle dimensioni e dall'età.
Configura le seguenti opzioni:
Condizioni minime: per escludere dalla stima le tabelle piccole o nuove, imposta un numero minimo di righe o un'età minima della tabella.
Condizione temporale: per escludere le tabelle meno recenti, attiva la condizione temporale. Quindi, scegli una data e un'ora. Tutte le tabelle create in questa data o prima vengono escluse dalla stima.
Ad esempio, se imposti la condizione temporale su 04/05/2022, 23:59, Sensitive Data Protection esclude dalla stima tutte le tabelle create in questa data o prima.
Tabelle da profilare: per specificare i tipi di tabelle da includere ne lla stima, seleziona Includi solo le tabelle di uno o più tipi specificati. Quindi, seleziona i tipi di tabelle che vuoi includere.
Se non attivi questa condizione o non selezioni alcun tipo di tabella, Sensitive Data Protection include tutte le tabelle supportate nella stima.
Supponiamo che tu abbia la seguente configurazione:
Condizioni minime
- Numero minimo di righe: 10 righe
- Durata minima: 24 ore
Condizione temporale
- Timestamp: 04/05/2022, 23:59
Tabelle da profilare
L'opzione Includi solo le tabelle di uno o più tipi specificati è selezionata. Nell'elenco dei tipi di tabelle, è selezionata solo l'opzione Profila le tabelle BigLake.
In questo caso, Sensitive Data Protection esclude tutte le tabelle create in questa data o prima. Tra le tabelle create dopo questa data e ora, Sensitive Data Protection profila solo le tabelle BigLake che hanno 10 righe o che hanno almeno 24 ore.
Fai clic su Fine.
Se vuoi aggiungere altri filtri e condizioni, fai clic su Aggiungi filtri e condizioni e ripeti i passaggi precedenti.
L'ultimo elemento nell'elenco di filtri e condizioni è sempre quello etichettato Filtri e condizioni predefiniti. Questa impostazione predefinita viene applicata alle tabelle nella risorsa selezionata (organizzazione o cartella) che non corrispondono a nessuno dei filtri e delle condizioni che hai creato.
Se vuoi modificare i filtri e le condizioni predefiniti, fai clic su Modifica filtri e condizioni e modifica le impostazioni in base alle esigenze.
Gestisci container e fatturazione del service agent
In questa sezione, devi specificare il progetto da utilizzare come container del service agent. Puoi fare in modo che Sensitive Data Protection crei automaticamente un nuovo progetto oppure puoi scegliere un progetto esistente.
Indipendentemente dal fatto che tu stia utilizzando un service agent appena creato o riutilizzando uno esistente, assicurati che abbia accesso in lettura ai dati da profilare.
Creare automaticamente un progetto
Se non disponi delle autorizzazioni necessarie per creare un progetto nell'organizzazione, devi selezionare un progetto esistente o ottenere le autorizzazioni richieste. Per informazioni sulle autorizzazioni richieste, consulta Ruoli necessari per lavorare con i profili di dati a livello di organizzazione o cartella livello.
Per creare automaticamente un progetto da utilizzare come container del service agent:
- Nel campo Container del service agent, esamina l'ID progetto suggerito e modificalo in base alle esigenze.
- Fai clic su Crea.
- (Facoltativo) Aggiorna il nome predefinito del progetto.
Seleziona l'account a cui addebitare tutte le operazioni fatturabili correlate a questo nuovo progetto, incluse le operazioni non correlate al rilevamento.
Tuttavia, per tutte le operazioni di rilevamento, i costi vengono addebitati tramite il progetto associato all'abbonamento.Fai clic su Crea.
Sensitive Data Protection crea il nuovo progetto. Il service agent all'interno di questo progetto verrà utilizzato per l'autenticazione a Sensitive Data Protection e ad altre API.
Selezionare un progetto esistente
Per selezionare un progetto esistente come container del service agent, fai clic sul campo Container del service agent e seleziona il progetto.
Imposta la località in cui archiviare la stima
Nell'elenco Località della risorsa, seleziona la regione in cui vuoi archiviare questa stima.
La scelta della località in cui archiviare la stima non influisce sui dati da scansionare. Inoltre, non influisce sulla località in cui verranno archiviati i profili di dati in un secondo momento. I dati vengono scansionati nella stessa regione in cui sono archiviati (come impostato in BigQuery). Per saperne di più, consulta Considerazioni sulla residenza dei dati.
Rivedi le impostazioni e fai clic su Crea.
Sensitive Data Protection crea la stima e la aggiunge all'elenco delle stime. Quindi, esegue la stima.
A seconda della quantità di dati nella risorsa, il completamento di una stima può richiedere fino a 24 ore. Nel frattempo, puoi chiudere la pagina Sensitive Data Protection e ricontrollare più tardi. Quando la stima è pronta, viene visualizzata una notifica nella Google Cloud console.
Visualizzare una stima
Vai all'elenco delle stime.
Fai clic sulla stima che vuoi visualizzare. La stima contiene le seguenti informazioni:
- Il numero di tabelle nella risorsa, meno le tabelle escluse tramite filtri e condizioni.
- La quantità totale di dati a cui corrispondono le tabelle.
- Il numero di unità di abbonamento necessarie per profilare questa quantità di dati ogni mese.
- Il costo del rilevamento iniziale, ovvero il costo approssimativo della profilazione delle tabelle trovate. Questa stima si basa solo su uno snapshot dei dati attuali e non tiene conto della crescita dei dati in un determinato periodo di tempo.
- Stime dei costi aggiuntivi per la profilazione solo delle tabelle risalenti a meno di 6, 12 o 24 mesi fa. Queste stime aggiuntive vengono fornite per mostrarti come limitare ulteriormente la copertura dei dati può aiutarti a controllare il costo della profilazione dei dati.
- Il costo mensile stimato della profilazione dei dati, presupponendo che l'utilizzo di BigQuery ogni mese sia lo stesso di questo mese.
- Un grafico che mostra la crescita di BigQuery nel tempo.
- I dettagli di configurazione che hai impostato.
Grafico di stima
Ogni stima include un grafico che mostra la crescita storica dei dati di BigQuery. Puoi utilizzare queste informazioni per stimare il costo mensile della profilazione dei dati.
Passaggi successivi
- Scopri di più sui prezzi della profilazione dei dati .
- Scopri di più sui profili di dati per dati BigQuery.
- Scopri come profilare i dati in un'organizzazione o una cartella.
- Scopri come profilare i dati in un singolo progetto.