Instrada i log verso destinazioni supportate

Puoi utilizzare i sink di log in Cloud Logging per instradare le voci di log dal tuo progetto Google Cloud a destinazioni supportate per l'archiviazione a lungo termine, l'analisi o lo streaming.

Un sink esegue un'azione di scrittura e pertanto deve essere autorizzato a scrivere nella destinazione. Quando la destinazione è un bucket di log nello stesso progetto del sink, il sink viene autorizzato automaticamente. Per tutte le altre destinazioni, il sink deve essere collegato a un service account a cui sono state concesse le autorizzazioni necessarie per scrivere dati nella destinazione.

Quando è necessario un account di servizio, Cloud Logging lo crea e lo gestisce automaticamente. Tuttavia, potresti dover modificare le autorizzazioni concesse al account di servizio. Non devi utilizzare il account di servizio creato da Logging. Puoi creare e gestire un account di servizio utilizzato dai sink in più progetti. Per ulteriori informazioni, consulta Configurare i sink di log con service account gestiti dall'utente.

Panoramica

Questo documento descrive come creare un sink e come configurare le opzioni che potresti visualizzare quando utilizzi la console Google Cloud , Google Cloud CLI o l'API.

I sink appartengono a una determinata risorsa Google Cloud : un progetto Google Cloud , un account di fatturazione, una cartella o un'organizzazione. Quando la risorsa riceve una voce di log, ogni sink nella risorsa la elabora. Quando una voce di log corrisponde ai filtri del sink, viene indirizzata alla destinazione del sink.

In genere, le destinazioni inviano solo le voci di log che hanno origine in una risorsa. Tuttavia, per cartelle e organizzazioni puoi creare sink aggregati. Questi sink indirizzano le voci di log che hanno origine nella cartella o nell'organizzazione e nelle relative risorse figlio. Questo documento non tratta dei sink aggregati. Per saperne di più, consulta la panoramica dei sink aggregati.

Per creare e gestire i sink, puoi utilizzare la console Google Cloud , l'API Cloud Logging e Google Cloud CLI. Ti consigliamo di utilizzare la console Google Cloud per i seguenti motivi:

  • Puoi configurare le destinazioni sink come parte del flusso per creare un sink.
  • Puoi visualizzare l'anteprima delle voci di log che corrispondono ai filtri del sink.
  • Alcuni passaggi di autorizzazione sono semplificati.

Ti consigliamo di rivedere la configurazione del sink di log quando apporti modifiche allo spazio di archiviazione dei log. Ad esempio, se elimini la destinazione di un sink di log, elimina anche il sink di log corrispondente.

Per informazioni sulla visualizzazione e la gestione dei sink di log, consulta la sezione Gestisci i sink di questo documento.

Destinazioni supportate

La destinazione di un sink può trovarsi in una risorsa diversa dal sink. Ad esempio, puoi utilizzare un sink di log per indirizzare le voci di log da un progetto a un bucket di log archiviato in un progetto diverso.

Sono supportate le seguenti destinazioni:

Google Cloud project

Seleziona questa destinazione quando vuoi che i sink di log nel progetto di destinazione reindirizzino le voci di log oppure quando hai creato un sink aggregato di intercettazione. I sink di log nel progetto di destinazione possono reindirizzare le voci di log a qualsiasi destinazione supportata, tranne un progetto.

I sink di log creati dal sistema nel progetto di destinazione escludono le voci di log instradate al bucket di log _Required nel progetto di origine. Ad esempio, se indirizzi i log Attività di amministrazione a un altro progetto, sia i sink di log _Required che _Default nel progetto di destinazione escludono queste voci di log. Per archiviare queste voci di log, nel progetto di destinazione aggiorna il sink di log _Default o crea un sink di log personalizzato.

Bucket di log

Seleziona questa destinazione quando vuoi archiviare i dati di log in risorse gestite da Cloud Logging. I dati dei log archiviati nei bucket dei log possono essere visualizzati e analizzati utilizzando servizi come Esplora log e Observability Analytics.

Se vuoi unire i dati di log ad altri dati aziendali, puoi archiviarli in un bucket di log e creare un set di dati BigQuery collegato. Un set di dati BigQuery collegato è di sola lettura, ma puoi eseguirvi query come su qualsiasi altro set di dati BigQuery.

Set di dati BigQuery
Seleziona questa destinazione quando vuoi unire i dati di log con altri dati aziendali. Il set di dati specificato deve essere abilitato alla scrittura. Non impostare la destinazione di un sink su un set di dati BigQuery collegato. I set di dati BigQuery collegati sono di sola lettura.
Bucket Cloud Storage
Seleziona questa destinazione quando vuoi archiviare i dati di log a lungo termine. Il bucket Cloud Storage può trovarsi nel progetto in cui hanno origine le voci di log o in un progetto diverso. Le voci di log vengono archiviate come file JSON.
Argomento Pub/Sub
Seleziona questa destinazione quando vuoi esportare i dati di log da Google Cloud e poi utilizzare integrazioni di terze parti come Splunk o Datadog. Le voci di log vengono formattate come JSON e poi indirizzate a un argomento Pub/Sub.

Limitazioni delle destinazioni

Questa sezione descrive le limitazioni specifiche per la destinazione:

  • Quando configuri una destinazione sink, fornisci il percorso completo e utilizza l'endpoint globale del servizio. Gli endpoint di servizio a livello di regione (REP), come pubsub.LOCATION.rep.googleapis.com, non sono supportati.
  • Se indirizzi le voci di log a un bucket di log in un progetto Google Cloud diverso, Error Reporting non le analizza. Per saperne di più, consulta la Panoramica di Error Reporting.

  • Quando la destinazione di un sink di log è un set di dati BigQuery, si applicano le seguenti limitazioni:

    • Il set di dati BigQuery deve essere abilitato alla scrittura. Non impostare la destinazione su un set di dati BigQuery collegato. I set di dati collegati sono di sola lettura.
    • La registrazione crea una tabella all'interno del set di dati per ogni nome di log. Non puoi rinominare una tabella mentre un sink esegue lo streaming dei dati al suo interno.
  • Potrebbero essere necessarie diverse ore prima che i nuovi sink che eseguono il routing delle voci di log ai bucket Cloud Storage inizino a farlo. Questi sink vengono elaborati ogni ora.

  • L'instradamento dei log a un argomento Pub/Sub che applica limitazioni in transito non è supportato. La registrazione non può garantire che le richieste di pubblicazione provengano da una regione consentita, il che causatopic_region_not_allowed errori di configurazione e log eliminati.

  • I seguenti limiti si applicano quando la destinazione di un sink di log è un progetto Google Cloud :

    • Esiste un limite di un hop.
    • Il sink di log _Required nel progetto di destinazione indirizza le voci di log al bucket di log _Required del progetto quando le voci di log corrispondono al filtro del sink e provengono dal progetto di destinazione.
    • Il sink di log _Default nel progetto di destinazione instrada le voci di log che corrispondono al filtro di inclusione e non corrispondono ad alcun filtro di esclusione. Il sink di log _Default esclude alcune voci di log. Ad esempio, questo sink non instrada le voci di log di attività di amministrazione ed eventi di sistema. Puoi modificare questo sink.
    • Solo i sink aggregati che si trovano nella gerarchia delle risorse di una voce di log elaborano la voce.

    Ad esempio, supponiamo che la destinazione di un sink di log nel progetto A sia il progetto B. In questo caso, si applicano le seguenti regole:

    • A causa del limite di un hop, i sink di log nel progetto B non possono reindirizzare le voci di log a un altro progetto Google Cloud .
    • Il bucket di log _Required del progetto B archivia solo le voci di log che hanno origine nel progetto B. Questo bucket di log non archivia voci di log provenienti da altre risorse, incluse quelle provenienti dal progetto A.
    • Se il progetto A e il progetto B hanno gerarchie di risorse diverse, una voce di log che un sink di log nel progetto A indirizza al progetto B non viene inviata ai sink aggregati nella gerarchia delle risorse del progetto B.
    • Se il progetto A e il progetto B hanno la stessa gerarchia delle risorse, le voci di log vengono inviate ai sink aggregati in quella gerarchia. Se una voce di log non viene intercettata da un sink aggregato, il router dei log la invia ai sink nel progetto A.

Prima di iniziare

Le istruzioni riportate in questo documento descrivono la creazione e la gestione dei sink a livello di progettoGoogle Cloud . Puoi utilizzare la stessa procedura per creare un sink che indirizza le voci di log provenienti da un'organizzazione, una cartella o un account di fatturazione.

Per iniziare:

  1. Abilita l'API Cloud Logging.

    Ruoli richiesti per abilitare le API

    Per abilitare le API, devi disporre dell'autorizzazione serviceusage.services.enable. Se hai creato il progetto, probabilmente disponi già di questa autorizzazione tramite il ruolo Proprietario (roles/owner). In caso contrario, puoi ottenere questa autorizzazione tramite il ruolo Amministratore utilizzo dei servizi (roles/serviceusage.serviceUsageAdmin). Scopri come concedere i ruoli.

    Abilitare l'API

  2. Assicurati che il tuo progetto Google Cloud contenga voci di log che puoi visualizzare in Esplora log.

  3. Per ottenere le autorizzazioni necessarie per creare, modificare o eliminare un sink, chiedi all'amministratore di concederti il ruolo IAM Logs Configuration Writer (roles/logging.configWriter) nel progetto. Per saperne di più sulla concessione dei ruoli, consulta Gestisci l'accesso a progetti, cartelle e organizzazioni.

    Potresti anche riuscire a ottenere le autorizzazioni richieste tramite i ruoli personalizzati o altri ruoli predefiniti.

    Per informazioni sulla concessione dei ruoli IAM, consulta la guida al controllo dell'accesso di Logging.

  4. Assicurati di avere una risorsa in una destinazione supportata o di poterla creare.

    Per indirizzare le voci di log a una destinazione, quest'ultima deve esistere prima di creare il sink. Puoi creare la destinazione in qualsiasi progettoGoogle Cloud di qualsiasi organizzazione.

  5. Prima di creare un sink, esamina le limitazioni che si applicano alla destinazione del sink. Per saperne di più, consulta la sezione Limitazioni della destinazione in questo documento.

  6. Seleziona l'interfaccia che intendi utilizzare:

    Console

    Quando utilizzi la console Google Cloud per accedere ai servizi Google Cloud e alle API, non devi configurare l'autenticazione.

    gcloud

    Nella console Google Cloud , attiva Cloud Shell.

    Attiva Cloud Shell

    Nella parte inferiore della console Google Cloud viene avviata una sessione di Cloud Shell e viene visualizzato un prompt della riga di comando. Cloud Shell è un ambiente shell con Google Cloud CLI già installata e con valori già impostati per il progetto corrente. L'inizializzazione della sessione può richiedere alcuni secondi.

    REST

    Per utilizzare gli esempi di API REST in questa pagina in un ambiente di sviluppo locale, utilizzi le credenziali che fornisci a gcloud CLI.

      Installa Google Cloud CLI.

      Se utilizzi un provider di identità (IdP) esterno, devi prima accedere a gcloud CLI con la tua identità federata.

    Per saperne di più, consulta Autenticati per usare REST nella documentazione sull'autenticazione di Google Cloud .

Creazione di un sink

Questa sezione descrive come creare un sink in un progetto Google Cloud . Puoi creare fino a 200 sink per Google Cloud progetto. Per visualizzare il numero e il volume delle voci di log instradate, visualizza le metriche logging.googleapis.com/exports/.

Utilizzi il linguaggio di query di Logging per creare un'espressione di filtro che corrisponda alle voci di log che vuoi includere. Non inserire informazioni sensibili nei filtri sink. I filtri sink vengono trattati come dati di servizio.

Quando una query contiene più istruzioni, puoi specificare come vengono unite queste istruzioni o fare affidamento su Cloud Logging che aggiunge implicitamente la restrizione congiuntiva, AND, tra le istruzioni. Ad esempio, supponiamo che una query o una finestra di dialogo del filtro contenga due istruzioni, resource.type = "gce_instance" e severity >= "ERROR". La query effettiva è resource.type = "gce_instance" AND severity >= "ERROR". Cloud Logging supporta sia le restrizioni disgiuntive, OR, sia quelle congiuntive, AND. Quando utilizzi le istruzioni OR, ti consigliamo di raggruppare le clausole con le parentesi.

Per creare un sink:

Console

  1. Nella console Google Cloud , vai alla pagina Router dei log:

    Vai a Router dei log

    Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo Logging.

  2. Seleziona il progetto Google Cloud in cui hanno origine le voci di log che vuoi instradare.

    Ad esempio, se vuoi instradare le voci di log di accesso ai dati dal progetto denominato Project-A a un bucket di log nel progetto denominato Project-B, seleziona Project-A.

  3. Seleziona Crea sink.

  4. Nel riquadro Dettagli sink, inserisci i seguenti dettagli:

    • Nome sink: inserisci un identificatore per il sink. Dopo aver creato il sink, non puoi rinominarlo, ma puoi eliminarlo e crearne uno nuovo.

    • (Facoltativo) Descrizione del sink: descrivi lo scopo o il caso d'uso del sink.

  5. Nel riquadro Destinazione sink, seleziona il servizio sink e la destinazione utilizzando il menu Seleziona il servizio sink. Esegui una delle seguenti operazioni:

    • Per indirizzare le voci di log a un servizio che si trova nello stesso progettoGoogle Cloud , seleziona una delle seguenti opzioni:

      • Set di dati BigQuery: seleziona o crea il set di dati con accesso in scrittura per ricevere le voci di log instradate. Hai anche la possibilità di utilizzare le tabelle partizionate.
      • Bucket Cloud Storage: seleziona o crea il bucket Cloud Storage per ricevere le voci di log instradate.
      • Argomento Pub/Sub: seleziona o crea l'argomento per ricevere le voci di log instradate.
      • Splunk: seleziona l'argomento Pub/Sub per il tuo servizio Splunk.

    • Per instradare le voci di log a un altro progetto Google Cloud , seleziona Google Cloud progetto e poi inserisci il nome completo della destinazione:

      logging.googleapis.com/projects/DESTINATION_PROJECT_ID

    • Per indirizzare le voci di log a un servizio che si trova in un altro progettoGoogle Cloud , segui questi passaggi:

      1. Seleziona Altra risorsa.
      2. Inserisci il nome completo della destinazione. Per informazioni sulla sintassi, consulta Formati dei percorsi di destinazione.

  6. Specifica le voci di log da includere:

    1. Vai al riquadro Scegli i log da includere nel sink.

    2. Nel campo Crea filtro di inclusione, inserisci un'espressione di filtro che corrisponda alle voci di log che vuoi includere. Per informazioni sulla sintassi, consulta Linguaggio di query di Logging.

      Se non imposti un filtro, tutte le voci di log della risorsa selezionata vengono indirizzate alla destinazione.

      Ad esempio, per indirizzare tutte le voci di log di accesso ai dati a un bucket Logging, puoi utilizzare il seguente filtro:

      log_id("cloudaudit.googleapis.com/data_access") OR log_id("externalaudit.googleapis.com/data_access")

      La lunghezza di un filtro non può superare i 20.000 caratteri.

    3. Per verificare di aver inserito il filtro corretto, seleziona Anteprima dei log. Esplora log si apre in una nuova scheda con il filtro precompilato.

  7. (Facoltativo) Configura un filtro di esclusione per eliminare alcune delle voci di log incluse:

    1. Vai al riquadro Scegli i log da escludere dal sink.

    2. Nel campo Nome filtro di esclusione, inserisci un nome.

    3. Nel campo Crea un filtro di esclusione, inserisci un'espressione di filtro che corrisponda alle voci di log che vuoi escludere. Puoi anche utilizzare la funzione sample per selezionare una parte delle voci di log da escludere.

    Puoi creare fino a 50 filtri di esclusione per sink. Tieni presente che la lunghezza di un filtro non può superare i 20.000 caratteri.

  8. Seleziona Crea sink.

  9. Concedi all'account di servizio del sink l'autorizzazione per scrivere voci di log nella destinazione del sink. Per saperne di più, consulta Imposta le autorizzazioni della destinazione.

gcloud

Per creare un sink:

  1. Esegui questo comando gcloud logging sinks create:

    gcloud logging sinks create SINK_NAME SINK_DESTINATION

    Prima di eseguire il comando, effettua le seguenti sostituzioni:

    • SINK_NAME: il nome del sink di log. Non puoi modificare il nome di un sink dopo averlo creato.

    • SINK_DESTINATION: Il servizio o il progetto a cui vuoi indirizzare le voci di log. Imposta SINK_DESTINATION sul percorso appropriato, come descritto in Formati del percorso di destinazione.

      Ad esempio, se la destinazione sink è un argomento Pub/Sub, SINK_DESTINATION ha il seguente aspetto:

      pubsub.googleapis.com/projects/PROJECT_ID/topics/TOPIC_ID

    Puoi anche fornire le seguenti opzioni:

    • --log-filter : utilizza questa opzione per impostare un filtro che corrisponda alle voci di log che vuoi includere nel sink. Se non fornisci un valore per il filtro di inclusione, questo filtro corrisponde a tutte le voci di log.
    • --exclusion: utilizza questa opzione per impostare un filtro di esclusione per le voci di log che non vuoi che il sink indirizzi. Puoi anche utilizzare la funzione sample per selezionare una parte delle voci di log da escludere. Questa opzione può essere ripetuta; puoi creare fino a 50 filtri di esclusione per sink.
    • --description: utilizza questa opzione per descrivere lo scopo o il caso d'uso del sink.

    Ad esempio, per creare un sink in un bucket Logging, il comando potrebbe essere simile al seguente:

    gcloud logging sinks create my-sink logging.googleapis.com/projects/myproject123/locations/global/buckets/my-bucket \
 --log-filter='logName="projects/myproject123/logs/matched"' --description="My first sink"

    Per saperne di più sulla creazione di sink utilizzando Google Cloud CLI, consulta il riferimento gcloud logging sinks.

  2. Se la risposta del comando contiene una chiave JSON etichettata "writerIdentity", concedi all'account di servizio del sink l'autorizzazione di scrittura nella destinazione del sink. Per saperne di più, vedi Imposta le autorizzazioni della destinazione.

    Non è necessario impostare le autorizzazioni di destinazione quando la risposta non contiene una chiave JSON etichettata "writerIdentity".

REST

  1. Per creare un sink di logging nel tuo progetto Google Cloud , utilizza projects.sinks.create nell'API Logging. Nell'oggetto LogSink, fornisci i valori obbligatori appropriati nel corpo della richiesta del metodo:

    • name: un identificatore per il sink. Dopo aver creato il sink, non puoi rinominarlo, ma puoi eliminarlo e crearne uno nuovo.

    • destination: Il servizio e la destinazione in cui vuoi instradare le voci di log. Per instradare le voci di log a un progetto diverso o a una destinazione che si trova in un altro progetto, imposta il campo destination sul percorso appropriato, come descritto in Formati del percorso di destinazione.

      Ad esempio, se la destinazione sink è un argomento Pub/Sub, destination ha il seguente aspetto:

      pubsub.googleapis.com/projects/PROJECT_ID/topics/TOPIC_ID

  2. Nell'oggetto LogSink, fornisci le informazioni facoltative appropriate:

    • filter : imposta il campo filter in modo che corrisponda alle voci di log che vuoi includere nel sink. Se non imposti un filtro, tutte le voci di log del tuo progettoGoogle Cloud vengono indirizzate alla destinazione. Tieni presente che la lunghezza di un filtro non può superare i 20.000 caratteri.
    • exclusions: imposta questo campo in modo che corrisponda alle voci di log che vuoi escludere dal sink. Puoi anche utilizzare la funzione sample per selezionare una parte delle voci di log da escludere. Puoi creare fino a 50 filtri di esclusione per sink.
    • description: imposta questo campo per descrivere lo scopo o il caso d'uso del sink.

  3. Chiama projects.sinks.create per creare il sink.

  4. Se la risposta dell'API contiene una chiave JSON etichettata "writerIdentity", concedi all'account di servizio del sink l'autorizzazione di scrittura nella destinazione del sink. Per saperne di più, consulta Imposta le autorizzazioni della destinazione.

    Non è necessario impostare le autorizzazioni di destinazione quando la risposta dell'API non contiene una chiave JSON etichettata "writerIdentity".

Per saperne di più sulla creazione di sink utilizzando l'API Logging, consulta il riferimento LogSink.

Se ricevi notifiche di errore, consulta Risolvere i problemi relativi al routing e ai sink.

Formati del percorso di destinazione

Quando configuri una destinazione sink, fornisci il percorso completo e utilizza l'endpoint globale del servizio. Gli endpoint di servizio a livello di regione (REP), come pubsub.LOCATION.rep.googleapis.com, non sono supportati.

Nei seguenti formati di percorso, DESTINATION_PROJECT_ID si riferisce all'ID o al numero del progetto di destinazione:

  • Bucket di log di Cloud Logging:

    logging.googleapis.com/projects/DESTINATION_PROJECT_ID/locations/LOCATION/buckets/BUCKET_NAME

  • Un altro progetto Google Cloud :

    logging.googleapis.com/projects/DESTINATION_PROJECT_ID

  • Set di dati BigQuery:

    bigquery.googleapis.com/projects/DESTINATION_PROJECT_ID/datasets/DATASET_ID

  • Bucket Cloud Storage:

    storage.googleapis.com/BUCKET_NAME

  • Argomento Pub/Sub:

    pubsub.googleapis.com/projects/DESTINATION_PROJECT_ID/topics/TOPIC_ID

Impostare le autorizzazioni di destinazione

Questa sezione descrive come concedere a Logging le autorizzazioni Identity and Access Management per scrivere voci di log nella destinazione del sink. Per l'elenco completo di ruoli e autorizzazioni di Logging, consulta Controllo dell'accesso.

Cloud Logging crea un account di servizio condiviso per una risorsa quando viene creato un sink, a meno che il account di servizio richiesto non esista già. Il account di servizio potrebbe esistere perché viene utilizzato lo stesso account di servizio per tutti i sink nella risorsa sottostante. Una risorsa può essere un Google Cloud progetto, un'organizzazione, una cartella o un account di fatturazione.

L'identità writer di un sink è l'identificatore del service account associato a quel sink. Tutti i sink hanno un'identità writer, tranne quelli che scrivono in un bucket di log nello stesso Google Cloud progetto in cui hanno origine le voci di log. Per quest'ultima configurazione, non è necessario un account di servizio, pertanto il campo identità writer del sink è elencato come None nella console. L'API e i comandi Google Cloud CLI non segnalano un'identità di scrittura.

Le seguenti istruzioni si applicano a progetti, cartelle, organizzazioni e account di fatturazione:

Console

  1. Assicurati di disporre dell'accesso Proprietario al progettoGoogle Cloud che contiene la destinazione. Se non disponi dell'accesso Proprietario alla destinazione del sink, chiedi a un proprietario del progetto di aggiungere l'identità writer come entità.

  2. Per ottenere l'identità del writer del sink, ovvero un indirizzo email, dal nuovo sink:

    1. Nella console Google Cloud , vai alla pagina Router dei log:

      Vai a Router dei log

      Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo Logging.

    2. Nella barra degli strumenti, seleziona il progetto che contiene il sink.
    3. Seleziona Menu e poi seleziona Visualizza dettagli sink. L'identità writer viene visualizzata nel riquadro Dettagli sink.

  3. Se il valore del campo writerIdentity contiene un indirizzo email, procedi al passaggio successivo. Quando il valore è None, non è necessario configurare le autorizzazioni di destinazione per il sink.

  4. Copia l'identità del writer del sink negli appunti.

    L'indirizzo email identifica l'entità. Il prefisso serviceAccount: specifica il tipo di account.

  5. Concedi all'entità specificata nell'autorizzazione di identità del writer del sink di scrivere i dati dei log nella destinazione:

    1. Nella console Google Cloud vai alla pagina IAM:

      Vai a IAM

      Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo IAM e amministrazione.

    2. Nella barra degli strumenti, assicurati che il progetto selezionato sia il progetto che archivia la destinazione o la destinazione sink. Ad esempio, se la destinazione è un bucket di log, assicurati che la barra degli strumenti mostri il progetto che archivia il bucket di log.

    3. Seleziona Concedi l'accesso.

    4. Concedi all'entità specificata nell'identità writer del sink un ruolo IAM in base alla destinazione del sink di log:

gcloud

  1. Assicurati di disporre dell'accesso Proprietario al progettoGoogle Cloud che contiene la destinazione. Se non disponi dell'accesso Proprietario alla destinazione del sink, chiedi a un proprietario del progetto di aggiungere l'identità writer come entità.

  2. Recupera il account di servizio dal campo writerIdentity nel sink:

    gcloud logging sinks describe SINK_NAME

  3. Individua il sink di cui vuoi modificare le autorizzazioni e, se i dettagli del sink contengono una riga con writerIdentity, procedi al passaggio successivo. Se i dettagli non includono un campo writerIdentity, non è necessario configurare le autorizzazioni di destinazione per il sink.

    L'identità del writer per il account di servizio ha un aspetto simile al seguente:

    serviceAccount:service-123456789012@gcp-sa-logging.iam.gserviceaccount.com

  4. Concedi l'autorizzazione dell'identità writer del sink per scrivere i dati dei log nella destinazione chiamando il comando gcloud projects add-iam-policy-binding.

    Prima di utilizzare il comando seguente, effettua le seguenti sostituzioni:

    • PROJECT_ID: l'identificatore del progetto. Specifica il progetto che archivia la destinazione del sink di log. Se la destinazione è un progetto, specifica il progetto.
    • PRINCIPAL: un identificatore per l'entità a cui vuoi concedere il ruolo. Gli identificatori entità in genere hanno il seguente formato: PRINCIPAL-TYPE:ID. Ad esempio: user:my-user@example.com. Per un elenco completo dei formati che può avere PRINCIPAL, consulta Identificatori delle entità.

    • ROLE: un ruolo IAM. Concedi all'identità writer del sink un ruolo IAM in base alla destinazione del sink di log:

      Esegui il comando gcloud projects add-iam-policy-binding:

      gcloud projects add-iam-policy-binding PROJECT_ID --member=PRINCIPAL --role=ROLE

REST

Ti consigliamo di utilizzare la console Google Cloud o Google Cloud CLI per concedere un ruolo al account di servizio.

Gestisci lavandini

Ti consigliamo di rivedere la configurazione del sink di log quando apporti modifiche allo spazio di archiviazione dei log. Ad esempio, se elimini la destinazione di un sink di log, elimina anche il sink di log corrispondente.

Una volta creati i sink, puoi eseguire le seguenti azioni. L'applicazione delle modifiche apportate a un sink potrebbe richiedere alcuni minuti:

  • Visualizza dettagli
  • Aggiorna

  • Disattiva

    • Non puoi disattivare il sink _Required.

    • Puoi disattivare il sink _Default per impedire l'instradamento delle voci di log al bucket Logging _Default.

      Puoi disattivare il sink _Default per qualsiasi nuovo progetto o cartellaGoogle Cloud che crei nella tua organizzazione o cartella configurando le impostazioni predefinite delle risorse per Cloud Logging.

  • Elimina

    • Non puoi eliminare i sink _Default o _Required.
    • Quando elimini un sink, non instrada più le voci di log.
    • Se il sink ha un account di servizio dedicato, l'eliminazione del sink comporta anche l'eliminazione del account di servizio. I sink creati prima del 22 maggio 2023 hanno service account dedicati. I sink creati a partire dal 22 maggio 2023 hanno unaccount di serviziot condiviso. L'eliminazione del sink non comporta l'eliminazione del account di servizio condiviso.

  • Risolvere gli errori

  • Visualizza volume di log e tassi di errore

Di seguito sono riportate le istruzioni per gestire un sink in un progettoGoogle Cloud . Invece di un progetto Google Cloud , puoi specificare un account di fatturazione, una cartella o un'organizzazione:

Console

  1. Nella console Google Cloud , vai alla pagina Router dei log:

    Vai a Router dei log

    Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo Logging.

  2. Nella barra degli strumenti, seleziona la risorsa che contiene il sink. La risorsa può essere un progetto, una cartella, un'organizzazione o un account di fatturazione.

La pagina Router dei log mostra i sink nella risorsa selezionata. Ogni riga della tabella contiene informazioni sulle proprietà di un lavello:

  • Abilitato: indica se lo stato del sink è abilitato o disabilitato.
  • Tipo: il servizio di destinazione del sink, ad esempio Cloud Logging bucket.
  • Nome: l'identificatore del sink, fornito al momento della creazione del sink; ad esempio, _Default.
  • Descrizione: la descrizione del sink, fornita al momento della creazione.
  • Destinazione: nome completo della destinazione a cui vengono inviate le voci di log instradate.
  • Creato: la data e l'ora in cui è stato creato il sink.
  • Ultimo aggiornamento: la data e l'ora dell'ultima modifica del sink.
  • Volume: indica il volume totale di log indirizzati al sink di log. Il valore include il volume indirizzato ai bucket di log, ai progetti o ad altre destinazioni.

Per ogni riga della tabella, il menu Altre azioni offre le seguenti opzioni:

  • Visualizza dettagli sink: mostra il nome, la descrizione, il servizio di destinazione, la destinazione e i filtri di inclusione ed esclusione del sink. Se selezioni Modifica, si apre il riquadro Modifica sink.
  • Modifica sink: apre il riquadro Modifica sink in cui puoi aggiornare i parametri del sink.
  • Disattiva sink: consente di disattivare il sink e interrompere l'instradamento delle voci di log alla destinazione del sink. Per saperne di più sulla disattivazione dei sink, consulta Interrompere l'archiviazione dei log nei bucket di log.
  • Attiva sink: consente di attivare un sink disattivato e riavviare il routing delle voci di log alla destinazione del sink.
  • Elimina sink: consente di eliminare il sink e interrompere il routing delle voci di log verso la destinazione del sink.
  • Risolvi i problemi del sink: apre Esplora log, dove puoi risolvere i problemi del sink.
  • Visualizza volume di log e tassi di errore del sink: apre Metrics Explorer, dove puoi visualizzare e analizzare i dati del sink.

Per ordinare la tabella in base a una colonna, seleziona il nome della colonna.

gcloud

  • Per visualizzare l'elenco dei sink per il tuo progetto Google Cloud , utilizza il comando gcloud logging sinks list, che corrisponde al metodo dell'API Logging projects.sinks.list:

    gcloud logging sinks list

    Per visualizzare l'elenco dei sink aggregati, utilizza l'opzione appropriata per specificare la risorsa che contiene il sink. Ad esempio, se hai creato il sink a livello di organizzazione, utilizza l'opzione --organization=ORGANIZATION_ID per elencare i sink per l'organizzazione.

  • Per descrivere un sink, utilizza il comando gcloud logging sinks describe, che corrisponde al metodo dell'API Logging projects.sinks.get:

    gcloud logging sinks describe SINK_NAME

  • Per aggiornare un sink, utilizza il comando gcloud logging sinks update, che corrisponde al metodo API projects.sinks.update.

    Puoi aggiornare un sink per modificare la destinazione, i filtri e la descrizione oppure per disabilitarlo o riattivarlo:

    gcloud logging sinks update SINK_NAME NEW_DESTINATION --log-filter=NEW_FILTER

    Ometti NEW_DESTINATION o --log-filter se queste parti non cambiano.

    Ad esempio, per aggiornare la destinazione del sink denominato my-project-sink a una nuova destinazione del bucket Cloud Storage denominata my-second-gcs-bucket, il comando è il seguente:

    gcloud logging sinks update my-project-sink storage.googleapis.com/my-second-gcs-bucket

  • Per disattivare un sink, utilizza il comando gcloud logging sinks update, che corrisponde al metodo API projects.sinks.update, e includi l'opzione --disabled:

    gcloud logging sinks update SINK_NAME --disabled

    Per riattivare il sink, utilizza il comando gcloud logging sinks update, rimuovi l'opzione --disabled e includi l'opzione --no-disabled:

    gcloud logging sinks update SINK_NAME --no-disabled

  • Per eliminare un sink, utilizza il comando gcloud logging sinks delete, che corrisponde al metodo API projects.sinks.delete:

    gcloud logging sinks delete SINK_NAME

    Per saperne di più sulla gestione dei sink utilizzando Google Cloud CLI, consulta il riferimento gcloud logging sinks.

REST

  • Per visualizzare i sink per il tuo progetto Google Cloud , chiama projects.sinks.list.

  • Per visualizzare i dettagli di un lavello, chiama projects.sinks.get.

  • Per aggiornare un lavello, chiama projects.sinks.update.

    Puoi aggiornare la destinazione, i filtri e la descrizione di un sink. Puoi anche disattivare o riattivare il sink.

  • Per disattivare un sink, imposta il campo disabled nell'oggetto LogSink su true, quindi chiama projects.sinks.update.

    Per riattivare il sink, imposta il campo disabled nell'oggetto LogSink su false, quindi chiama projects.sinks.update.

  • Per eliminare un lavello, chiama projects.sinks.delete.

    Per ulteriori informazioni sulla gestione dei sink utilizzando l'API Logging, consulta il riferimento LogSink.

Interrompi l'archiviazione delle voci di log nei bucket di log

Puoi disattivare il sink _Default e tutti i sink definiti dall'utente. Quando disattivi un sink, questo smette di instradare le nuove voci di log alla destinazione. Ad esempio, se disattivi il sink _Default, nessuna voce di log viene indirizzata al bucket _Default. Il bucket _Default diventa vuoto quando tutte le voci di log archiviate in precedenza hanno raggiunto la fine del periodo di conservazione del bucket.

Le seguenti istruzioni mostrano come disattivare il sink _Default di un progetto Google Cloud in modo che non indirizzi le voci di log al bucket di log _Default:

Console

  1. Nella console Google Cloud , vai alla pagina Router dei log:

    Vai a Router dei log

    Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo Logging.

  2. Per trovare tutti i sink che instradano le voci di log nel bucket di log _Default, filtra i sink per destinazione, quindi inserisci _Default.

  3. Per ogni sink, seleziona Menu e poi Disattiva sink.

    I sink sono ora disabilitati e non instradano più le voci di log al bucket _Default.

Per riattivare un sink disabilitato e riavviare il routing delle voci di log alla destinazione del sink, segui questi passaggi:

  1. Nella console Google Cloud , vai alla pagina Router dei log:

    Vai a Router dei log

    Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo Logging.

  2. Per trovare tutti i sink che instradano le voci di log nel bucket di log _Default, filtra i sink per destinazione, quindi inserisci _Default.
  3. Per ogni sink, seleziona Menu e poi Attiva sink.

gcloud

  1. Per visualizzare l'elenco dei sink per il tuo progetto Google Cloud , utilizza il comando gcloud logging sinks list, che corrisponde al metodo dell'API Logging projects.sinks.list:

    gcloud logging sinks list

  2. Identifica eventuali sink che eseguono il routing al bucket di log _Default. Per descrivere un sink, incluso il nome della destinazione, utilizza il comando gcloud logging sinks describe, che corrisponde al metodo dell'API Logging projects.sinks.get:

    gcloud logging sinks describe SINK_NAME

  3. Esegui il comando gcloud logging sinks update e includi l'opzione --disabled. Ad esempio, per disattivare il sink _Default, utilizza il seguente comando:

    gcloud logging sinks update _Default --disabled

    Il sink _Default è ora disattivato e non indirizza più le voci di log al bucket di log _Default.

Per disattivare gli altri sink nel tuo progetto Google Cloud che eseguono il routing al bucket _Default, ripeti i passaggi precedenti.

Per riattivare un sink, utilizza il comando gcloud logging sinks update, rimuovi l'opzione --disabled e includi l'opzione --no-disabled:

gcloud logging sinks update _Default --no-disabled

REST

  1. Per visualizzare i sink per il tuo progetto Google Cloud , chiama il metodo dell'API Logging projects.sinks.list.

    Identifica eventuali sink che indirizzano al bucket _Default.

  2. Ad esempio, per disattivare il sink _Default, imposta il campo disabled nell'oggetto LogSink su true, quindi chiama projects.sinks.update.

    Il sink _Default è ora disabilitato e non indirizza più le voci di log al bucket _Default.

Per disattivare gli altri sink nel tuo progetto Google Cloud che eseguono il routing al bucket _Default, ripeti i passaggi precedenti.

Per riattivare un sink, imposta il campo disabled nell'oggetto LogSink su false, quindi chiama projects.sinks.update.

Esempi di codice

Per utilizzare il codice della libreria client per configurare i sink nelle lingue che preferisci, consulta Esempi di codice.

Esempi di filtro

Di seguito sono riportati alcuni esempi di filtri particolarmente utili per la creazione di sink. Per altri esempi che potrebbero esserti utili durante la creazione dei filtri di inclusione e di esclusione, consulta Query di esempio.

Ripristinare il filtro del lavello _Default

Se hai modificato il filtro per il sink _Default, potresti voler ripristinare la configurazione originale. Una volta creato, il sink _Default viene configurato con il seguente filtro di inclusione e un filtro di esclusione vuoto:

  NOT log_id("cloudaudit.googleapis.com/activity") AND NOT \
  log_id("externalaudit.googleapis.com/activity") AND NOT \
  log_id("cloudaudit.googleapis.com/system_event") AND NOT \
  log_id("externalaudit.googleapis.com/system_event") AND NOT \
  log_id("cloudaudit.googleapis.com/access_transparency") AND NOT \
  log_id("externalaudit.googleapis.com/access_transparency")

Escludi i log dei container e dei pod Google Kubernetes Engine

Per escludere le voci di log dei container e dei pod di Google Kubernetes Engine per il sistema GKE namespaces, utilizza il seguente filtro:

resource.type = ("k8s_container" OR "k8s_pod")
resource.labels.namespace_name = (
"cnrm-system" OR
"config-management-system" OR
"gatekeeper-system" OR
"gke-connect" OR
"gke-system" OR
"istio-system" OR
"knative-serving" OR
"monitoring-system" OR
"kube-system")

Per escludere le voci di log dei nodi Google Kubernetes Engine per i valori log_id del sistema GKE, utilizza il seguente filtro:

resource.type = "k8s_node"
(log_id("container-runtime") OR
 log_id("docker") OR
 log_id("kube-container-runtime-monitor") OR
 log_id("kube-logrotate") OR
 log_id("kube-node-configuration") OR
 log_id("kube-node-installation") OR
 log_id("kubelet") OR
 log_id("kubelet-monitor") OR
 log_id("node-journal") OR
 log_id("node-problem-detector"))

Per visualizzare il volume delle voci di log di nodi, pod e container di Google Kubernetes Engine memorizzate nei bucket di log, utilizza Metrics Explorer:

Escludere i log di Dataflow non necessari per la compatibilità

Per escludere le voci di log di Dataflow che non sono necessarie per la supportabilità, utilizza il seguente filtro:

resource.type="dataflow_step"
labels."dataflow.googleapis.com/log_type"!="system" AND labels."dataflow.googleapis.com/log_type"!="supportability"

Per visualizzare il volume dei log Dataflow archiviati nei bucket di log, utilizza Metrics Explorere. Per saperne di più, consulta Visualizzare il volume delle voci di log di Dataflow.

Escludi le voci di log di Storage Transfer Service che registrano azioni riuscite

Per escludere le voci di log di Storage Transfer Service che registrano le azioni riuscite, utilizza il seguente filtro di esclusione:

resource.type="storage_transfer_job" AND
jsonPayload.status.statusCode="OK"

Un'alternativa è modificare i dati di log scritti da un job Storage Transfer Service. Per saperne di più, consulta Attivare il logging per Storage Transfer Service.

Supportabilità

Anche se Cloud Logging ti consente di escludere le voci di log e impedire che vengano archiviate in un bucket di log, ti consigliamo di conservare le voci di log che aiutano a migliorare la supportabilità. L'utilizzo di queste voci di log può aiutarti a risolvere i problemi e a identificare i problemi con le tue applicazioni.

Ad esempio, le voci dei log di sistema GKE sono utili per risolvere i problemi delle tue applicazioni e dei tuoi cluster GKE perché vengono generate per gli eventi che si verificano nel cluster. Queste voci di log possono aiutarti a determinare se il codice dell'applicazione o il cluster GKE sottostante sta causando un errore dell'applicazione. I log di sistema GKE includono anche il logging di controllo di Kubernetes generato dal componente del server API Kubernetes, che include le modifiche apportate utilizzando il comando kubectl e gli eventi Kubernetes.

Per Dataflow, ti consigliamo di scrivere almeno i log di sistema (labels."dataflow.googleapis.com/log_type"="system") e i log di supporto (labels."dataflow.googleapis.com/log_type"="supportability") nei bucket di log. Questi log sono essenziali per consentire agli sviluppatori di osservare e risolvere i problemi delle pipeline Dataflow. Senza questi log, gli utenti potrebbero non essere in grado di utilizzare la pagina Dettagli job di Dataflow per visualizzare i log dei job.

Passaggi successivi