Monitorare le sessioni interattive e risolvere i relativi problemi

Questo documento descrive come monitorare e risolvere i problemi delle sessioni interattive di Managed Service for Apache Spark utilizzando l'interfaccia utente di Spark.

UI Spark

La UI di Spark raccoglie i dettagli di esecuzione di Apache Spark dalle sessioni interattive di Managed Service for Apache Spark. La funzionalità UI di Spark, abilitata per impostazione predefinita, non prevede costi. I dati raccolti dalla funzionalità UI di Spark vengono conservati per 90 giorni.

Autorizzazioni e ruoli Identity and Access Management richiesti

Per utilizzare la funzionalità UI di Spark con sessioni interattive sono necessarie le seguenti autorizzazioni:

  • Autorizzazione di raccolta dei dati: dataproc.sessions.sparkApplicationWrite. Questa autorizzazione deve essere concessa al account di servizio che esegue le sessioni interattive. È inclusa nel ruolo Managed Service for Apache Spark Worker, che viene concesso automaticamente al account di servizio Compute Engine predefinito utilizzato per impostazione predefinita da Managed Service for Apache Spark. Tuttavia, se specifichi un service account personalizzato per la tua sessione o il tuo template di runtime della sessione, devi aggiungere questa autorizzazione dataproc.sessions.sparkApplicationWrite a quel account di servizio (in genere, concedendo al account di servizio il ruolo Worker di Managed Service for Apache Spark).

  • Autorizzazione di accesso alla UI di Spark: dataproc.sessions.sparkApplicationRead. Questa autorizzazione deve essere concessa a un utente per accedere alla UI di Spark nella consoleGoogle Cloud . È inclusa nei ruoli Dataproc Viewer, Dataproc Editor e Dataproc Administrator. Per aprire la UI di Spark nella console Google Cloud , devi disporre di uno di questi ruoli o di un ruolo personalizzato che includa questa autorizzazione.

Apri la UI Spark

La pagina della UI di Spark è disponibile nella console Google Cloud .

  1. Vai a Sessioni interattive di Managed Service for Apache Spark

  2. Fai clic su un ID sessione interattiva per aprire la pagina Dettagli sessione interattiva.
  3. Fai clic su Visualizza UI Spark nel menu in alto.

Il link Visualizza UI di Spark è disattivato? Se un'autorizzazione richiesta non viene concessa o se deselezioni la casella di controllo Attiva UI di Spark nella pagina dei dettagli della sessione interattiva o imposti la proprietà spark.dataproc.appContext.enabled su false (valore predefinito: true) quando crei una sessione o crei un modello di runtime della sessione, il pulsante Visualizza UI di Spark verrà disattivato.