Monitorare le sessioni interattive e risolvere i relativi problemi

Questo documento descrive come monitorare e risolvere i problemi delle sessioni interattive di Managed Service for Apache Spark utilizzando l'interfaccia utente di Spark.

UI Spark

La UI di Spark raccoglie i dettagli di esecuzione di Apache Spark dalle sessioni interattive di Managed Service for Apache Spark. Non è previsto alcun addebito per la funzionalità UI di Spark, che è abilitata per impostazione predefinita. I dati raccolti dalla funzionalità UI di Spark vengono conservati per 90 giorni.

Autorizzazioni e ruoli di Identity and Access Management richiesti

Per utilizzare la funzionalità dell'interfaccia utente di Spark con le sessioni interattive, sono necessarie le seguenti autorizzazioni:

  • Autorizzazione per la raccolta dei dati: dataproc.sessions.sparkApplicationWrite. Questa autorizzazione deve essere concessa al account di servizio che esegue le sessioni interattive. È incluso nel ruolo Managed Service for Apache Spark Worker, che viene concesso automaticamente al account di servizio predefinito di Compute Engine utilizzato da Managed Service for Apache Spark per impostazione predefinita. Tuttavia, se specifichi un service account personalizzato per la tua sessione o il tuo profilo di runtime (template di sessione), devi aggiungere questa autorizzazione dataproc.sessions.sparkApplicationWrite al account di servizio (in genere, concedendo al account di servizio il ruolo Managed Service for Apache Spark Worker).

  • Autorizzazione di accesso alla UI di Spark: dataproc.sessions.sparkApplicationRead. Questa autorizzazione deve essere concessa a un utente per accedere alla UI di Spark nella consoleGoogle Cloud . È inclusa nei ruoli Dataproc Viewer, Dataproc Editor e Dataproc Administrator. Per aprire la UI di Spark nella console Google Cloud , devi disporre di uno di questi ruoli o di un ruolo personalizzato che includa questa autorizzazione.

Apri la UI di Spark

La pagina della UI di Spark è disponibile nella console Google Cloud .

  1. Vai alle sessioni interattive di Managed Service for Apache Spark

  2. Fai clic su un ID sessione interattiva per aprire la pagina Dettagli sessione interattiva.
  3. Fai clic su Visualizza UI di Spark nel menu in alto.

Il collegamento Visualizza l'interfaccia utente di Spark è disabilitato? Se un'autorizzazione richiesta non viene concessa o se deselezioni la casella di controllo Abilita UI di Spark nella pagina dei dettagli della sessione interattiva o imposti la proprietà spark.dataproc.appContext.enabled su false (valore predefinito: true) quando crei una sessione o crei un profilo di runtime (modello di sessione), il pulsante Visualizza UI di Spark viene disattivato.