Supervisa y soluciona problemas relacionados con las sesiones interactivas

En este documento, se describe cómo supervisar y solucionar problemas de las sesiones interactivas de Managed Service para Apache Spark con la IU de Spark.

IU de Spark

La IU de Spark recopila detalles de ejecución de Apache Spark de las sesiones interactivas de Managed Service para Apache Spark. No se aplican cargos por la función de IU de Spark, que está habilitada de forma predeterminada. Los datos recopilados por la función de IU de Spark se conservan durante 90 días.

Roles y permisos de Identity and Access Management necesarios

Se requieren los siguientes permisos para usar la función de IU de Spark con sesiones interactivas:

  • Permiso de recopilación de datos: dataproc.sessions.sparkApplicationWrite. Este permiso se debe otorgar a la cuenta de servicio que ejecuta sesiones interactivas. Se incluye en el rol Managed Service for Apache Spark Worker, que se otorga automáticamente a la cuenta de servicio predeterminada de Compute Engine que usa Managed Service para Apache Spark de forma predeterminada. Sin embargo, si especificas una cuenta de servicio personalizada para tu sesión o perfil de entorno de ejecución (plantilla de sesión), debes agregar este permiso dataproc.sessions.sparkApplicationWrite a esa cuenta de servicio (por lo general, otorgándole a la cuenta de servicio el rol Worker de Managed Service para Apache Spark).

  • Permiso de acceso a la IU de Spark: dataproc.sessions.sparkApplicationRead. Este permiso se debe otorgar a un usuario para que acceda a la IU de Spark en la consola deGoogle Cloud . Se incluye en los roles Dataproc Viewer, Dataproc Editor y Dataproc Administrator. Para abrir la IU de Spark en la consola de Google Cloud , debes tener uno de estos roles o un rol personalizado que incluya este permiso.

Abre la IU de Spark

La página de la IU de Spark está disponible en la consola de Google Cloud .

  1. En la consola de Google Cloud , ve a la página Sesiones de Managed Service para Apache Spark.

    Ir a las sesiones de Managed Service para Apache Spark

  2. Haz clic en un ID de sesión para abrir la página Detalles de la sesión.

  3. Haz clic en Ver IU de Spark en el menú superior.

¿Está inhabilitado el vínculo Ver IU de Spark? Si no se otorga un permiso obligatorio o si desmarcas la casilla de verificación Habilitar la IU de Spark en la página de detalles de la sesión interactiva o estableces la propiedad spark.dataproc.appContext.enabled en false (predeterminado: true) cuando creas una sesión o creas un perfil de entorno de ejecución (plantilla de sesión), el botón Ver IU de Spark se inhabilita.