Comienza a usar los clústeres de entrenamiento

Si te interesan los clústeres de entrenamiento de Gemini Enterprise Agent Platform, comunícate con tu representante de ventas para obtener acceso.

Antes de implementar tu primer clúster en los clústeres de entrenamiento de Gemini Enterprise Agent Platform, debes configurar tu proyecto y entorno deGoogle Cloud . En esta guía, se abarcan todos los requisitos previos necesarios, que se dividen en tres categorías principales:

  • Acceso al proyecto: Obtener acceso al servicio, que es solo por invitación.

  • Configuración de recursos: Habilitar las APIs y configurar la red de VPC y los servicios de almacenamiento necesarios.

  • Permisos de usuario: Otorgar los roles de IAM necesarios para la administración de clústeres y el acceso a los recursos.

Completar estos pasos prepara tu proyecto para una implementación exitosa.

Requisitos previos

Para usar clústeres de entrenamiento, debes cumplir con los siguientes requisitos:

  1. Agrega tu proyecto a la lista de entidades permitidas. Para ello, comunícate con tu representante de ventas para obtener acceso.
  2. Obtén capacidad para clústeres de GPU en las regiones admitidas.
  3. Habilita las APIs necesarias, incluidas las de Compute Engine, Filestore, Cloud Storage, Managed Lustre (opcional), Hypercomputer Configuration Service y Agent Platform.
  4. Configura las herramientas de redes asegurándote de que una red existente cumpla con condiciones específicas (por ejemplo, Acceso privado a Google, reglas de firewall) o creando una red y una subred de VPC nuevas.
  5. Configura el almacenamiento creando una instancia de Filestore zonal o regional para que sirva como directorio /home y, de forma opcional, configura una Google Cloud instancia de Managed Lustre.
  6. Otorga permisos de IAM a los usuarios para la administración de clústeres, el acceso al almacenamiento y el acceso SSH a los nodos del clúster, como se describe en la sección Permisos de IAM.

Regiones admitidas

La disponibilidad de los aceleradores varía según la región y la zona. Para verificar qué aceleradores están disponibles en cada ubicación, consulta Usa aceleradores.

  • us-central1
  • us-east1
  • us-east4
  • us-east5
  • us-south1
  • us-west1
  • us-west4
  • asia-southeast1
  • europe-west1
  • europe-west4
  • europe-north1
  • asia-south2
  • me-central1

Permisos de IAM

  1. Otorga el rol roles/aiplatform.admin a los usuarios que administrarán tus clústeres de entrenamiento.
  2. Otorga el rol roles/aiplatform.viewer a los usuarios que solo necesitan ver los clústeres y sus parámetros de configuración.
  3. Otorga los siguientes roles de IAM al usuario o a la cuenta de servicio que administrará (creará, borrará y actualizará) los clústeres de entrenamiento administrado:

    Nombre del rol ID del rol
    Administrador de instancias de Compute (v1) roles/compute.instanceAdmin.v1
    Escritor de registros roles/logging.logWriter
    Escritor de métricas de Monitoring roles/monitoring.metricWriter
    Usuario de cuenta de servicio roles/iam.serviceAccountUser
    Administrador de Service Networking roles/servicenetworking.networksAdmin
  4. Para permitir que los nodos del clúster lean y escriban en buckets de Cloud Storage con Cloud Storage FUSE, otorga el rol de usuario de objetos de almacenamiento (roles/storage.objectUser) a la cuenta de servicio que usan las VMs.

  5. Para el acceso SSH a los nodos de acceso de Slurm, otorga los siguientes permisos:

    Permisos Descripciones Objetivo
    Acceso al SO de Compute Accede a una VM como un usuario estándar (no administrador). Si se necesita sudo, usa el Acceso de administrador al SO de Compute. Establece una conexión SSH al nodo de acceso implementado
    Usuario de túnel protegido con IAP Accede a recursos de túnel que usan Identity-Aware Proxy. Establece una conexión SSH al nodo de acceso implementado

Habilita las APIs

  1. Habilita la API de Compute Engine con este comando:

       gcloud services enable compute.googleapis.com
    
    
  2. Habilita las herramientas de redes de servicios, ya que Filestore debe implementarse antes de crear el clúster.

       gcloud services enable servicenetworking.googleapis.com
    
  3. Habilita la API de Cloud Storage:

        gcloud services enable storage.googleapis.com
    
  4. Habilita la API de Lustre (si usas Lustre):

    gcloud services enable lustre.googleapis.com
    
    
  5. Habilita la API de HCS:

    gcloud services enable hypercomputecluster.googleapis.com
    
    
  6. Habilita la API de Gemini Enterprise:

    gcloud services enable aiplatform.googleapis.com
    
    
  7. Habilita la API de Cloud Resource Manager:

    gcloud services enable cloudresourcemanager.googleapis.com
    
    

¿Qué sigue?

Para obtener una guía detallada sobre cómo crear un clúster de entrenamiento y ejecutar tus cargas de trabajo de IA/AA, comunícate con tu representante de ventas.