Riutilizzare i cluster

Il riutilizzo dei cluster Managed Service for Apache Spark in Cloud Data Fusion consente di ridurre l'overhead di provisioning e velocizzare l'esecuzione della pipeline tra le esecuzioni. Per saperne di più, consulta Quando riutilizzare i cluster ed Esegui una pipeline su un cluster Managed Service for Apache Spark esistente.

Prima di iniziare

  • Devi avere un'istanza Cloud Data Fusion nella versione 6.5.0 o successive.

Abilita il riutilizzo dei cluster

Puoi riutilizzare i cluster in un nuovo profilo di computing o in uno che è stato utilizzato in una pipeline di cui è stato eseguito il deployment.

Abilita il riutilizzo dei cluster in un nuovo profilo

  1. Vai alla tua istanza:

    1. Nella Google Cloud console, vai alla pagina Cloud Data Fusion.

    2. Per aprire l'istanza in Cloud Data Fusion Studio, fai clic su Istanze e poi su Visualizza istanza.

      Vai a Istanze

  2. Fai clic su Amministratore di sistema > Configurazione > Profili di calcolo del sistema.

  3. Fai clic su Crea nuovo profilo.

  4. Scegli il provisioner Managed Service for Apache Spark.

  5. Nella finestra Crea un profilo per Managed Service for Apache Spark, inserisci i dettagli del cluster:

    1. Nei campi Etichetta profilo e Nome profilo, inserisci un nome per identificare il profilo, ad esempio execution_compute-profile.
    2. Nel campo Descrizione, descrivi lo scopo del profilo, ad esempio Profile used for pipeline execution.
    3. Nel campo Tempo di inattività massimo, inserisci un valore. Per saperne di più, consulta Imposta il tempo di inattività massimo.
    4. Imposta il campo Salta l'eliminazione del cluster su True. Per saperne di più, consulta Quando riutilizzare i cluster.
    5. (Facoltativo) Configura altri campi facoltativi.
    6. Fai clic su Crea.

Abilita il riutilizzo dei cluster in una pipeline di cui è stato eseguito il deployment

  1. Vai alla tua istanza:

    1. Nella Google Cloud console, vai alla pagina Cloud Data Fusion.

    2. Per aprire l'istanza in Cloud Data Fusion Studio, fai clic su Istanze e poi su Visualizza istanza.

      Vai a Istanze

  2. Fai clic su Elenco.

  3. Fai clic sulla scheda Con deployment e poi sul nome di una pipeline. La pipeline di cui è stato eseguito il deployment si apre nella pagina Studio nell'interfaccia web di Cloud Data Fusion.

  4. Fai clic su Configura.

  5. Nella finestra Configurazione di computing, vai al profilo scelto e fai clic su Personalizza.

  6. Nella finestra che si apre, inserisci i seguenti valori:

    1. Nel campo Tempo di inattività massimo, inserisci un valore. Per saperne di più, consulta Imposta il tempo di inattività massimo.
    2. Imposta Salta l'eliminazione del cluster su True. Per saperne di più, consulta Quando riutilizzare i cluster.

  7. Fai clic su Fine.

Passaggi successivi