Managed Service pour Apache Spark propose deux niveaux : un niveau standard et un niveau premium (hautes performances). Ces niveaux vous permettent d'aligner les exigences de performances et l'accès aux fonctionnalités sur un coût optimal.
Avantages du niveau Premium
Le niveau Premium se distingue du niveau Standard par ses fonctionnalités supplémentaires. Le niveau Premium fournit une accélération avancée des requêtes, ainsi qu'une accélération du calcul, du disque et de la mémoire, souvent requise par les charges de travail complexes ou sensibles à la latence.
Fonctionnalités et capacités du niveau Premium
Le tableau suivant présente les fonctionnalités et capacités exclusives du niveau Premium de Managed Service pour Apache Spark.
| Fonctionnalité | Standard | Premium |
|---|---|---|
| Lightning Engine (accélération des requêtes) |  |
(par défaut : activé, sauf pour les sessions interactives) |
| Charges de travail interactives (sessions) | |
(par défaut : activé) |
| Jobs nécessitant de nombreuses opérations de brassage (disque premium) | |
(par défaut : désactivé) |
| Jobs gourmands en mémoire (extension de mémoire) | |
(par défaut : désactivé) |
| Compatibilité avec les GPU | |
(par défaut : désactivé) |
| Charges de travail par lot | ||
| Autoscaling | ||
| UI Spark sans serveur | ||
| Traçabilité, sécurité et conformité (VPC-SC, CMEK) |
Charges de travail et sessions par lot de niveau Premium
Les charges de travail et sessions suivantes nécessitent le niveau Premium :
- Lightning Engine : disponible exclusivement dans le niveau Premium, Lightning Engine est une fonctionnalité essentielle qui accélère les performances de Spark grâce à une exécution optimisée des requêtes. Il est activé par défaut lorsque vous sélectionnez le niveau Premium pour les charges de travail par lot en définissant la propriété
dataproc.tiersurpremium. - Sessions interactives : les sessions interactives sont automatiquement traitées comme une fonctionnalité premium de grande valeur. Elles sont lancées via l'API de sessions Managed Service pour Apache Spark et sont facturées au tarif DCU premium. Elles offrent des fonctionnalités telles que l'interactivité à faible latence et la gestion de l'état. Pour les sessions interactives, vous activez Lightning Engine en définissant la propriété
spark.dataproc.enginesurlightningEngine. - Compatibilité avec les GPU : la compatibilité avec les GPU n'est disponible que dans le niveau Premium. Elle est désactivée par défaut. Vous l'activez via des options de configuration. La compatibilité avec les GPU utilise une infrastructure spécialisée et est couverte par le tarif premium des DCU, sans frais de calcul supplémentaires.
Modèle de tarification prévisible du niveau Premium
Le niveau Premium utilise un modèle de tarification simplifié et tout compris pour ses fonctionnalités de base. Le tarif DCU premium couvre l'accès à des fonctionnalités à forte valeur ajoutée telles que Lightning Engine, la mémoire étendue et l'infrastructure spécialisée nécessaire aux jobs nécessitant un brassage intensif. Lorsque vous activez ces fonctionnalités via des options de configuration, elles sont incluses dans le tarif de base des DCU Premium et n'entraînent aucuns frais de calcul supplémentaires. Cela signifie que vous payez un tarif premium unique et prévisible pour accéder à l'ensemble des fonctionnalités avancées du niveau premium.