Managed Service for Apache Spark offre due livelli: un livello standard e un livello premium (ad alte prestazioni). Questi livelli ti consentono di allineare i requisiti di prestazioni e l'accesso alle funzionalità con il costo ottimale.
Vantaggi del livello Premium
Il livello Premium si distingue dal livello Standard per le funzionalità aggiuntive. Il livello Premium offre un'accelerazione avanzata delle query e un'accelerazione di computing, disco e memoria, spesso richieste da workload complessi o sensibili alla latenza.
Caratteristiche e funzionalità del livello Premium
La tabella seguente evidenzia le funzionalità e le capacità esclusive del livello Premium di Managed Service for Apache Spark.
| Funzionalità | Standard | Premium |
|---|---|---|
| Lightning Engine (accelerazione delle query) |  |
(valore predefinito: abilitato, ad eccezione delle sessioni interattive) |
| Workload interattivi (sessioni) | |
(valore predefinito: Enabled) |
| Job ad alta intensità di shuffle (disco premium) | |
(valore predefinito: disattivato) |
| Job ad alta intensità di memoria (memoria estesa) | |
(valore predefinito: disattivato) |
| Supporto GPU | |
(valore predefinito: disattivato) |
| Workload batch | ||
| Scalabilità automatica | ||
| UI di Spark serverless | ||
| Lineage, sicurezza e conformità (VPC-SC, CMEK) |
Sessioni e workload batch di livello Premium
I seguenti workload e sessioni richiedono il livello Premium:
- Lightning Engine: disponibile esclusivamente nel livello Premium, Lightning Engine è una funzionalità fondamentale che accelera le prestazioni di Spark tramite l'esecuzione ottimizzata delle query. Viene attivato per impostazione predefinita quando selezioni il livello Premium per i workload batch impostando la proprietà
dataproc.tiersupremium. - Sessioni interattive: le sessioni interattive vengono trattate automaticamente come una funzionalità premium di alto valore. Vengono avviate tramite l'API delle sessioni di Managed Service for Apache Spark e vengono addebitate alla tariffa DCU premium, fornendo funzionalità come l'interattività a bassa latenza e la gestione dello stato. Per le sessioni interattive, attiva Lightning Engine impostando la proprietà
spark.dataproc.enginesulightningEngine. - Supporto GPU: il supporto GPU è disponibile solo nel livello Premium. È disattivata per impostazione predefinita. Puoi attivarla tramite i flag di configurazione. Il supporto GPU utilizza un'infrastruttura specializzata ed è coperto dalla tariffa DCU premium senza costi di computing aggiuntivi.
Modello di prezzi prevedibile per il livello Premium
Il livello Premium utilizza un modello di prezzi semplificato e completo per le sue funzionalità principali. La tariffa DCU premium copre l'accesso a funzionalità di alto valore come Lightning Engine, Extended Memory e l'infrastruttura specializzata necessaria per i job ad alta intensità di shuffle. Quando attivi queste funzionalità tramite i flag di configurazione, vengono incluse nella tariffa DCU premium di base e non comportano costi di calcolo aggiuntivi. Ciò significa che paghi una singola tariffa premium prevedibile per accedere alla suite completa di funzionalità avanzate del livello Premium.