Selezionare e configurare il calcolo in Azure Databricks
Intermedio
Data engineer
Azure Databricks
Azure Databricks offre più opzioni di calcolo ottimizzate per carichi di lavoro diversi. Questo modulo illustra come scegliere il tipo di calcolo corretto, configurare le impostazioni delle prestazioni, gestire le autorizzazioni di accesso e installare le librerie. Si apprenderà quando usare le risorse di calcolo serverless e classiche, come ottimizzare i cluster per costi e prestazioni e procedure consigliate per proteggere le risorse di calcolo.
Obiettivi di apprendimento
Alla fine di questo modulo, sarai in grado di:
- Scegliere i tipi di calcolo appropriati per carichi di lavoro di Azure Databricks diversi
- Configurare le impostazioni delle prestazioni di calcolo, inclusi i tipi di nodo, la scalabilità automatica e la terminazione
- Abilitare le funzionalità di calcolo come l'accelerazione Photon e selezionare le versioni appropriate di Databricks Runtime
- Configurare le autorizzazioni di accesso alle risorse di calcolo e le modalità di accesso ai gruppi dedicati
- Installare e gestire librerie nelle risorse di calcolo usando vari metodi
Prerequisiti
È necessario completare i prerequisiti seguenti:
- Conoscenza di base dei concetti di Azure Databricks
- Familiarità con la gestione del catalogo e dell'area di lavoro di Unity
- Conoscenza delle nozioni fondamentali di Spark e dell'architettura del cluster