Implementowanie zadań lakeflow za pomocą usługi Azure Databricks

Średni
Inżynier danych
Azure Databricks

Ten moduł przeprowadzi Cię przez proces implementowania zadań lakeflow w usłudze Azure Databricks. Dowiesz się, jak tworzyć zadania, konfigurować wyzwalacze i harmonogramy, konfigurować alerty i zarządzać automatycznymi ponownymi uruchomieniami w celu zapewnienia niezawodnego wykonywania potoku danych.

Cele szkolenia

Po ukończeniu tego modułu będziesz wiedzieć, jak wykonać następujące czynności:

  • Tworzenie i konfigurowanie zadań Lakeflow z zasobami obliczeniowymi
  • Konfiguracja wyzwalaczy zadań, w tym aktualizacji tabel i przybycia plików
  • Planowanie zadań przy użyciu interwałów i wyrażeń cron
  • Konfigurowanie alertów zadań i powiadomień na potrzeby monitorowania
  • Konfigurowanie automatycznych ponownych uruchomień i polityk ponawiania w celu zapewnienia niezawodności

Wymagania wstępne

Należy wykonać następujące wymagania wstępne:

  • Podstawowa wiedza na temat obszarów roboczych usługi Azure Databricks
  • Znajomość pojęć związanych z inżynierią danych