Implement data engineering solutions using Azure Databricks (DP-750T00)

Business Intelligence
Strojově přeloženo

Osvojte si komplexní datové inženýrství s Azure Databricks a Unity Catalog. Tento kurz postupuje od základního nastavení až po produkční nasazení a zahrnuje konfiguraci prostředí a správu na podnikové úrovni. Naučíte se budovat robustní ingestion pipeline, implementovat zabezpečení pomocí Unity Catalog a nasazovat optimalizované pracovní zátěže. Po absolvování kurzu budete disponovat praktickými dovednostmi pro implementaci, zabezpečení a údržbu škálovatelných lakehouse řešení splňujících náročné podnikové požadavky.


Profil cílové skupiny

Cílovou skupinou jsou datoví inženýři, kteří mají základní znalosti konceptů datové analytiky, základní porozumění cloudovému úložišti a znalost principů organizace dat. Měli by být schopni pracovat s SQL a mít zkušenosti s využíváním Pythonu, včetně notebooků, pro úlohy datového inženýrství. Od účastníků se očekává dobrá znalost pracovních prostorů Azure Databricks a Unity Catalog, spolu se znalostí vzorů přístupu k datům a základních konceptů datového inženýrství a datových skladů. Dále by měli mít základní znalosti zabezpečení Azure, včetně Microsoft Entra ID, a znalost základů správy verzí pomocí Git.


Předpoklady

  • Základní znalosti konceptů datové analytiky
  • Základní porozumění konceptům cloudového úložiště
  • Znalost SQL a principů organizace dat


Osnova kurzu

Nastavení a konfigurace prostředí Azure Databricks

  • Seznámení s Azure Databricks
  • Porozumění architektuře Azure Databricks
  • Porozumění integracím Azure Databricks
  • Výběr a konfigurace výpočetních prostředků v Azure Databricks
  • Vytváření a organizace objektů v Unity Catalog


Zabezpečení a správa objektů Unity Catalog v Azure Databricks

  • Zabezpečení objektů Unity Catalog
  • Správa objektů Unity Catalog


Příprava a zpracování dat s Azure Databricks

  • Návrh a implementace datového modelování s Azure Databricks
  • Ingestion dat do Unity Catalog
  • Čištění, transformace a načítání dat do Unity Catalog
  • Implementace a správa omezení kvality dat s Azure Databricks


Nasazení a údržba datových pipeline a pracovních zátěží s Azure Databricks

  • Návrh a implementace datových pipeline s Azure Databricks
  • Implementace Lakeflow Jobs s Azure Databricks
  • Implementace procesů životního cyklu vývoje v Azure Databricks
  • Monitorování, řešení potíží a optimalizace pracovních zátěží v Azure Databricks