Azure Data Factory a Data Lake – budování moderní datové architektury v cloudu (AZRDF)

Databáze, Datová analytika

Stojíte před úkolem migrovat vaše datová úložiště do cloudu, nebo chcete modernizovat stávající on-premise ETL procesy? MS Azure nabízí robustní ekosystém pro moderní datové inženýrství. Tento intenzivní dvoudenní kurz vás provede praktickým návrhem a implementací škálovatelné datové architektury s využitím klíčových služeb Azure Data Factory (ADF) a Azure Data Lake Storage Gen2 (ADLS). Během workshopu si vytvoříte jednoduchý, realistický datový pipeline framework.

TOTO ŠKOLENÍ VÁM POMŮŽE:

  • Porozumět principům cloudové datové platformy v Azure
  • Navrhnout a implementovat moderní datovou architekturu podle celosvětového standardu Medallion Architecture (Bronze / Silver / Gold)
  • Načítat data z různých zdrojů (relační databáze, CSV soubory, REST API) a bezpečně je ukládat do Data Lake

KDO BY SE MĚL KURZU ZÚČASTNIT?

  • Data Engineers a BI specialisté, kteří chtějí rozšířit své znalosti o cloudové technologie
  • Datoví architekti, kteří navrhují moderní datové platformy
  • Vývojáři, kteří pracují s datovými platformami a chtějí ovládnout orchestraci v ADF
  • Všichni, kdo přemýšlí nad využitím Azure Cloud pro ETL framework

KDE A KDY KURZ PROBÍHÁ?



S námi máte na výběr: Přijďte na kurz osobně do naší učebny, nebo se ke kurzu připojte online. Vámi preferovanou formu můžete zvolit v průběhu objednávky. Více informací k hybridní formě školení naleznete zde.

Odemkněte potenciál svých zaměstnanců. Každé školení z naší nabídky přizpůsobíme konkrétním cílům i lidem.
Potřebujete školení přímo u vás ve firmě, nebo upravit obsah a délku na míru? ICT Pro je ideální řešení. Školit můžeme také v angličtině.

Poptat kurz na míru

Náplň kurzu:

Skrýt detaily
  • Základy cloud datové architektury a Azure Data Factory
    1. Principy moderní datové platformy v Azure
    2. Role orchestrátoru a datového úložiště v datové architektuře
    3. Přehled služeb Azure Data Factory
    4. Popis Integration Runtime a způsoby připojení ke zdrojům dat
    5. Práce s Azure Data Lake Storage Gen2
    6. Medallion architektura (Bronze / Silver / Gold)
    7. Vytvoření první ADF pipeline
    8. Načítání dat z relační databáze do datového lake
    9. Ingest souborových dat (CSV) do ADLS
  • Metadata-driven ETL framework
    1. Orchestrace datových pipeline v Azure Data Factory
    2. Načítání dat z více zdrojů (SQL databáze, soubory, REST API)
    3. Návrh metadata tabulky pro řízení ETL procesů
    4. Implementace metadata-driven pipeline (Lookup + ForEach)
    5. Inkrementální načítání dat
    6. Transformace dat mezi Bronze a Silver vrstvou
    7. Monitoring a správa pipeline v Azure Data Factory
    8. Shrnutí architektury a doporučení pro produkční řešení
Předpokládané znalosti:
Předpokládána je základní znalost SQL a obecných principů práce s databázemi
Časový rozvrh:
2 dny (9:00-17:00)
Cena za osobu:
16 900,00 Kč (20 449,00 Kč včetně 21% DPH)