Data Engineer

Duchoslav Pavel, e-mail: ***

Vaše odpovědnosti:
- Navrhování, vytváření a optimalizace datových kanálů pro usnadnění extrakce dat z více zdrojů
- Poskytování podpory první úrovně pro

požadavky

koncových uživatelů při řešení problémů s datovými kanály
- Vyvíjení ETL/ELT (dávkový/streamový) systém z více zdrojů pomocí Sparku a/nebo Kafky
- Provozování datových kanálů pro zajištění správy klíčových SLA napříč širokou škálou producentů a spotřebitelů
- Podpora různých komponent datových kanálů, včetně příjmu, validace, čištění a kurace
- Podpora spolupráce v oblasti dat, orchestrace, kvality, zabezpečení, přístupu a snadného použití
- Shromažďování datových požadavků od analytických a obchodních oddělení
- Psaní a správa provozní a technické dokumentace a provádění úkolů v agilní metodologii

Váš profil:
- Praktické zkušenosti s cloudovými nativními technologiemi, Azure/GCP
- Přímé zkušenosti s budováním datových kanálů, jako je Data Factory
- Porozumění široké škále technologií pro big data a datové architektury
- Znalost datových platforem a technologií, jako jsou Kafka, Delta Lake, Spark; Databricks výhodou
- Prokázaná zkušenost s jedním nebo více programovacími jazyky, nejlépe Pythonem
- Dobrá znalost CI/CD a nástrojů pro správu verzí, jako jsou Jenkins a GitHub Actions
- Zkušenosti s monitorovacími nástroji, jako jsou Prometheus, Grafana, ELK stack, výhodou
- Schopnost začlenit do role inženýrské i provozní (DevOps) myšlení
- Silný týmový hráč ochotný spolupracovat s kolegy napříč kancelářemi a funkcemi
- Znalost psané i mluvené angličtiny