Zadania:
- Projektowanie, implementacja oraz rozwój procesów ETL/ELT z wielu systemów źródłowych do warstwy brązowej Hurtowni Danych.
- Projektowanie i utrzymanie architektury danych oraz schematów w warstwie brązowej, z naciskiem na wydajność, skalowalność i niezawodność.
- Integracja danych z systemów źródłowych z wykorzystaniem API oraz innych mechanizmów wymiany danych.
- Tworzenie, optymalizacja i utrzymanie zaawansowanych zapytań SQL wykorzystywanych w procesach ładowania danych oraz przez zespoły analityczne.
- Wykorzystanie Pythona do transformacji, walidacji i przetwarzania danych, automatyzacji procesów oraz budowy komponentów wspierających pipeline'y ETL.
- Zapewnienie wysokiej jakości danych poprzez walidacje, kontrolę kompletności, monitoring oraz udział w rozwiązywaniu incydentów danych.
- Ścisła współpraca z zespołami danych i analiz przy definiowaniu kontraktów danych pomiędzy warstwą brązową a warstwami srebrną i złotą oraz przy planowaniu zmian w modelach danych.
Oczekiwania:
- Minimum 3 lata komercyjnego doświadczenia na stanowisku Inżyniera Danych lub pokrewnym.
- Bardzo dobra znajomość SQL oraz relacyjnych baz danych (PostgreSQL, MS SQL Server).
- Praktyczne doświadczenie w projektowaniu, budowie i orkiestracji procesów ETL/ELT, w tym harmonogramowaniu zadań.
- Dobra znajomość języka Python w kontekście przetwarzania i transformacji danych.
- Doświadczenie we współpracy z narzędziami BI (np. Power BI, Apache Superset) w zakresie zasilania modeli danych i raportów.
- Znajomość zagadnień jakości danych, wersjonowania schematów oraz podstawowych praktyk CI/CD w projektach danych.
- Umiejętność efektywnej współpracy z analitykami danych i interesariuszami biznesowymi, dobra komunikacja oraz samodzielność w rozwiązywaniu problemów.
Proponujemy:
- Pracę przy nowoczesnych rozwiązaniach danych w innowacyjnej firmie z sektora edukacji.
- Atrakcyjne warunki współpracy, adekwatne do doświadczenia i kompetencji.
- System premiowy.
- Elastyczne formy zatrudnienia: umowa o pracę (pełny etat) lub współpraca B2B.
- Model pracy hybrydowej (3 dni w biurze, 2 dni zdalnie).
- Nowoczesne i komfortowe biuro w Warszawie (okolice Dworca Zachodniego).
- Możliwość rozwoju kompetencji i udziału w interesujących projektach.
- Prywatną opiekę medyczną (z możliwością rozszerzenia na rodzinę) oraz dodatkowe benefity, takie jak ubezpieczenie na życie i karta sportowa.
Mile widziane:
- Doświadczenie w pracy z Mage.ai lub innymi narzędziami orkiestracji danych.
- Doświadczenie w środowiskach chmurowych.
