Inżynier / Inżynierka Danych / ETL Developer

Poszukujemy Inżyniera Danych / ETL Developera, który dołączy do zespołu odpowiedzialnego za rozwój i utrzymanie nowoczesnej platformy danych opartej o Snowflake.

Osoba na tym stanowisku będzie projektować i rozwijać procesy integracji oraz modele danych, dbając o ich jakość, spójność, dostępność i bezpieczeństwo. Będzie również odpowiadać za stosowanie zasad Data Governance, w tym zarządzanie metadanymi, źródłami danych i dostępem do nich. 

Stanowisko wymaga współpracy z architektami, analitykami, zespołami BI, właścicielami systemów oraz Data Ownerami.

• projektowanie, rozwój i utrzymanie procesów ETL/ELT zasilających platformę danych ze źródeł takich jak Oracle, SQL Server, systemy biznesowe, pliki i API,
• rozwój rozwiązań na platformie Snowflake, w tym optymalizacja zapytań SQL, procesów w SQL i Python oraz wykorzystania zasobów,
• projektowanie struktur i modeli danych na potrzeby hurtowni, raportowania i analityki,
• zapewnienie jakości, spójności, kompletności i aktualności danych oraz wdrażanie mechanizmów kontroli Data Quality,
• stosowanie standardów Data Governance, w tym Źródeł Danych, zarządzania metadanymi, nazewnictwa, retencji i udostępniania danych,
• dokumentowanie źródeł, transformacji i przepływów danych,
• stosowanie klasyfikacji danych oraz mechanizmów ochrony i kontroli dostępu, w szczególności RBAC,
• współpraca z Data Ownerami, architektami, analitykami, zespołami BI, bezpieczeństwa i właścicielami systemów źródłowych.

• minimum 2–3 lata doświadczenia w Data Engineering, hurtowniach danych lub tworzeniu procesów ETL/ELT,
• bardzo dobra znajomość SQL i co najmniej podstawowa znajomość Python,
• praktyczne doświadczenie w projektowaniu procesów ETL/ELT, modelowaniu danych i pracy z relacyjnymi bazami danych,
• znajomość architektury Data Warehouse, Data Lake i Lakehouse oraz integracji danych z wielu źródeł, oraz wykorzystanie AI,
• umiejętność diagnozowania problemów jakościowych i wydajnościowych oraz projektowania mechanizmów kontroli jakości danych,
• znajomość Git oraz zasad Data Governance, Data Quality, Metadata Management i Źródeł Danych, oraz ról Data Owner,
• samodzielność i odpowiedzialność za rozwiązanie w całym cyklu życia: od projektu i wdrożenia po utrzymanie i doskonalenie,
• świadome i bezpieczne stosowanie AI, z ochroną danych poufnych i krytyczną weryfikacją wyników,
• język angielski umożliwiający korzystanie z dokumentacji technicznej.

• praktyczne doświadczenie z Snowflake i jego mechanizmami przetwarzania, automatyzacji oraz zarządzania dostępem,
• znajomość narzędzi orkiestracji i integracji danych, np. Apache Airflow, Azure Data Factory lub Informatica, oraz Microsoft Azure oraz Power BI lub innych narzędzi BI,
• doświadczenie z narzędziami Data Catalog / Data Governance, np. Snowflake Horizon, Microsoft Purview lub Collibra,
• doświadczenie z dużymi wolumenami danych i rozbudowanymi środowiskami IT.