Zakres współpracy obejmuje:
udział w projekcie realizowanym dla międzynarodowej organizacji z sektora bankowego, w obszarze zarządzania i przetwarzania danych,
analizę istniejących modeli danych, przepływów, transformacji oraz zależności w środowisku Data Lake,
rozwój i utrzymanie procesów Python, ETL oraz pipeline’ów danych,
implementację mechanizmów ingestii, transformacji i przetwarzania danych,
rozwój i utrzymanie zadań Control-M oraz procesów batchowych,
tworzenie i dostosowywanie modeli danych oraz datasetów na potrzeby rozwiązania z obszaru Limits,
analizę danych z wykorzystaniem SQL, walidację oraz uzgadnianie danych pomiędzy różnymi źródłami,
wdrażanie mechanizmów kontroli jakości danych oraz wsparcie w rozwiązywaniu problemów związanych z danymi,
udział w testach, certyfikacji, wdrożeniach oraz release’ach produkcyjnych,
przygotowywanie i utrzymywanie dokumentacji technicznej dotyczącej modeli danych, procesów i transformacji,
współpracę w modelu hybrydowym z Warszawy,
stawkę do 145 zł/h + VAT (B2B).
Kompetencje wymagane do realizacji usług:
minimum 2 lata doświadczenia w obszarze Data Engineering / Big Data,
praktyczna znajomość środowisk Big Data oraz Data Lake,
bardzo dobra znajomość SQL,
doświadczenie w programowaniu w Python,
praktyczne doświadczenie w tworzeniu procesów ETL,
doświadczenie w ingestii oraz transformacji danych,
znajomość budowy i utrzymania data pipelines,
doświadczenie w modelowaniu danych,
znajomość Control-M oraz procesów batchowych,
umiejętność analizy, walidacji i uzgadniania danych,
znajomość języka angielskiego na poziomie minimum B2,
mile widziana znajomość Atoti / ActiveViam,
mile widziane doświadczenie z Databricks,
dodatkowym atutem będzie znajomość REST API i architektury mikroserwisowej,
mile widziana znajomość Jira i Confluence,
dodatkowym atutem będzie doświadczenie w obszarze Counterparty Risk / Limits.