Nasz Klient to organizacja realizująca projekty związane z rozwojem platform danych, integracją systemów oraz przetwarzaniem dużych zbiorów danych w środowisku chmurowym.
Projekt koncentruje się na projektowaniu i rozwijaniu skalowalnych rozwiązań Data Engineering w Amazon Web Services, z wykorzystaniem Pythona i Apache Spark.
Poszukujemy osoby do współpracy w roli AWS Data Engineer, która posiada doświadczenie w budowie pipeline'ów danych oraz praktyczną znajomość technologii AWS.
📍 TRYB WSPÓŁPRACY: 100% Zdalnie z Polski
⏱️ DOSTĘPNOŚĆ: Termin rozpoczęcia współpracy do uzgodnienia
🧑💻 CZYM BĘDZIESZ SIĘ ZAJMOWAĆ?
Projektowaniem i rozwijaniem procesów przetwarzania danych w AWS.
Budowaniem i optymalizacją pipeline'ów ETL/ELT.
Implementacją procesów przetwarzania danych z wykorzystaniem Pythona.
Tworzeniem rozwiązań przetwarzania dużych zbiorów danych w Apache Spark.
Integracją danych z różnych źródeł i systemów.
Rozwojem rozwiązań przechowywania i przetwarzania danych w chmurze.
Optymalizacją wydajności i niezawodności procesów Data Engineering.
Analizowaniem problemów związanych z jakością i spójnością danych.
Współpracą z architektami i zespołami technicznymi.
Przygotowywaniem dokumentacji technicznej.
🔍 CZEGO OD CIEBIE OCZEKUJEMY?
Must have:
Minimum 2–3 lata komercyjnego doświadczenia w Data Engineering.
Bardzo dobra znajomość Python.
Praktyczna znajomość Apache Spark / PySpark.
Doświadczenie w projektach realizowanych w AWS.
Znajomość usług AWS związanych z przetwarzaniem i przechowywaniem danych.
Dobra znajomość SQL.
Doświadczenie w projektowaniu procesów ETL/ELT.
Znajomość zagadnień związanych z przetwarzaniem dużych zbiorów danych.
Umiejętność optymalizacji pipeline'ów danych.
Znajomość języka angielskiego umożliwiająca komunikację projektową.
Nice to have:
Doświadczenie z AWS Glue.
Znajomość Amazon S3, Athena lub Redshift.
Doświadczenie z AWS Lambda.
Znajomość Apache Airflow.
Doświadczenie z Terraform.
Znajomość CI/CD i Git.
🤝 DLACZEGO WARTO?
Realizacja projektów Data Engineering w środowisku AWS.
Praktyczne wykorzystanie Pythona i Apache Spark.
Udział w rozwoju skalowalnych platform danych.
Możliwość rozwijania kompetencji w obszarze Big Data i Cloud.
Współpraca z doświadczonymi specjalistami technologicznymi.
📍 Dziękujemy za wszystkie zgłoszenia! Skontaktujemy się z wybranymi osobami.
TQLO Sp. z o.o. – Agencja Zatrudnienia (nr KRAZ 33580)