Senior Data Engineer

Dla naszego klienta, międzynarodowej organizacji z sektora mediów i broadcastingu, poszukujemy Senior Data Engineera do długoterminowego projektu realizowanego w modelu zastępstwa za kluczowego członka zespołu po stronie klienta. Szukamy osoby bardzo samodzielnej, technicznie dojrzałej i gotowej szybko wejść w istniejące środowisko projektowe. Projekt dotyczy rozwoju i utrzymania rozwiązań związanych z przetwarzaniem dużych wolumenów danych, integracją danych oraz zapewnieniem ich jakości w środowisku chmurowym. Zakres obowiązków Na tym stanowisku będziesz odpowiadać za: projektowanie, rozwój i utrzymanie rozwiązań data engineering w środowiskach cloud, budowę, optymalizację i utrzymanie pipeline’ów danych ETL/ELT, przetwarzanie dużych wolumenów danych z naciskiem na Data Quality, implementację rozwiązań z wykorzystaniem PySpark oraz SQL, tworzenie i utrzymanie testów jednostkowych oraz integracyjnych, automatyzację procesów CI/CD, współpracę z zespołami technicznymi i biznesowymi po stronie klienta, przejęcie obowiązków kluczowego członka zespołu klienta. Wymagania Szukamy osoby, która posiada: senioralne doświadczenie w obszarze Data Engineering, doświadczenie w pracy z architekturami cloud, bardzo dobrą znajomość PySpark oraz SQL, doświadczenie w pracy z dużymi zbiorami danych i przetwarzaniem danych w skali, praktyczne doświadczenie z Data Quality, doświadczenie w tworzeniu testów jednostkowych i integracyjnych dla pipeline’ów danych, doświadczenie w automatyzacji procesów CI/CD, bardzo dobrą znajomość języka angielskiego, minimum B2+, umożliwiającą codzienną komunikację projektową. Technologie i narzędzia W projekcie wykorzystywane są między innymi: AWS CDK, AWS Lambda, Databricks, Google Cloud Platform, Google App Engine, BigQuery, Dataproc, Airflow, Terraform, GitHub Actions, Jenkins. Oferujemy: Stawka do 170 zł/h netto na b2b Przelew w dogodnej formie Długoterminowy kontrakt Krótki 14-dniowy termin płatności faktury Bogaty pakiet usług prywatnej opieki medycznej Dostęp do platformy kafeteryjnej MyBenefit (umożliwiającej zamawianie kart Multisport, kart przedpłaconych do Ikea, Zalando, Notino i wielu innych)