Senior Data Engineer (GCP)

Cześć! Poznaj możliwości współpracy ze Scalo! W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Wykorzystujemy szerokie spektrum usług IT, aby wspierać naszych klientów w realizacji ich celów biznesowych. Obszary naszej działalności obejmują m.in.: doradztwo technologiczne, tworzenie oprogramowania, systemy wbudowane, rozwiązania chmurowe, zarządzanie danymi, dedykowane zespoły projektowe. Co oferujemy w ramach współpracy? możliwość świadczenia usług w różnorodnych projektach z obszaru Software, Embedded, Data i Cloud Services, zaangażowanie w dodatkowe inicjatywy presealsowe oraz eksperckie , dostęp do opieki medycznej, karty sportowej oraz platformy kafeteryjnej zgodnie z obowiązującymi zasadami współpracy.
Requirements:
Kompetencje wymagane do realizacji usług: doświadczenie w projektowaniu i budowie rozwiązań chmurowych w Google Cloud Platform (GCP), praktyczne doświadczenie w projektowaniu i implementacji systemów przetwarzania danych oraz integracji systemów, bardzo dobra znajomość BigQuery, Dataproc, Composer (Airflow) oraz Cloud Storage, bardzo dobra znajomość Python i SQL, pozwalająca na samodzielne tworzenie i rozwój aplikacji oraz komponentów integracyjnych, doświadczenie w pracy z potokami danych i procesami ich przetwarzania, znajomość GitHub oraz doświadczenie w pracy z repozytoriami kodu, doświadczenie z Google Artifact Registry, umiejętność samodzielnej realizacji zadań przy jednoczesnej współpracy z zespołem, umiejętność pracy zgodnie z przyjętymi standardami technicznymi i architektonicznymi, komunikatywność, otwartość na wymianę wiedzy oraz umiejętność uwzględniania potrzeb biznesowych podczas projektowania rozwiązań.
Must have: Google Cloud Platform, GCP, BigQuery, Airflow, Cloud, Storage, Python, SQL, CA, GitHub
Daily tasks: - rozwój i utrzymanie rozwiązań do przetwarzania danych w środowisku Google Cloud Platform (GCP),
– projektowanie i tworzenie potoków danych typu batch i streaming,
– wykorzystanie usług BigQuery, Dataflow, Dataproc, Composer (Airflow) oraz Cloud Storage,
– rozwój komponentów i aplikacji w Pythonie oraz SQL,
– budowę i optymalizację struktur danych wspierających analitykę i raportowanie,
– automatyzację procesów wdrożeniowych z wykorzystaniem Terraform i GitHub,
– zarządzanie artefaktami aplikacyjnymi przy wykorzystaniu Google Artifact Registry,
– testowanie, monitorowanie oraz utrzymanie rozwijanych rozwiązań,
– współpracę z analitykami, architektami i zespołami projektowymi przy realizacji wymagań biznesowych,
– aktywny udział w dyskusjach dotyczących architektury oraz długofalowego rozwoju platformy danych,
– świadczenie usług w modelu hybrydowym z Warszawy,
– stawkę do 160 PLN/h NET + VAT na B2B.