Senior Data Platform Engineer (Python/GCP)

Dla naszego klienta szukamy osoby na stanowisko Data Platform Engineera do projektu transformacji platformy danych, którego celem jest modernizacja środowiska przetwarzania danych użytkowników oraz rozwój nowoczesnych rozwiązań wspierajacych analizę zachowań odbiorców.
Requirements:
Bardzo dobra znajomość Pythona Praktyczne doświadczenie z Google Cloud Platform, w szczególności: GKE, GCE, Pub/Sub, BigQuery, Dataflow, Cloud Functions Doświadczenie z Terraform Znajomość konteneryzacji i Kubernetes (GKE) Doświadczenie z Dataform oraz Cloud Build (CI/CD) Gotowość do pracy z kodem napisanym w Go oraz Java Znajomość architektury event-driven oraz systemów opartych o przetwarzanie strumieniowe Język angielski na poziomie minimum B2 Gotowość do udziału w rotacyjnym wsparciu w rozszerzonych godzinach pracy (8:00–20:00) Gotowość do pelnienia dyzurów on-call 24/7.
Must have: Python, Terraform, Airflow, BigQuery, GCP, Kubernetes
Daily tasks: - Projektowanie i rozwój wysokowydajnych pipeline'ów danych w Pythonie
– Utrzymanie istniejących komponentów napisanych w Go oraz Java
– Wdrażanie infrastruktury przy użyciu Terraform zgodnie z modułowym podejściem
– Tworzenie własnych komponentów infrastrukturalnych w przypadku bardziej złożonych scenariuszy
– Rozwój strategii testowania z wykorzystaniem Pytest oraz wdrażanie bardziej proaktywnych metod zapewniania jakości
– Monitorowanie usług przy użyciu Cloud Logging, Grafana i Prometheus
– Zarządzanie uprawnieniami w Google Cloud Platform z wykorzystaniem IAM
– Współpraca z Product Managerami oraz zespołami technicznymi w środowisku Agile
– Udział w rotacyjnym wsparciu w rozszerzonych godzinach pracy (8:00–20:00) oraz dyżurach produkcyjnych (on-call)