Senior Data Engineer

Kim jest Brightpath Technologies? Jesteśmy firmą konsultingową, która pomaga klientom w automatyzacji procesów biznesowych przy pomocy AI, a specjalistom IT rozwijać karierę w modelu B2B. Oferujemy projekty z branż takich jak fintech, medtech, edutech czy automatyka przemysłowa. Dzięki ścisłej współpracy wspieramy rozwój naszych klientów poprzez dostarczanie szybkich i mierzalnych efektów, jednocześnie zapewniając specjalistom IT możliwości rozwoju kariery i zdobywania cennego doświadczenia. Dlaczego warto z nami współpracować? ✨ Elastyczność – Wybierasz projekty dopasowane do swoich umiejętności i zainteresowań, z możliwością zmiany w ramach naszej firmy lub grupy Euvic, której jesteśmy częścią. 💡 Przejrzystość – Masz jasne zasady współpracy i pełną transparentność wynagrodzenia oraz warunków. 🚀 Szybkość działania – Dzięki naszej efektywności szybko znajdziesz lub zmienisz projekt, który idealnie odpowiada Twoim kompetencjom. 🌟 Możliwość rozwoju – Pracujesz przy innowacyjnych projektach, rozwijając kluczowe kompetencje i zdobywając cenne doświadczenie. Poszukujemy doświadczonego Senior Data Engineera , który wesprze nasz zespół i przejmie kluczowe obowiązki w długofalowym projekcie. Będziesz odpowiedzialny za budowanie i utrzymywanie nowoczesnych platform analitycznych w chmurze, wspierających kluczowe procesy biznesowe. Twój zakres obowiązków: Projektowanie i rozwój: Tworzenie i utrzymywanie zaawansowanych rozwiązań Data Engineering w środowiskach chmurowych. Optymalizacja: Budowanie i usprawnianie potoków danych (ETL/ELT). Dbałość o jakość: Praca z ogromnymi wolumenami danych z silnym naciskiem na obszar Data Quality . Kodowanie: Implementacja rozwiązań opartych na PySpark i SQL . Testowanie: Tworzenie i utrzymywanie testów jednostkowych oraz integracyjnych. Automatyzacja: Rozwój i utrzymanie procesów CI/CD. Współpraca: Bliski kontakt z technicznymi i biznesowymi zespołami po stronie klienta. Nasze wymagania (Stack Technologiczny): Szukamy eksperta z wieloletnim doświadczeniem, który płynnie porusza się w następujących technologiach: Cloud (AWS & GCP): AWS CDK, AWS Lambda, Databricks, Google Cloud Platform, Google App Engine, BigQuery, Dataproc (aktualnie najbardziej potrzebna osoba z doświadczeniem w chmurze GCP) Orkiestracja i IaC: Airflow, Terraform Core Skills: Bardzo dobra znajomość PySpark oraz SQL QA & DevOps: GitHub Actions (CI/CD), Unit Testing, Integration Testing, Data Quality Czego oczekujemy? Doświadczenia na poziomie Senior w obszarze Data Engineering. Praktycznej znajomości wyżej wymienionego stacku technologicznego (szczególnie środowisk AWS i GCP). Skrupulatności i nastawienia na jakość kodu oraz danych. Dobrych umiejętności komunikacyjnych i płynnego języka angielskiego (praca w międzynarodowej organizacji).