Data Engineer

Data Engineer at Halcyon Labs
Data engineer
Department: Comercial/Axa
Employment Type: Empleado permanente
Schedule: Tiempo completo
Seniority: Con experiencia
Location: Barcelona
Buscamos un/a Data Engineer con experiencia en entornos cloud para el desarrollo, despliegue y mantenimiento de pipelines de datos(ETL/ELT) en Azure y Databricks. Formarás parte de un equipo de datos colaborativo, trabajando junto a arquitectos, analistas y científicos de datos en la construcción de soluciones robustas y escalables.
Funciones:
– Diseñar, desarrollar y mantener pipelines de datos (ETL/ELT) en entornos cloud.
– Trabajar con plataformas de datos basadas en Azure y Databricks.
– Implementar procesos de ingesta, transformación y almacenamiento de datos.
– Optimizar jobs y clusters en Apache Spark.
– Gestionar workflows y jobs en Databricks.
– Aplicar arquitecturas modernas de datos (medallion architecture).
– Diseñar modelos de datos eficientes.
– Asegurar la calidad, consistencia y fiabilidad del dato.
– Colaborar con equipos de datos (arquitectos, analistas, data scientists).
– Resolver incidencias en entornos productivos y optimizar rendimiento.
– Aplicar buenas prácticas de desarrollo, versionado y CI/CD.
– Mentalidad proactiva y fuerte sentido de ownership.
– Alta atención al detalle y enfoque en la calidad del dato.
– Capacidad para escribir código limpio, mantenible y bien documentado.
– Capacidad de trabajo en equipo y colaboración.
– Resolución de problemas y autonomía en entornos dinámicos.
– +4 años de experiencia como Data Engineer.
– Experiencia en Azure (Azure Data Lake Storage, Azure Data Factory).
– Experiencia en Databricks (Apache Spark, workflows, Delta Lake).
– Conocimiento de arquitectura medallion.
– Fuertes habilidades de modelado de datos.
– Programación en Python (PySpark).
– Excelente nivel de SQL.
– Conocimiento de buenas prácticas de desarrollo, control de versiones y CI/CD.
– Experiencia en desarrollo, despliegue y mantenimiento de pipelines ETL/ELT.
– Experiencia resolviendo incidencias en entornos productivos.
– Conocimientos de Scala.
– Experiencia con otros cloud providers (AWS, GCP).
– Experiencia en integración de APIs de terceros.
– Conocimiento de tecnologías de streaming (Spark Streaming).
– Experiencia con Infraestructura como Código (IaC).
– Conocimiento de data governance.
Buen nivel de inglés.Híbrido. Barcelona.
¡Un día libre por tu cumpleaños para que lo celebres como quieras!
Mejoras en permisos retribuidos para un mejor equilibrio personal y profesional.
Acceso a seguro médico privado para tu tranquilidad.
Días de vacaciones extra según tu antigüedad, porque valoramos tu descanso y bienestar.
En Halcyon Labs apostamos por la diversidad y la igualdad de oportunidades.
Animamos a postularse a todas las personas, con independencia de su género, edad, discapacidad, orientación sexual, identidad de género, origen étnico, religión u otras circunstancias personales o sociales.