- Abalia
- Madrid, Madrid
- Full-Time
- 6 days ago
Data Engineer.
Before you go
Before you leave us, sign up for our email alerts
We don't do job spam, just the best digital jobs delivered straight to your inbox.
Data Engineer: our view in 3 lines...
- The Role:This role is for a data engineer who works with Big Data technologies to modernise data platforms and build reliable data processing pipelines.
- The Person:The person will migrate Hadoop infrastructure to Cloud environments, develop data transformation and validation processes, design and automate data pipelines, and maintain CI/CD processes.
- Requirements:The ideal candidate has experience with Big Data technologies, Spark with Scala, SQL, Apache Airflow, Hadoop, Kubernetes, S3, Parquet and ORC, and CI/CD processes.
About the role
Desde Abalia buscamos incorporar un/a Data Engineer con experiencia en tecnologÃas Big Data para participar en un proyecto de evolución y modernización de plataformas de datos, colaborando en la migración de infraestructuras Hadoop tradicionales hacia entornos Cloud y tecnologÃas de procesamiento distribuido.
La persona seleccionada se integrará en un equipo técnico multidisciplinar, participando en el diseño, desarrollo, optimización y automatización de procesos de datos, asà como en la construcción de pipelines y soluciones de transformación y calidad de la información.
Funciones principales
- Participar en la migración de infraestructuras Hadoop hacia entornos Cloud basados en Kubernetes, almacenamiento de objetos y servicios gestionados de Spark y Airflow.
- Desarrollar procesos de transformación, enriquecimiento y validación de datos utilizando principalmente Spark con Scala y SQL.
- Diseñar, implementar y automatizar pipelines de datos mediante Apache Airflow y herramientas de orquestación.
- Configurar y mantener procesos CI/CD para automatizar despliegues, pruebas y gestión del desarrollo.
- Desarrollar pruebas unitarias y de validación para garantizar la calidad, consistencia e integridad de los datos.
- Trabajar con diferentes tecnologÃas de almacenamiento y procesamiento, incluyendo HDFS, S3/COS, Parquet y ORC.
- Elaborar documentación técnica y colaborar con equipos de desarrollo, operaciones y negocio.
- Aplicar metodologÃas ágiles y buenas prácticas durante todo el ciclo de vida del desarrollo.
SE OFRECE:
Proyecto estable e interesante en modalidad hÃbrida en Madrid capital
Salario acorde a experiencia aportada
Nuestro eslogan «El lado humano de la tecnologÃa» pone de manifiesto lo que ofrecemos tanto al cliente externo como interno, y es que las personas siempre están en el centro de todo lo que hacemos. Cuidamos cada detalle, evolucionamos con los años, y nos adaptamos a los cambios para ofrecer lo mejor a nuestros colaboradores, clientes y empleados.
¿Qué buscamos?
Personas con talento, entusiastas, con ganas de aprender y enganchadas a la tecnologÃa. Si te sientes identificado estaremos encantados de que te unas a nuestra gran familia de Abalia.
¿Por qué elegirnos?
Porque somos diferentes, por tres motivos principales:
1.- Para nosotros no eres un número.
2.- Porque apostamos por la innovación y el aprendizaje contÃnuo.
3.- Aportamos nuestro granito de arena para mejorar la calidad de vida de las personas, mediante la tecnologÃa y proyectos que hacen de este mundo un lugar mejor

