- Hasten Group
- Madrid, Madrid
- Full-Time
- 6 days ago
AI & Data Engineer | Airflow, OpenSearch & LLMs.
Before you go
Before you leave us, sign up for our email alerts
We don't do job spam, just the best digital jobs delivered straight to your inbox.
AI & Data Engineer | Airflow, OpenSearch & LLMs: our view in 3 lines...
- The Role:This role is for an engineer who builds and maintains data workflows and search ranking systems using Apache Airflow and OpenSearch, with some exposure to large language models.
- The Person:The person will design, develop and maintain data pipelines with Apache Airflow, configure and optimise information retrieval processes in OpenSearch, implement and improve BM25 search and ranking, analyse search relevance, and collaborate on integrating large language model solutions.
- Requirements:The ideal candidate has practical experience with Apache Airflow and orchestration process development, knowledge of OpenSearch, experience or knowledge of information retrieval and ranking systems, and knowledge of the BM25 algorithm.
About the role
En Hasten Group buscamos un/a profesional con experiencia en ingenierÃa de datos y tecnologÃas de inteligencia artificial para incorporarse a un proyecto en el que participará en el desarrollo, mantenimiento y optimización de procesos de recuperación y ranking de información.
La persona seleccionada trabajará principalmente con Apache Airflow, como herramienta de orquestación de procesos, y OpenSearch, donde se implementan mecanismos de recuperación y ranking basados en BM25. También tendrá la oportunidad de trabajar con tecnologÃas de inteligencia artificial, especialmente modelos de lenguaje de gran tamaño (LLMs).
Responsabilidades y funciones:
- Diseñar, desarrollar y mantener flujos de trabajo y pipelines de datos utilizando Apache Airflow.
- Configurar, gestionar y optimizar procesos de recuperación de información mediante OpenSearch.
- Implementar y mejorar mecanismos de búsqueda y ranking utilizando el algoritmo BM25.
- Analizar y optimizar la relevancia y calidad de los resultados de búsqueda.
- Colaborar en la integración de soluciones basadas en inteligencia artificial y modelos LLM.
- Aplicar conocimientos estadÃsticos para analizar resultados, evaluar métricas y mejorar los procesos de recuperación de información.
- Participar en la mejora continua de la arquitectura y los procesos del proyecto.
Requisitos imprescindibles:
- Experiencia práctica con Apache Airflow y desarrollo de procesos de orquestación.
- Conocimientos de OpenSearch.
- Experiencia o conocimientos en sistemas de recuperación de información y ranking.
- Conocimiento del algoritmo BM25 y su aplicación en motores de búsqueda.
Requisitos deseables:
- Formación o buenos conocimientos de estadÃstica.
- Experiencia trabajando con sistemas de inteligencia artificial.
- Conocimientos y experiencia en el uso de Large Language Models (LLMs).
- Experiencia en soluciones de búsqueda inteligente y recuperación de información.
- Conocimientos de tecnologÃas relacionadas con IA generativa.
- Titulación universitaria en IngenierÃa Informática, Telecomunicaciones, Matemáticas, Ciencia de Datos o disciplinas afines. No especificada como requisito excluyente.
¿Por qué elegirnos?
Hasten Group es una consultora en plena expansión, especializada en Transformación Digital y Reclutamiento IT. Consideramos el trabajo en equipo, la innovación constante y el talento humano como claves para afrontar con éxito los retos de un sector cambiante.
Ofrecemos:
– Contratación indefinida
– Formación IT / Idiomas
– Integración en equipos multidisciplinares
– 22 dÃas laborables de vacaciones
– Seguimiento continuado y personalizado
Valoramos la diversidad y promovemos un ambiente inclusivo. Por ello, invitamos a postularse en nuestras ofertas a todas las personas, sin distinción de género, edad, origen, orientación sexual, discapacidad o cualquier otra condición.
Junt@s creamos tecnologÃa.

