HOME Data Engineering & Architecture AI & Data Engineer | Airflow, OpenSearch & LLMs
Hasten Group VERIFIED EMPLOYER

AI & Data Engineer | Airflow, OpenSearch & LLMs.

Data Engineering & Architecture Full-Time

AI & Data Engineer | Airflow, OpenSearch & LLMs: our view in 3 lines...

  • The Role:This role is for an engineer who builds and maintains data workflows and search ranking systems using Apache Airflow and OpenSearch, with some exposure to large language models.
  • The Person:The person will design, develop and maintain data pipelines with Apache Airflow, configure and optimise information retrieval processes in OpenSearch, implement and improve BM25 search and ranking, analyse search relevance, and collaborate on integrating large language model solutions.
  • Requirements:The ideal candidate has practical experience with Apache Airflow and orchestration process development, knowledge of OpenSearch, experience or knowledge of information retrieval and ranking systems, and knowledge of the BM25 algorithm.

About the role

En Hasten Group buscamos un/a profesional con experiencia en ingeniería de datos y tecnologías de inteligencia artificial para incorporarse a un proyecto en el que participará en el desarrollo, mantenimiento y optimización de procesos de recuperación y ranking de información.

La persona seleccionada trabajará principalmente con Apache Airflow, como herramienta de orquestación de procesos, y OpenSearch, donde se implementan mecanismos de recuperación y ranking basados en BM25. También tendrá la oportunidad de trabajar con tecnologías de inteligencia artificial, especialmente modelos de lenguaje de gran tamaño (LLMs).

Responsabilidades y funciones:

  • Diseñar, desarrollar y mantener flujos de trabajo y pipelines de datos utilizando Apache Airflow.
  • Configurar, gestionar y optimizar procesos de recuperación de información mediante OpenSearch.
  • Implementar y mejorar mecanismos de búsqueda y ranking utilizando el algoritmo BM25.
  • Analizar y optimizar la relevancia y calidad de los resultados de búsqueda.
  • Colaborar en la integración de soluciones basadas en inteligencia artificial y modelos LLM.
  • Aplicar conocimientos estadísticos para analizar resultados, evaluar métricas y mejorar los procesos de recuperación de información.
  • Participar en la mejora continua de la arquitectura y los procesos del proyecto.

Requisitos imprescindibles:

  • Experiencia práctica con Apache Airflow y desarrollo de procesos de orquestación.
  • Conocimientos de OpenSearch.
  • Experiencia o conocimientos en sistemas de recuperación de información y ranking.
  • Conocimiento del algoritmo BM25 y su aplicación en motores de búsqueda.

Requisitos deseables:

  • Formación o buenos conocimientos de estadística.
  • Experiencia trabajando con sistemas de inteligencia artificial.
  • Conocimientos y experiencia en el uso de Large Language Models (LLMs).
  • Experiencia en soluciones de búsqueda inteligente y recuperación de información.
  • Conocimientos de tecnologías relacionadas con IA generativa.
  • Titulación universitaria en Ingeniería Informática, Telecomunicaciones, Matemáticas, Ciencia de Datos o disciplinas afines. No especificada como requisito excluyente.

¿Por qué elegirnos?

Hasten Group es una consultora en plena expansión, especializada en Transformación Digital y Reclutamiento IT. Consideramos el trabajo en equipo, la innovación constante y el talento humano como claves para afrontar con éxito los retos de un sector cambiante.

Ofrecemos:

– Contratación indefinida

– Formación IT / Idiomas

– Integración en equipos multidisciplinares

– 22 días laborables de vacaciones

– Seguimiento continuado y personalizado

Valoramos la diversidad y promovemos un ambiente inclusivo. Por ello, invitamos a postularse en nuestras ofertas a todas las personas, sin distinción de género, edad, origen, orientación sexual, discapacidad o cualquier otra condición.

Junt@s creamos tecnología.

Published November 17, 2026
Location Madrid, Spain
Job Type Full-Time