01Construcción de pipelines de datos para ingerir información desde diversas fuentes, como bases de datos, APIs o plataformas de streaming.
02Integración y transformación de datos para asegurar su compatibilidad con el modelo o formato de datos de destino.
03Diseño y optimización de arquitecturas de almacenamiento de datos, incluyendo data lakes, data warehouses o sistemas de archivos distribuidos.
04Implementación de técnicas como particionado, compresión o indexación para optimizar el almacenamiento y la recuperación de datos.
05Identificación y resolución de cuellos de botella, ajuste de consultas e implementación de estrategias de caché para mejorar la velocidad de recuperación de datos y la eficiencia general del sistema.
06Diseño e implementación de modelos de datos que soporten un almacenamiento, recuperación y análisis de datos eficientes.
07Colaboración con científicos y analistas de datos para comprender sus necesidades y proporcionarles datos bien estructurados y optimizados para fines de análisis y modelado.
08Colaboración con equipos multidisciplinares, incluyendo científicos de datos, analistas y partes interesadas del negocio, para comprender sus requisitos y proporcionar soluciones técnicas.
09Comunicación de conceptos técnicos complejos a partes interesadas no técnicas de manera clara y concisa.
10Independencia y responsabilidad en la entrega de soluciones.
11Capacidad para trabajar bajo metodologías de desarrollo Agile y Scrum.
12Formación y mentoría a ingenieros de datos junior, proporcionando orientación y transferencia de conocimientos.
13Diseño e implementación de sistemas de procesamiento de datos en la plataforma Azure. Esto implica escribir código eficiente y escalable para procesar, transformar y limpiar grandes volúmenes de datos estructurados y no estructurados.
14Construcción de pipelines de datos para ingerir información desde diversas fuentes, como bases de datos, APIs o plataformas de streaming.
15Integración y transformación de datos para asegurar su compatibilidad con el modelo o formato de datos de destino.
16Identificación y resolución de cuellos de botella, ajuste de consultas e implementación de estrategias de caché para mejorar la velocidad de recuperación de datos y la eficiencia general del sistema.
17Colaboración con equipos multidisciplinares, incluyendo científicos de datos, analistas y partes interesadas del negocio, para comprender sus requisitos y proporcionar soluciones técnicas.
Lo que buscamos
01Databricks 4/5.
02Apache Spark 4/5.
03Programación – Datos 4/5.
04Desarrollo de software para DE – 4/5.
05Servicios Azure – 3/5.
06Liderazgo técnico – 3/5.
07Arquitectura – Procesamiento de datos – 3/5.
08GenAI para ingeniería de datos – 3/5.
09Automatización CI/CD 3/5.
Otros
104-6 años de experiencia profesional en un puesto similar.
11Muy buen nivel de comunicación, incluyendo la capacidad de transmitir información de forma clara y específica a compañeros y partes interesadas del negocio.
12Experiencia trabajando con metodologías ágiles – herramientas de soporte (JIRA, Azure DevOps).
13Independencia y responsabilidad en la entrega de soluciones.
14Capacidad para trabajar bajo metodologías ágiles.
15Experiencia práctica en el diseño y optimización de almacenamiento de datos (data lakes, data warehouses, sistemas de archivos distribuidos).
01Se valorará la experiencia o familiaridad con otras tecnologías en la nube, data warehouses, gobierno de datos y análisis de negocio.