Descripción de la oferta
Descripción de puestoEste puesto se enfoca en el diseño, desarrollo y mantenimiento de pipelines de datos (ETL/ELT) que recopilan, transforman y entregan información crítica a la organización.ResponsabilidadesIngesta de datos: extraer datos de múltiples fuentes (bases de datos transaccionales, APIs, archivos planos, logs, web scraping, dispositivos IoT).Transformación de datos: limpiar, normalizar, agregar y estructurar datos brutos para convertirlos en formatos útiles para el negocio.Automatización y orquestación: configurar y programar flujos de trabajo con herramientas de orquestación, garantizando ejecución automática, secuencial y sin errores.Procesamiento batch y streaming: desarrollar soluciones tanto para procesamiento de datos en lotes como en tiempo real, según las necesidades del negocio.Modelado y almacenamiento de datos: diseñar esquemas de bases de datos eficientes (Star Schema, Snowflake, Data Vault), crear y optimizar Data Warehouses y Data Lakes, y evaluar e implementar tecnologías de almacenamiento.Optimización y escalabilidad: monitorizar, diagnosticar y optimizar consultas SQL y procesos Spark, asegurar una infraestructura escalable horizontal y verticalmente, y gestionar los costes en la nube.Calidad, seguridad y gobernanza: implementar pruebas automáticas de calidad de datos, colaborar con el equipo de seguridad para cifrado y control de accesos via RBAC, garantizar cumplimiento regulatorio (GDPR), y mantener la documentación técnica y diccionario de datos.Soporte y colaboración con equipos de analítica e IA: habilitar conjuntos de datos limpios y accesibles, colaborar en MLOps para integrar modelos predictivos en los flujos de datos productivos.Disponibilidad, integridad y eficiencia operativa: garantizar que los pipelines funcionen sin interrupciones y que los repositorios estén operativos según los SLA, asegurar que los datos almacenados sean exactos y sin duplicados o corrupciones, y mantener los costes de cómputo y almacenamiento bajo control.
#J-18808-Ljbffr
