Ingeniero de Datos

Descripción

Resumen: Buscamos un Ingeniero de Datos intermedio para construir, optimizar y mantener canalizaciones de datos escalables para un programa complejo de migración de datos en un entorno en la nube. Aspectos destacados: 1. Diseñar, construir y mantener canalizaciones ETL/ELT mediante AWS Glue y dbt 2. Colaborar con arquitectos de datos y analistas en migraciones críticas de datos 3. Trabajar con procesamiento de datos a gran escala en un entorno en la nube Descripción del proyecto: El programa es una iniciativa de migración de datos en varias fases orientada a sustituir los sistemas heredados de mercados de capitales por un ecosistema moderno de plataformas. Incluye la migración de conjuntos de datos críticos relacionados con custodia, compensación y liquidación, procesamiento de derivados y operaciones de cámaras de compensación (CCP). El proyecto abarca 18 meses y sigue un enfoque incremental con fuerte énfasis en integridad de los datos, conciliación y trazabilidad. * Descripción del puesto: Buscamos un Ingeniero de Datos intermedio para apoyar un programa complejo de migración de datos mediante la construcción, optimización y mantenimiento de canalizaciones de datos escalables. Trabajarás estrechamente con arquitectos de datos y analistas para garantizar que los datos se procesen de forma eficiente, fiable y conforme a los requisitos empresariales y regulatorios en un entorno en la nube. * Este puesto se centra en la construcción, optimización y mantenimiento de canalizaciones de datos que permitan la extracción, transformación y carga de grandes volúmenes de datos desde sistemas heredados hacia una plataforma de datos moderna. Trabajarás estrechamente con arquitectos de datos y analistas para asegurar que los datos se procesen de forma eficiente, fiable y alineada con los requisitos empresariales. * * El puesto requiere amplia experiencia práctica con herramientas de procesamiento de datos, atención rigurosa a la calidad de los datos y capacidad para trabajar con conjuntos de datos complejos en un entorno en la nube. Stack tecnológico: SQL, AWS Glue, dbt, Oracle, AWS, Git * Responsabilidades: Diseñar, construir y mantener canalizaciones ETL/ELT mediante AWS Glue y dbt * Extraer y procesar datos desde sistemas heredados, garantizando transformaciones eficientes y escalables * Colaborar con arquitectos de datos para implementar modelos de datos objetivo y lógica de transformación * Trabajar con analistas de datos para asegurar la disponibilidad y corrección de los datos destinados a validación e informes * Optimizar las canalizaciones de datos para rendimiento, escalabilidad y eficiencia de costos * Garantizar la calidad de los datos mediante controles de validación, registro (logging) y mecanismos de supervisión (monitoring) * Gestionar grandes volúmenes de datos estructurados procedentes de múltiples fuentes y sistemas * Implementar y mantener flujos de trabajo de datos siguiendo las mejores prácticas en control de versiones y CI/CD * Diagnosticar problemas de datos y apoyar el análisis de causas fundamentales (root cause analysis) en toda la canalización de datos * Documentar canalizaciones de datos, transformaciones y procesos técnicos * Requisitos: Amplia experiencia con SQL para transformación y consulta de datos * Experiencia práctica con AWS Glue y procesamiento de datos basado en la nube * Experiencia en construcción y mantenimiento de canalizaciones ETL/ELT * Experiencia con dbt o marcos de transformación similares * Experiencia en procesamiento de datos a gran escala y en canalizaciones de datos * Conocimientos prácticos de Git y prácticas de CI/CD * Comprensión de los conceptos de modelado de datos y arquitecturas de almacenes de datos * Excelentes habilidades para la resolución de problemas y atención al detalle * Deseable: Experiencia en entornos de mercados de capitales * Experiencia con bases de datos Oracle y con integraciones de sistemas heredados * Conocimientos sobre optimización del rendimiento en canalizaciones de datos * Experiencia en supervisión (monitoring), registro (logging) y observabilidad en sistemas de datos * Exposición a programas de migración de datos o transformaciones a gran escala