Ingeniero de Datos

Descripción

Resumen: Como ingeniero de datos en GCP, integrará datos de diversas fuentes en nuevos productos de datos, ampliará los datos analíticos existentes y diseñará e implementará transformaciones en GCP. Aspectos destacados: 1. Integrar datos de diversas fuentes en nuevos productos de datos 2. Diseñar e implementar transformaciones y modernización de datos en GCP 3. Colaborar con los equipos de IA, ciencia de datos y producto para desarrollar soluciones creativas ID del puesto 61718 Categoría Tecnología empresarial Ubicación Naucalpan de Juárez, México Tipo de trabajo Híbrido Como ingeniero de datos en GCP, integrará datos de diversas fuentes en nuevos productos de datos. Ampliará los datos analíticos existentes, incluida la fusión de datos históricos procedentes de plataformas heredadas con datos ingeridos desde nuevas plataformas. Asimismo, analizará y manipulará grandes conjuntos de datos, activando activos de datos para habilitar plataformas empresariales y análisis dentro de GCP. Diseñará e implementará transformaciones y modernización en GCP, creando canalizaciones de datos escalables que recojan datos desde aplicaciones fuente, los integren en áreas temáticas y construyan almacenes y productos de datos para soluciones analíticas. También realizará un análisis profundo de los datos actuales de cuentas por cobrar y originaciones en nuestro almacén de datos, llevando a cabo análisis de impacto relacionados con la modernización de Ford Credit Norteamérica y proporcionando soluciones de implementación. Además, colaborará estrechamente con nuestros equipos de IA, ciencia de datos y producto, desarrollando soluciones creativas que construyan el futuro de Ford Credit. La experiencia en soluciones a gran escala y en la operacionalización de almacenes de datos, lagos de datos y plataformas analíticas en Google Cloud Platform u otros entornos en la nube es obligatoria. Buscamos candidatos con un amplio conjunto de habilidades analíticas y tecnológicas en estas áreas, capaces de demostrar su capacidad para diseñar las soluciones adecuadas mediante la combinación apropiada de tecnologías de GCP y de terceros para su despliegue en Google Cloud Platform.* Diseñar y construir soluciones de ingeniería de datos de producción en Google Cloud Platform (GCP) utilizando servicios como BigQuery, Dataflow, DataForm, Astronomer, Data Fusion, Dataproc, Cloud Composer/Air Flow, Cloud SQL, Compute Engine, Cloud Functions, Cloud Run, Artifact Registry, API de GCP, Cloud Build, App Engine y plataformas de transmisión de datos en tiempo real como Apache Kafka y GCP Pub/Sub. * Diseñar nuevas soluciones para satisfacer mejor las necesidades de IA/ML. * Liderar equipos para ampliar nuestros servicios habilitados por IA. * Colaborar con los equipos de gobernanza para abordar necesidades comerciales clave. * Colaborar con partes interesadas y equipos multifuncionales para recopilar y definir los requisitos de datos y garantizar su alineación con los objetivos comerciales. * Colaborar con los equipos de análisis para comprender cómo se genera valor mediante los datos. * Colaborar con los equipos centrales para aprovechar soluciones existentes y potenciar futuros productos. * Diseñar e implementar soluciones escalables, tolerantes a fallos y por lotes o de transmisión en tiempo real para la ingesta, procesamiento y almacenamiento de datos. * Generar conocimientos a partir de los datos existentes para impulsar la creación de nuevos productos de datos. * Realizar las actividades necesarias de mapeo de datos, análisis de impacto de los cambios, análisis de causa raíz y trazabilidad de datos, documentando los flujos de información. * Implementar y promover un modelo de gobernanza de datos empresarial. * Promover activamente la protección, compartición, reutilización, calidad y estándares de los datos para garantizar su integridad y confidencialidad. * Desarrollar y mantener documentación sobre procesos, estándares y mejores prácticas de ingeniería de datos. * Garantizar la transferencia de conocimientos y la facilidad de mantenimiento del sistema. * Utilizar herramientas de supervisión y registro de GCP para identificar y resolver proactivamente cuellos de botella de rendimiento y fallos del sistema. * Brindar soporte en producción resolviendo incidencias según los acuerdos de nivel de servicio (SLA). * Optimizar los flujos de trabajo de datos para lograr un rendimiento, fiabilidad y eficiencia de costos óptimos en la infraestructura de GCP. * Trabajar dentro de un equipo ágil de producto. * Entregar código con frecuencia mediante desarrollo guiado por pruebas (TDD), integración continua y despliegue continuo (CI/CD). * Mejorar continuamente sus conocimientos del dominio. * Mantenerse actualizado sobre las últimas prácticas de ingeniería de datos. * Contribuir a la dirección técnica de la empresa manteniendo un enfoque centrado en el cliente. * Certificación profesional de ingeniero de datos de GCP * Diseño e implementación exitosos de almacenes de datos y procesos ETL durante más de cinco años, entregando soluciones de datos de alta calidad. * Más de 5 años de experiencia en desarrollo complejo de SQL * Más de 5 años de experiencia con lenguajes de programación como Python, Java o Apache Beam. * Ingeniero en la nube experimentado con más de 5 años de experiencia específica en GCP, especializado en la gestión de infraestructura y aplicaciones en la nube para soluciones a escala productiva. * Más de 5 años de experiencia con la arquitectura subyacente de GCP y experiencia práctica con servicios clave de GCP, especialmente aquellos relacionados con el procesamiento de datos (por lotes/en tiempo real), aprovechando Terraform, Big Query, Dataflow, Pub/Sub, Data Form, Astronomer, Data Fusion, Dataproc, PySpark, Cloud Composer/Air Flow, Cloud SQL, Compute Engine, Cloud Functions, Cloud Run, Cloud Build y App Engine, así como almacenamiento, incluido Cloud Storage * Más de 5 años de experiencia con herramientas DevOps como Tekton, GitHub, Terraform y Docker. * Más de 5 años de experiencia en el diseño, optimización y solución de problemas de canalizaciones de datos complejas. * Más de 3 años de experiencia en el desarrollo y despliegue de arquitecturas de microservicios que aprovechen marcos de orquestación de contenedores * Más de 3 años de experiencia en el diseño de canalizaciones y arquitecturas para el procesamiento de datos. * Pasión y autodeterminación para desarrollar/experimentar/implementar métodos/técnicas de vanguardia en ingeniería de datos. * Capacidad para trabajar de forma autónoma con mínima supervisión y adaptarse a entornos ambiguos. * Demostración de una mentalidad proactiva para la resolución de problemas y disposición para tomar la iniciativa. * Fuertes habilidades de priorización, colaboración y coordinación, así como capacidad para simplificar y comunicar ideas complejas ante equipos multifuncionales y todos los niveles de la dirección. * Capacidad comprobada para gestionar múltiples responsabilidades y demandas competitivas manteniendo un alto nivel de productividad. * Maestría en ciencias de la computación, ingeniería de software, sistemas de información, ingeniería de datos o campo relacionado. * Experiencia en ingeniería o desarrollo de datos adquirida en un entorno financiero regulado. * Experiencia en la tutoría y mentoría de ingenieros de datos * Herramientas de gestión de proyectos como Atlassian JIRA * Experiencia trabajando en un equipo de implementación desde el concepto hasta las operaciones, brindando una profunda experiencia técnica como experto en materia para un despliegue exitoso. * Experiencia en seguridad, gobernanza y buenas prácticas de cumplimiento de datos en la nube. * Experiencia utilizando conceptos de ciencia de datos en conjuntos de datos de producción para generar conocimientos