Ingeniero de Datos

Descripción

Resumen: Como ingeniero de datos de GCP, integrará datos provenientes de diversas fuentes para crear nuevos productos de datos, diseñando e implementando canalizaciones de datos escalables y modernizando la arquitectura de datos en GCP. Aspectos destacados: 1. Integrar y activar datos para plataformas empresariales y análisis dentro de GCP 2. Diseñar e implementar canalizaciones de datos escalables en Google Cloud Platform 3. Colaborar con los equipos de IA, ciencia de datos y productos para desarrollar soluciones innovadoras Como ingeniero de datos de GCP, integrará datos provenientes de diversas fuentes en nuevos productos de datos. Construirá sobre los datos analíticos existentes, incluida la fusión de datos históricos procedentes de plataformas heredadas con datos ingeridos desde nuevas plataformas. También analizará y manipulará grandes conjuntos de datos, activando activos de datos para habilitar plataformas empresariales y análisis dentro de GCP. Diseñará e implementará las transformaciones y la modernización en GCP, creando canalizaciones de datos escalables que reciban datos desde aplicaciones fuente, los integren en áreas temáticas y construyan data marts y productos para soluciones analíticas. Asimismo, realizará un análisis exhaustivo de los datos actuales de cuentas por cobrar y originaciones en nuestro almacén de datos, llevando a cabo análisis de impacto relacionados con la modernización de Ford Credit Norteamérica y proporcionando soluciones de implementación. Además, colaborará estrechamente con nuestros equipos de IA, ciencia de datos y productos, desarrollando soluciones creativas que construyan el futuro de Ford Credit. La experiencia con soluciones a gran escala y la operacionalización de almacenes de datos, lagos de datos y plataformas analíticas en Google Cloud Platform u otros entornos en la nube es obligatoria. Buscamos candidatos con un amplio conjunto de habilidades analíticas y tecnológicas en estas áreas, capaces de demostrar su capacidad para diseñar las soluciones adecuadas mediante la combinación apropiada de tecnologías de GCP y de terceros para su despliegue en Google Cloud Platform. * Certificación profesional de GCP como Ingeniero de Datos * Diseño e implementación exitosos de almacenes de datos y procesos ETL durante más de cinco años, entregando soluciones de datos de alta calidad. * Más de cinco años de experiencia en desarrollo complejo de SQL * Más de cinco años de experiencia con lenguajes de programación como Python, Java o Apache Beam. * Ingeniero en la nube experimentado con más de cinco años de experiencia específica en GCP, especializado en la gestión de infraestructura y aplicaciones en la nube para soluciones a escala productiva. * Más de cinco años de experiencia con la arquitectura subyacente de GCP y experiencia práctica con servicios clave de GCP, especialmente aquellos relacionados con el procesamiento de datos (por lotes/en tiempo real), aprovechando Terraform, BigQuery, Dataflow, Pub/Sub, Dataform, Astronomer, Data Fusion, Dataproc, PySpark, Cloud Composer/Air Flow, Cloud SQL, Compute Engine, Cloud Functions, Cloud Run, Cloud Build y App Engine, así como almacenamiento, incluido Cloud Storage. * Más de cinco años de experiencia con herramientas DevOps como Tekton, GitHub, Terraform y Docker. * Más de cinco años de experiencia en el diseño, optimización y solución de problemas de canalizaciones de datos complejas. * Más de tres años de experiencia en el desarrollo e implementación de arquitecturas de microservicios aprovechando marcos de orquestación de contenedores. * Más de tres años de experiencia en el diseño de canalizaciones y arquitecturas para el procesamiento de datos. * Pasión y autodeterminación para desarrollar/experimentar/implementar métodos/técnicas punteros de ingeniería de datos. * Capacidad para trabajar de forma autodirigida e independiente, con mínima supervisión, y adaptarse a entornos ambiguos. * Demostración de una mentalidad proactiva de resolución de problemas y disposición para tomar la iniciativa. * Fuertes habilidades de priorización, colaboración y coordinación, así como capacidad para simplificar y comunicar ideas complejas ante equipos multifuncionales y todos los niveles de la dirección. * Capacidad comprobada para gestionar múltiples responsabilidades y demandas concurrentes manteniendo un alto nivel de productividad. * Máster en ciencias de la computación, ingeniería de software, sistemas de información, ingeniería de datos o campo relacionado. * Experiencia en ingeniería o desarrollo de datos adquirida en un entorno financiero regulado. * Experiencia en la tutoría y mentoría de ingenieros de datos. * Herramientas de gestión de proyectos como Atlassian JIRA. * Experiencia trabajando en un equipo de implementación desde la concepción hasta las operaciones, aportando una profunda experiencia técnica como experto en materia para garantizar un despliegue exitoso. * Experiencia en seguridad, gobernanza y mejores prácticas de cumplimiento normativo para datos en la nube. * Experiencia aplicando conceptos de ciencia de datos sobre conjuntos de datos en producción para generar conocimientos. * Diseñar y construir soluciones de ingeniería de datos productivas en Google Cloud Platform (GCP) utilizando servicios como BigQuery, Dataflow, DataForm, Astronomer, Data Fusion, Dataproc, Cloud Composer/Air Flow, Cloud SQL, Compute Engine, Cloud Functions, Cloud Run, Artifact Registry, APIs de GCP, Cloud Build, App Engine y plataformas de transmisión de datos en tiempo real como Apache Kafka y GCP Pub/Sub. * Diseñar nuevas soluciones para satisfacer mejor las necesidades de IA/ML. * Liderar equipos para expandir nuestros servicios habilitados por IA. * Colaborar con los equipos de gobernanza para abordar necesidades comerciales clave. * Colaborar con partes interesadas y equipos multifuncionales para recopilar y definir requisitos de datos y garantizar su alineación con los objetivos comerciales. * Colaborar con los equipos de análisis para comprender cómo se genera valor mediante los datos. * Colaborar con equipos centrales para aprovechar soluciones existentes y potenciar futuros productos. * Diseñar e implementar soluciones por lotes, en tiempo real, escalables y tolerantes a fallos para la ingesta, procesamiento y almacenamiento de datos. * Generar conocimientos a partir de los datos existentes para impulsar la creación de nuevos productos de datos. * Realizar las actividades necesarias de mapeo de datos, análisis de impacto para cambios, análisis de causa raíz y actividades de trazabilidad de datos, documentando los flujos de información. * Implementar y promover un modelo de gobernanza de datos empresarial. * Promover activamente la protección, el intercambio, la reutilización, la calidad y los estándares de los datos para garantizar su integridad y confidencialidad. * Desarrollar y mantener documentación sobre procesos, estándares y mejores prácticas de ingeniería de datos. * Garantizar la transferencia de conocimientos y la facilidad de mantenimiento del sistema. * Utilizar herramientas de monitorización y registro de GCP para identificar y resolver proactivamente cuellos de botella de rendimiento y fallos del sistema. * Brindar soporte productivo abordando incidencias según los acuerdos de nivel de servicio (SLA). * Optimizar los flujos de trabajo de datos para mejorar su rendimiento, fiabilidad y eficiencia de costos en la infraestructura de GCP. * Trabajar dentro de un equipo ágil de producto. * Entregar código con frecuencia mediante desarrollo guiado por pruebas (TDD), integración continua y despliegue continuo (CI/CD). * Mejorar continuamente sus conocimientos del dominio. * Mantenerse actualizado sobre las últimas prácticas de ingeniería de datos. * Contribuir a la dirección técnica de la empresa manteniendo un enfoque centrado en el cliente.