Ingeniero de Datos

Descripción

Resumen: Como ingeniero de datos de GCP, integrará datos provenientes de diversas fuentes en nuevos productos de datos, diseñando e implementando canalizaciones de datos escalables y colaborando con los equipos de inteligencia artificial, ciencia de datos y productos para construir soluciones futuras. Aspectos destacados: 1. Diseñar y construir soluciones de ingeniería de datos de producción en Google Cloud Platform 2. Colaborar con los equipos de inteligencia artificial, ciencia de datos y productos para innovar 3. Liderar equipos para ampliar nuestros servicios habilitados por IA Como ingeniero de datos de GCP, integrará datos provenientes de diversas fuentes en nuevos productos de datos. Ampliará los datos analíticos existentes, incluida la fusión de datos históricos procedentes de plataformas heredadas con datos ingeridos desde nuevas plataformas. Asimismo, analizará y manipulará grandes conjuntos de datos, activando activos de datos para habilitar plataformas empresariales y análisis dentro de GCP. Diseñará e implementará la transformación y modernización en GCP, creando canalizaciones de datos escalables que recojan datos desde aplicaciones fuente, los integren en áreas temáticas y construyan data marts y productos para soluciones analíticas. También realizará un análisis exhaustivo de los datos actuales de cuentas por cobrar y originaciones en nuestro almacén de datos, llevando a cabo análisis de impacto relacionados con la modernización de Ford Credit Norteamérica y proponiendo soluciones de implementación. Además, colaborará estrechamente con nuestros equipos de inteligencia artificial, ciencia de datos y productos, desarrollando soluciones creativas que construyan el futuro de Ford Credit. La experiencia en soluciones a gran escala y en la operacionalización de almacenes de datos, lagos de datos y plataformas analíticas en Google Cloud Platform u otros entornos en la nube es obligatoria. Buscamos candidatos con un amplio conjunto de habilidades analíticas y tecnológicas en estas áreas, capaces de demostrar su capacidad para diseñar las soluciones adecuadas mediante la combinación apropiada de tecnologías de GCP y de terceros para su despliegue en Google Cloud Platform. * Certificación profesional de GCP como ingeniero de datos * Diseño e implementación exitosos de almacenes de datos y procesos ETL durante más de cinco años, entregando soluciones de datos de alta calidad. * Más de cinco años de experiencia en desarrollo complejo de SQL * Más de cinco años de experiencia con lenguajes de programación como Python, Java o Apache Beam. * Ingeniero en la nube experimentado con más de cinco años de experiencia específica en GCP, especializado en la gestión de infraestructura y aplicaciones en la nube para soluciones a escala productiva. * Más de cinco años de experiencia con la arquitectura subyacente de GCP y experiencia práctica con servicios clave de GCP, especialmente aquellos relacionados con el procesamiento de datos (por lotes/en tiempo real), aprovechando Terraform, BigQuery, Dataflow, Pub/Sub, Dataform, Astronomer, Data Fusion, Dataproc, PySpark, Cloud Composer/Airflow, Cloud SQL, Compute Engine, Cloud Functions, Cloud Run, Cloud Build y App Engine, así como almacenamiento, incluido Cloud Storage * Más de cinco años de experiencia con herramientas DevOps como Tekton, GitHub, Terraform y Docker. * Más de cinco años de experiencia en el diseño, optimización y solución de problemas de canalizaciones de datos complejas. * Más de tres años de experiencia en el desarrollo e implementación de arquitecturas de microservicios aprovechando frameworks de orquestación de contenedores * Más de tres años de experiencia en el diseño de canalizaciones y arquitecturas para el procesamiento de datos. * Pasión y motivación personal para desarrollar/experimentar/implementar métodos/técnicas de vanguardia en ingeniería de datos. * Capacidad de autodirección, trabajo independiente con supervisión mínima y adaptabilidad a entornos ambiguos. * Demostración de una mentalidad proactiva para la resolución de problemas y disposición para asumir la iniciativa. * Fuertes habilidades de priorización, colaboración y coordinación, así como capacidad para simplificar y comunicar ideas complejas ante equipos multifuncionales y todos los niveles de dirección. * Capacidad comprobada para gestionar múltiples responsabilidades y demandas competitivas manteniendo un alto nivel de productividad. * Título de maestría en ciencias de la computación, ingeniería de software, sistemas de información, ingeniería de datos o campo afín. * Experiencia en ingeniería o desarrollo de datos adquirida en un entorno financiero regulado. * Experiencia en la tutoría y mentoría de ingenieros de datos * Herramientas de gestión de proyectos como Atlassian JIRA * Experiencia trabajando en un equipo de implementación desde el concepto hasta las operaciones, aportando una profunda experiencia técnica como experto en materia para lograr un despliegue exitoso. * Experiencia en prácticas óptimas de seguridad, gobernanza y cumplimiento normativo de los datos en la nube. * Experiencia en la aplicación de conceptos de ciencia de datos sobre conjuntos de datos de producción para generar conocimientos * Diseñar y construir soluciones de ingeniería de datos de producción en Google Cloud Platform (GCP) utilizando servicios como BigQuery, Dataflow, DataForm, Astronomer, Data Fusion, Dataproc, Cloud Composer/Airflow, Cloud SQL, Compute Engine, Cloud Functions, Cloud Run, Artifact Registry, API de GCP, Cloud Build, App Engine y plataformas de transmisión de datos en tiempo real como Apache Kafka y Pub/Sub de GCP. * Diseñar nuevas soluciones para satisfacer mejor las necesidades de IA/ML. * Liderar equipos para ampliar nuestros servicios habilitados por IA. * Colaborar con los equipos de gobernanza para abordar necesidades comerciales clave. * Colaborar con partes interesadas y equipos multifuncionales para recopilar y definir los requisitos de datos y garantizar su alineación con los objetivos comerciales. * Colaborar con los equipos de análisis para comprender cómo se crea valor mediante los datos. * Colaborar con equipos centrales para aprovechar soluciones existentes y potenciar futuros productos. * Diseñar e implementar soluciones escalables, tolerantes a fallos y por lotes o en tiempo real para la ingesta, el procesamiento y el almacenamiento de datos. * Generar conocimientos a partir de los datos existentes para impulsar la creación de nuevos productos de datos. * Realizar las actividades necesarias de asignación de datos, análisis de impacto de cambios, análisis de causa raíz y trazabilidad de datos, documentando los flujos de información. * Implementar y promover un modelo de gobernanza de datos empresarial. * Promover activamente la protección, el intercambio, la reutilización, la calidad y los estándares de los datos para garantizar su integridad y confidencialidad. * Desarrollar y mantener documentación sobre procesos, estándares y mejores prácticas en ingeniería de datos. * Garantizar la transferencia de conocimientos y la facilidad de mantenimiento del sistema. * Utilizar herramientas de monitoreo y registro de GCP para identificar y resolver proactivamente cuellos de botella de rendimiento y fallos del sistema. * Brindar soporte en producción para atender incidencias según los acuerdos de nivel de servicio (SLA). * Optimizar los flujos de trabajo de datos para mejorar su rendimiento, confiabilidad y eficiencia de costos en la infraestructura de GCP. * Trabajar dentro de un equipo ágil de producto. * Entregar código con frecuencia mediante desarrollo guiado por pruebas (TDD), integración continua y despliegue continuo (CI/CD). * Mejorar continuamente sus conocimientos del dominio. * Mantenerse actualizado sobre las últimas prácticas en ingeniería de datos. * Contribuir a la dirección técnica de la empresa manteniendo un enfoque centrado en el cliente.