Ingeniero Senior de Datos en Databricks - Canalizaciones de datos automatizadas

Descripción

Resumen: Únase al equipo de Operaciones de Vallen como Ingeniero Senior de Datos en Databricks, diseñando canalizaciones de datos escalables, construyendo flujos de trabajo de transformación y optimizando modelos de datos. Aspectos destacados: 1. Diseñar y desarrollar canalizaciones de datos escalables utilizando PySpark y Spark SQL 2. Construir flujos de trabajo modulares de transformación utilizando DBT 3. Colaborar con científicos de datos, analistas y equipos comerciales Únase al equipo de Operaciones de Vallen como Ingeniero Senior de Datos en Databricks Funciones y responsabilidades Diseñar y desarrollar canalizaciones de datos escalables utilizando PySpark y Spark SQL Construir flujos de trabajo modulares de transformación utilizando DBT Empaquetar e implementar flujos de trabajo de Databricks utilizando Databricks Asset Bundles (DABS) Desarrollar y mantener canalizaciones de CI/CD con Azure DevOps y Git Optimizar modelos de datos, procesos ETL/ELT y rendimiento Colaborar con científicos de datos, analistas y equipos comerciales Implementar monitoreo, registro y alertas para las canalizaciones de datos Habilidades y competencias requeridas 5–7 años de experiencia como ingeniero de datos Más de 3 años trabajando con Databricks Conocimientos sólidos en Python, PySpark y Spark SQL Experiencia práctica con DBT y DABS Experiencia comprobada con Azure DevOps y canalizaciones de CI/CD Comprensión sólida de modelado de datos y plataformas de datos en la nube Formación académica y experiencia Licenciatura en Ciencias de la Computación, Ingeniería o campo relacionado Se prefiere experiencia con Azure y Databricks. -Requerimientos- Educación mínima: Educación superior - Licenciatura 5 años de experiencia Idiomas: Inglés Edad: entre 30 y 40 años Conocimientos: Ats, Azure devops, Base de datos, Etl, Programacion, Python, Sql, Teams Palabras clave: senior, sr, datos, data, ingeniero, engineers, ingeniera, ing, engineer