DevOps Engineer Databricks - México
Derevo SA de CV
- México
- Permanente
- Tiempo completo
- Desarrollarás y mantendrás pipelines de datos en Azure Databricks utilizando Spark, Delta y Python/SQL.
- Diseñarás y optimizarás estructuras de datos en un Data Lakehouse para mejorar la eficiencia en lectura y escritura.
- Implementarás buenas prácticas de Git y control de versiones, gestionando ramas, PRs y resolución de conflictos.
- Construirás y mantendrás pipelines YAML en Azure DevOps para despliegues a QA/Prod.
- Realizarás empaquetado y despliegue de bundles en entornos Databricks mediante Azure DevOps.
- Desarrollarás consultas SQL complejas y optimizarás queries utilizando funciones de ventana y agregaciones.
- Colaborarás de forma efectiva con equipos de DevOps, Data y negocio, priorizando tareas y objetivos.
- Monitorearás y resolverás incidencias en entornos de datos y pipelines, analizando logs y optimizando recursos.
- Experiencia sólida con Azure Databricks (Spark, Delta, Python/SQL).
- Conocimientos en modelado y procesamiento de datos para Data Lakehouse.
- Experiencia con Git y control de versiones.
- Manejo de CI/CD en Azure DevOps (pipelines YAML, integración con repositorios, despliegues a QA/Prod).
- Experiencia en empaquetado y despliegues automatizados en Databricks.
- SQL avanzado.
- Inglés intermedio/avanzado.
- Certificaciones deseables: Azure System Administrator o Azure Fundamentals.
- Adaptabilidad y ambición: Capacidad para aprender nuevas herramientas y adaptarte a cambios tecnológicos y metodológicos.
- Trabajo en equipo: Comunicación efectiva con equipos técnicos y de negocio.
- Orientación a resultados: Capacidad para entregar soluciones eficientes bajo entornos de alta demanda.
- Resolución de problemas: Habilidad para diagnosticar y resolver incidencias de forma proactiva.
- WELLNESS: Impulsaremos tu bienestar integral a través del equilibrio personal, profesional y económico.
- LET’S RELEASE YOUR POWER: Oportunidades para especializarte en diversas áreas y tecnologías, fomentando tu desarrollo interdisciplinario.
- WE CREATE NEW THINGS: Espacio, confianza y capacitación para proponer e implementar nuevas ideas.
- WE GROW TOGETHER: Participación en proyectos multinacionales y colaboración con equipos extranjeros.
Hireline