Desarrollador Databricks Senior - Remoto en Capital Empresarial Horizonte

Capital Empresarial Horizonte Empresa Mexicana especialista en Recursos Humanos y Tecnologías de la Información solicita:

Desarrollador Databricks

Modalidad Remota

Resumen del puesto

Buscamos un desarrollador de Databricks con entre 5 y 9 años de experiencia para unirse a nuestro equipo. El candidato ideal tendrá experiencia en Spark en Scala, Databricks, Unity, administración del catálogo, Databricks, CLI, Apache Airflow, Amazon S3, Amazon Redshift, Python, Databricks, SQL, Databricks, Delta Lake, flujos de trabajo de Databricks y PySpark. El candidato también debe tener experiencia en gestión de fidelización de clientes. Este puesto es híbrido con turnos diurnos y sin necesidad de viajar.

Responsabilidades

• Desarrollar y mantener canales de datos utilizando Spark en Scala y la CLI de Databricks para garantizar un procesamiento e integración de datos eficientes.

• Administrar el catálogo de Databricks en Unity para gestionar y proteger los activos de datos de forma eficaz.

• Utilizar Apache Airflow para orquestar flujos de trabajo complejos y automatizar tareas de datos.

• Implementar soluciones de almacenamiento de datos utilizando Amazon S3 y Amazon Redshift para garantizar la disponibilidad y fiabilidad de los datos.

• Escribir y optimizar scripts de Python para diversas tareas de procesamiento de datos. • Aprovechar Databricks SQL para realizar análisis de datos y generar información para las partes interesadas del negocio.

• Gestionar y optimizar Databricks Delta Lake para garantizar la consistencia y el rendimiento de los datos.

• Diseñar e implementar flujos de trabajo de Databricks para optimizar las operaciones de datos y mejorar la productividad.

• Desarrollar y mantener aplicaciones PySpark para procesar grandes conjuntos de datos de forma eficiente.

• Colaborar con equipos multifuncionales para comprender los requisitos del negocio y traducirlos en soluciones técnicas.

• Garantizar la calidad e integridad de los datos mediante la implementación de las mejores prácticas y la realización de auditorías periódicas.

• Brindar soporte técnico y resolución de problemas relacionados con los datos.

• Mantenerse al día con las últimas tendencias y tecnologías del sector para mejorar continuamente las soluciones de datos.

Requisitos

• Imprescindible experiencia con Spark en Scala, Databricks, Unity, Catalog Admin, Databricks CLI, Apache Airflow, Amazon S3, Amazon Redshift, Python, Databricks SQL, Databricks Delta Lake, Databricks Workflows y PySpark.

• Imprescindible experiencia en gestión de fidelización de clientes.

• Se valorará la experiencia con otras herramientas y tecnologías de ingeniería de datos. • Debe poseer sólidas habilidades de resolución de problemas y capacidad para trabajar de forma independiente.

• Debe poseer excelentes habilidades de comunicación y colaboración.

• Debe tener un enfoque proactivo para aprender y mantenerse al día con las nuevas tecnologías.