Resumen: Buscamos un Desarrollador Python con experiencia en Databricks para un proyecto crítico que implica la migración de la lógica de cálculo a Databricks utilizando Python, centrándose en la adaptación del código, el procesamiento de datos y la seguridad. Puntos destacados: 1. Proyecto crítico migrando la lógica de cálculo a Databricks utilizando Python 2. Enfoque en desarrollo con Python, procesamiento de datos y principios de ciberseguridad 3. Rol colaborativo trabajando con ingenieros de datos, analistas y arquitectos en la nube * #### **País:** España * #### **Provincia:** Comunidad de Madrid * #### **Descripción:** Capitole sigue creciendo y queremos hacerlo contigo. Buscamos un Desarrollador Python con experiencia en Databricks para trabajar en un proyecto crítico que implica la migración de la lógica de cálculo a Databricks utilizando Python. Este puesto requiere experiencia en desarrollo con Python para adaptar y ampliar el código Python existente, experiencia con marcos de procesamiento distribuido de datos, conocimientos del entorno Databricks y una estrecha colaboración con diversas partes interesadas. También se requiere experiencia en principios de ciberseguridad relacionados con el manejo seguro de datos y la protección de datos en entornos en la nube. 1\. Adaptación y desarrollo del código a) Refactorizar y adaptar el código Python existente para gestionar el nuevo esquema de datos y las transformaciones. Parte del código ya está disponible en Python, pero necesitaría ajustarse y/o ampliarse (nuevos campos de datos, nuevas fuentes de datos…). b) Desarrollar nuevos módulos para procesar, transformar y cargar datos utilizando PySpark o marcos basados en Python. c) Implementar mecanismos de validación de datos y control de errores. 2\. Soporte de la plataforma Databricks (sería deseable) a) Apoyo en la configuración inicial de Databricks (incluyendo instalación de bibliotecas y optimización de recursos). b) Integración de Databricks con almacenamiento en la nube y fuentes de datos (en Azure y/o Databricks). c) Automatización de trabajos en Databricks o Azure Data Factory. 3\. CI/CD, pruebas y aseguramiento de calidad a) Configurar pipelines de CI/CD para la implementación de código y configuraciones. b) Escribir y ejecutar pruebas unitarias, pruebas de integración y pruebas de rendimiento para pipelines de datos. c) Depurar y solucionar incidencias en un entorno distribuido. 4\. Seguridad de los datos y cumplimiento normativo a) Aplicar buenas prácticas básicas de ciberseguridad para garantizar un manejo seguro y protección de los datos dentro de los pipelines de datos y entornos en la nube. b) Colaborar con los equipos correspondientes para seguir las directrices de seguridad y gobernanza de datos al procesar datos financieros sensibles. 5\. Colaboración y documentación a) Trabajar estrechamente con ingenieros de datos, analistas y arquitectos en la nube para garantizar una integración y operación fluidas. b) Documentar el código, los flujos de trabajo y las configuraciones de la plataforma para garantizar transparencia y referencia futura. Para ello contarás con: \- Presupuesto de 1\.200 € para formación individual que podrás utilizar según tus preferencias (eventos tecnológicos, libros, cursos, certificaciones, etc.). \- Seguimiento mensual con tu equipo para retroalimentación continua. \- Teletrabajo. \- Horario flexible para ayudarte a conciliar tu vida profesional y familiar. \- Seguro médico privado totalmente cubierto por Capitole. \- Remuneración flexible (tickets restaurante, transporte y/o guardería). \- Andjoy (Gymforless). \- Descuentos con importantes marcas para empleados (Club Capitole). Conoce a toda la familia: \- Team Buildings cada dos meses \- ¡No te pierdas la fiesta de verano ni la cena de Navidad! \- Equipo de fútbol patrocinado por Capitole. \- Comunidades tecnológicas para compartir tus conocimientos e ideas con otros equipos; ¡compartir conocimiento interno es fundamental!!!! \- Por último, pero no menos importante, ¡un EQUIPO! ¿Todavía no nos conoces? ¡Descúbrelos!!! https://capitole\-consulting.com/ Consulta lo que dicen de nosotros https://www.glassdoor.es/Opiniones/Capitole\-Consulting\-Opiniones\-E2060890\.html ¡No dudes en enviarnos tu perfil, ¡estamos deseando conocerte! El empleado deberá adherirse a las políticas de seguridad de la información: \- Tendrá acceso a información confidencial relacionada con Capitole y el proyecto en el que esté trabajando. \- Deberá cumplir con las políticas de seguridad y las políticas internas de la empresa y del cliente. \- Deberá firmar un acuerdo de confidencialidad (NDA).