Data Engineer - Desarrollador

Descripción

**GRUPO BNP PARIBAS** El Grupo BNP Paribas es el banco líder en la Unión Europea y una importante institución bancaria internacional. Cuenta con cerca de 185.000 empleados en 65 países. En España somos más de 5.100 empleados distribuidos en 13 líneas de negocio. **IDRAS** --------- ¿Quiénes somos? Somos South Europe Technologies (SET Iberia); el centro compartido de TI, Datos y Operaciones de BNP Paribas Personal Finance, con centros de entrega en España y Portugal, que ofrece las mejores soluciones a las entidades de BNPP PF en todo el mundo, como Cetelem (especializada, entre otros, en alianzas financieras con grandes cadenas de distribución, empresas de bienes de consumo y concesionarios de automóviles). Entre otros servicios, nuestro portafolio incluye: * Gestión de aplicaciones (arquitectura, gestión de proyectos, desarrollo y aseguramiento de la calidad) * Servicios de riesgos TI y ciberseguridad * Gestión de plataformas * Analítica de datos e IA * Operaciones Nuestras oficinas están ubicadas en España (Madrid) y Portugal (Lisboa, Oporto). La empresa reúne a más de 200\+ empleados, con experiencia en diversas tecnologías (Java, .Net, Python, Tibco, APIGee) y otros perfiles operativos (analista funcional, gestor de proyectos, analista de negocio, operadores de financiación automovilística). ¡Seguimos creciendo! Nuestra trayectoria constante en la prestación de servicios brinda confianza a nuestros clientes y oportunidades a nuestros empleados. Descubrirás que SE.T es un entorno dinámico y un lugar de trabajo inclusivo donde realmente puedes marcar la diferencia. ¿Te gustaría unirte a nuestro equipo internacional que ofrece soluciones integrales (actividades de aplicaciones y operaciones) a las entidades del Grupo BNP Paribas Personal Finance en todo el mundo? En un contexto de mantenimiento del alto nivel de las actividades actuales, mientras aumentamos el número de clientes internacionales, buscamos a nuestro Data Engineer \- Desarrollador. **SOBRE EL PUESTO** ----------------- MISIÓN: El ingeniero de datos es un rol clave en cualquiera de los distintos equipos especializados en datos encargados del desarrollo y mantenimiento de nuevas plataformas de big data y productos de datos. Su misión principal consiste en desarrollar las diferentes canalizaciones de datos que ingieren, transforman y preparan datos procedentes de diversas fuentes en las distintas capas de nuestra plataforma de datahub y/o productos de datos. RESPONSABILIDADES: * Modelado de datos y desarrollo de canalizaciones con Spark y Scala para ingerir y transformar datos desde distintas fuentes (tópicos de Kafka, APIs, HDFS, bases de datos estructuradas, archivos…) hacia HDFS, IBM Cloud Storage (generalmente en formato parquet) o bases de datos SQL/NOSQL siguiendo reglas comerciales complejas. * Gestión de soluciones de almacenamiento de big data en la plataforma (HDFS, IBM Cloud Storage, bases de datos estructuradas y no estructuradas). * Transformación y calidad de los datos: implementación de procesos de transformación y control de calidad de los datos para garantizar su coherencia y precisión. Uso de lenguajes de programación como Scala y SQL, así como bibliotecas como Spark para la transformación y enriquecimiento de los datos. operaciones. * Implementación de pipelines CI/CD: configuración de pipelines CI/CD para automatizar la implementación, las pruebas unitarias y la gestión del desarrollo. * Migración de infraestructura: migración de la infraestructura existente de Hadoop a infraestructura en la nube sobre Kubernetes Engine, Object Storage (IBM Cloud Storage), Spark como servicio en Scala (para construir las canalizaciones de datos) y Airflow como servicio (para orquestar y programar las canalizaciones de datos). * Implementación de esquemas, consultas y vistas en bases de datos SQL/NOSQL como Oracle, Postgres o MongoDB. * Desarrollo y configuración de la programación de canalizaciones de datos mediante una combinación de scripts en shell y Airflow como servicio. * Pruebas de validación: realización de pruebas unitarias y de validación para garantizar la exactitud e integridad. * Documentación: redacción de documentación técnica (especificaciones, documentos operativos) para asegurar la capitalización del conocimiento. * Mejora del código: modificación del código existente según los requisitos comerciales y mejora continua para lograr un mejor rendimiento y mantenibilidad. * Configuración de Dremio Data Virtualization para su integración con Parquet o como medio para exponer los datos en los distintos productos de datos. * Optimización del rendimiento y seguridad: garantía del rendimiento y la seguridad de la infraestructura de datos y aplicación de las mejores prácticas de ingeniería de datos. Herramientas TI: * Spark en Scala como lenguaje de desarrollo heredado para canalizaciones de datos. * Spark como servicio en Scala como plataforma de desarrollo de canalizaciones de datos. * Experiencia en el diseño y desarrollo de procesos de streaming mediante Spark Streaming, Spark Structured Streaming y Apache Kafka. * Gestión de soluciones heredadas de almacenamiento de big data (HDFS). * Gestión de soluciones de almacenamiento de big data (IBM Cloud Object Storage y formato parquet). * Implementación de esquemas, consultas y vistas en bases de datos SQL/NO SQL (MongoDB, Oracle, Postgres). * Scripts en shell y Airflow como solución de programación de canalizaciones de datos, * Dremio como herramienta de virtualización de datos. REQUISITOS * Tienes experiencia en empresas internacionales de TI. * Tienes un mínimo de 2 años de experiencia comprobada en puestos relacionados. * Idiomas: inglés B2/C1; francés, como valor añadido. COMPETENCIAS * Competencias comerciales: * Conocimiento del sector bancario y sus procesos. * Relación entre negocio y TI. * Competencias conductuales: * Capacidad para comprender, explicar y apoyar el cambio. * Orientación a resultados / capacidad de ejecución. * Capacidad de colaboración / trabajo en equipo. * Capacidad de gestión de proyectos, como valor añadido. * Competencias transversales: * Metodología ágil. **BENEFICIOS** ------------ * Programas de formación, planes de carrera y oportunidades de movilidad interna, tanto a nivel nacional como internacional gracias a nuestra presencia en distintos países. * Comité de Diversidad e Inclusión que garantiza un entorno laboral inclusivo. En los últimos años se han creado varias comunidades de empleados para organizar acciones de sensibilización sobre diversidad e inclusión (PRIDE, We Generations y MixCity). * Programa corporativo de voluntariado (1 Million Hours 2 Help), en el que los empleados pueden dedicar tiempo fuera de su jornada laboral a actividades de voluntariado. * Plan flexible de compensación * Modelo híbrido de teletrabajo (50%) * 31 días de vacaciones. **Compromiso con la diversidad y la inclusión** -------------------------------------- El Grupo BNP Paribas en España es un empleador que promueve la igualdad de oportunidades y se enorgullece de ofrecerla a todos los candidatos. Estamos firmemente comprometidos con garantizar que ninguna persona sea discriminada por motivos de edad, discapacidad, cambio de género, estado civil o de pareja, embarazo y maternidad/paternidad, raza, religión o convicciones, sexo u orientación sexual. La equidad y la diversidad son pilares fundamentales de nuestra política de contratación, ya que consideramos que fomentan la creatividad y la eficiencia, lo que a su vez incrementa el rendimiento y la productividad. Nos esforzamos por reflejar la sociedad en la que vivimos, manteniendo al mismo tiempo la imagen de nuestros clientes. **Sobre nuestra cultura** --------------------- Nos enorgullece crear, mantener y desarrollar aplicaciones empresariales estratégicas para las entidades de BNP Paribas Personal Finance en todo el mundo, manteniendo altos niveles de servicio y aportando valor añadido a nuestros clientes. En nuestro entorno multicultural, fomentamos el desarrollo de talentos y habilidades de todos los miembros del equipo, ofreciendo una amplia variedad de oportunidades profesionales y programas de movilidad interna dentro de los equipos locales de SET o entre otras entidades del Grupo, tanto en España como a nivel global. Valoramos la experiencia de nuestros empleados y trabajamos para mantener un entorno equilibrado, ofreciendo flexibilidad en los horarios de trabajo y respeto por el tiempo personal. Nuestro modelo de trabajo híbrido es una muestra clara de nuestra convicción de que la conexión social potencia nuestras actividades diarias. La diversidad y la inclusión figuran entre nuestros valores fundamentales, y SET es un empleador que promueve la igualdad de oportunidades. Nos comprometemos a garantizar oportunidades laborales independientemente de la etnia, las creencias, la religión, la nacionalidad, la edad, el sexo, la orientación sexual, el estado civil o las opiniones políticas.