Data Engineer / DevOps Big Data – CIB Données Client (Hadoop / Spark, Jenkins, DevSecOps) (IT) / Freelance

Contexte & mission

Grand groupe bancaire ? pôle IT Data Management & BI. Au sein de la squad Big Data & API (domaine CIB / Données Client), vous renforcez l?équipe pour tenir la production, résorber la dette technique, faire évoluer l?architecture et livrer les développements projets.

Vos responsabilités

Moderniser : upgrades (Spring Boot, Spark 2?3), optimisation du code (APIs & traitements).

Industrialiser : CI / CD Jenkins (migration depuis TFS, création de pipelines from scratch), pratiques DevSecOps.

Automatiser : déploiements via XLDeploy / XLRelease, orchestrations Control-M.

Exploiter : Hadoop on-prem, Spark / PySpark, Hive / SQL / HQL, Unix / Bash.

Développer : APIs et traitements data en Python / Java / .NET.

Profil candidat :

Environnement technique

Hadoop on-prem, Spark / PySpark, Hive / SQL / HQL, Unix / Bash

APIs (Java Spring Boot / .NET), Python

Jenkins (CI / CD, migration TFS?Jenkins), DevSecOps

XLDeploy / XLRelease, Control-M

Ce que nous valorisons

Sens du run et de la fiabilité prod, culture qualité / automatisation, capacité à proposer des évolutions d?architecture et à assainir un existant.

L'important

Maîtrise Hadoop on-prem + Spark / PySpark pour des traitements de données à l?échelle.

Solide expérience CI / CD Jenkins (conception de pipelines ; migration depuis TFS appréciée).

Pratiques DevSecOps intégrées au pipeline (qualité, sécurité, automatisation).

XLDeploy / XLRelease pour l?automatisation des déploiements.

Dév APIs en Java / Spring Boot ou .NET ; scripting Unix / Bash.

Hive / SQL / HQL et optimisation des requêtes.

Connaissance d?un ordonnanceur type Control-M.

Habitude de gérer la prod, réduire la dette technique, proposer des évolutions d?architecture.