Data Engineer – Expert SPARK SCALA (IT) / Freelance

Vous intégrerez l?equipe IT Corporate Functions Data Integration, qui a pour responsabilité l?intégration des données (ainsi que les flux retours) en provenance de notre partenaire Arkea (qui opère le système bancaire en marque blanche pour le compte de CCF) vers notre Data Platform sur le cloud AWS. Vous aurez à travailler sur le « run » (suivi de production et gestion des défauts sur les données reçues / envoyées) : - Jobs AWS Glue (Spark serverless sur AWS) - Lambda Functions AWS - DAG Airflow - Flux de fichiers CFT / SFTP - Reporting PowerBI ainsi que sur les nouveaux projets : - « Ingestion V2 » : Evolution de l?ingestion des données dans la Data Platform (Spark). - Data Quality : mise en place de traitements (DBT) pour détecter les données non conformes et consolider des KPI permettant de gérer la qualité des données. - Data Privacy : purge de données, mise en conformité RGPD. - API Management (Gravitee) accompagnement au deploiement des nouvelles API / migration des API existantes vers cet outil. Administration de l?outil en lui-même (K8S, helm, AWS). Formation & Expérience Requises : Vous justifiez d'une expérience de plus de 5 ans dans le domaine de la data et / ou des solutions cloud AWS (idéalement orientées Data ou API Management). Profil candidat : Qualités requises : ? Esprit d?analyse et de diagnostique ? Capacité d?anticipation, force de proposition, inventivité ? Excellent sens de la collaboration ? Autonomie et rigueur ? Curieux / se et passionné / ée