Data Engineer
Harnham
Paris, Île-de-France, France
Data Engineer
Paris / Lille
Up to 65k€
CDI - Pas Freelance
Cette entreprise internationale dans le monde de l'assurance developpe son equipe data et recherche un nouveau Data Engineer.
Responsabilités :
- Collaborer avec les architectes de données pour garantir que le développement est aligné sur l'architecture cible.
- Développer des processus d'ingestion de données, facilitant le streaming de données en temps réel et par lots dans le lac de données.
- Mettre en œuvre des mécanismes de génération de couches de données sélectionnées comprenant divers ensembles de données pour la consommation commerciale.
- Diriger la mise en œuvre de MLOps pour rationaliser le déploiement d'algorithmes ML à l'échelle de l'entreprise.
- Établir des cadres pour l'entreposage de données afin d'accélérer la génération de modèles en étoile.
- Travailler en étroite collaboration au sein d'une équipe agile aux côtés des trains de publication agile, des propriétaires de produits et des maîtres scrum pour atteindre les objectifs de l'équipe.
- Participer activement aux cérémonies de la communauté de pratique de l'ingénierie des données, en particulier aux chapitres, pour partager des connaissances techniques et favoriser la collaboration.
Candidat idéal : Must have :
Must have :
- 3 à 5 ans d'expérience en gestion de données et en technologies Big Data, avec une maîtrise de SQL, PySpark et Python.
- Une expérience pratique approfondie (3+ ans) avec les services de Cloud Computing AWS : Glue, Athena, Redshift et DynamoDB.
- Une expérience avérée (3+ ans) dans la mise en œuvre des entrepôts de données.
- Maîtrise de l'anglais.
Un Plus :
- Connaissance supplémentaire des services de Cloud Computing AWS : CDK, SageMaker, fonctions Lambda, Lake Formation, Kinesis.
- Familiarité avec les outils BI (de préférence QuickSight ou PowerBI).
- Maîtrise de Git, Jupyter Notebook, pip, Java, Apache Airflow.
Il y a 15 jours