Talent.com
Mane
Data Engineer H/FMane • Le Bar sur Loup , France
Rechercher d'autres offres
Data Engineer H/F

Data Engineer H/F

Mane • Le Bar sur Loup , France
Il y a 2 jours
Type de contrat
  • CDI
Description de poste

Description du poste

Dans le cadre du développement de sa plateforme Data et de ses projets d'intelligence artificielle, MANE recherche un(e) Data Engineer. Au sein d'un environnement international et industriel, vous contribuerez à construire les fondations Data utilisées par l'ensemble des domaines de l'entreprise : R&D, formulation, production, qualité, supply chain, achats, ventes, finance, ressources humaines et fonctions corporate. Vous travaillerez au sein d'un écosystème basé principalement sur Azure Databricks et Microsoft Fabric / Power BI pour la consommation et la restitution des données.

Vos missions :

1/Concevoir et industrialiser les pipelines de données

Concevoir, développer et maintenir les pipelines d'ingestion et de transformation.

Privilégier Azure Databricks pour les traitements et pipelines Data

Intégrer des données provenant de systèmes hétérogènes : PLM in-house, notamment GPMS / GPMS-Formulation ; PLM du marché ; SAP ECC ; SAP S/4HANA ; MES ; applications métiers, bases de données, fichiers et APIs.

Mettre en place des traitements complets et incrémentaux

Gérer l'historisation, les dépendances, les erreurs et les reprises

Assurer la supervision, la performance et la maintenabilité des pipelines

Documenter les flux et les règles de transformation.

2/Modéliser les données pour les usages BI et IA

Concevoir des modèles de données adaptés aux besoins métiers et analytiques.

Mdéliser les données pour les usages Power BI, reporting, pilotage et analyse.

Modéliser les données pour les projets d'intelligence artificielle et de machine learning.

Suivre les standard de development (ex : architecture medallion)

Construire des datasets fiables, cohérents, historisés et réutilisables.

Préparer les données pour les phases d'entraînement, de validation et d'utilisation des modèles IA.

Garantir la traçabilité entre les données sources, les modèles de données et les usages finaux.

3/Contribuer à la plateforme Data et IA Databricks

Développer les traitements avec SQL & Python, en exploitant les capacités du Spark engine

Exploiter les capacités de Databricks et de Delta Lake.

Participer à la mise en œuvre de modèles de données adaptés aux différents domaines de l'entreprise.

Collaborer avec les équipes IA et Data Scientists pour traduire les besoins en datasets exploitables.

Contribuer à l'industrialisation des cas d'usage IA.

Faciliter la réutilisation des données et des composants entre les projets BI et IA.

Participer à la mise en place de pratiques de qualité, de gouvernance et de supervision des données.

4/Alimenter les usages Power BI

Alimenter les datasets et modèles sémantiques utilisés par Power BI via Microsoft Fabric.

Garantir la qualité, la fraîcheur et la cohérence des données consommées.

Collaborer avec les équipes BI et métiers pour répondre aux besoins de reporting et de pilotage.

5/Collaborer avec l'IT, l'IA et les métiers

Profil du candidat recherché

De formation supérieure en informatique, Data Engineering, systèmes d'information ou domaine équivalent, vous disposez d'une expérience significative en développement de pipelines et en modélisation de données.

Vous maîtrisez :

Azure Databricks ;

Python et/ou PySpark ;

SQL ;

la conception de pipelines ETL/ELT ;

la modélisation de données ;

les architectures Data Lake, Lakehouse et datawarehouse

les traitements incrémentaux et l'historisation ;

les principes de qualité, de gouvernance et de traçabilité des données.

Une expérience avec Power BI, Microsoft Fabric, SAP, un PLM ou un MES constitue un atout.

Une connaissance des usages IA préparation de datasets, feature engineering, machine learning ou MLOps est également appréciée.

Vous êtes reconnu(e) pour :

votre rigueur et votre sens de la qualité ;

votre capacité à comprendre des modèles de données complexes ;

votre esprit d'analyse ;

votre autonomie ;

votre capacité à travailler avec les équipes IT, Data, IA et métiers ;

votre aptitude à transformer un besoin métier en solution data concrète ;

votre esprit d'équipe et votre orientation solution.

Créer une alerte emploi pour cette recherche

Data Engineer H/F • Le Bar sur Loup , France