Data Engineer HF

Descriptif de poste :

Le Data Engineer développe construit et maintient des infrastructures de données dun point de vue système et sécurité. Il sassure de la collecte du stockage et de lexploitation des flux de données répondant aux enjeux de lentreprise. Il est garant de laccès qualitatif des sources de données qui viennent alimenter le Data Lake afin den faciliter lexploitation par les équipes de Data Science. Il définit également la structure des métadonnées.

Missions :

Infrastructures de données :

Cartographie et documente les sources de données.

Assure la maintenance des différentes applications données (Data) déployées en production et des infrastructures.

Conçoit les solutions permettant le traitement de volumes importants de flux de données et ceci en toute sécurité.

Structure les bases de données (sémantique format etc.).

Contribue à la gestion des référentiels de données.

Intégration des données :

Capte et stocke en toute sécurité les données (structurées ou non) produites dans les différentes applications ou venant de lextérieur de lentreprise.

Assure la supervision et lintégration des données de diverses nature qui proviennent de sources multiples. Vérifie la qualité des données qui entrent dans le Data Lake et sassure de leur sécurité.

Nettoie la donnée (élimination des doublons) et la valide pour une utilisation aval.

Animation des communautés :

Anime la communauté technique qui met en œuvre les dispositifs prévus ou nécessaires à lapplication de la politique de la donnée de lentreprise.

Veille technologique :

Reste en alerte sur les technologies liées au traitement de la manipulation de la donnée et identifie les solutions utilisables.

Propose des évolutions pour les infrastructures et solutions de données en place

Qualifications :

• Bac 5 en statistiques ou mathématiques. École dingénieur ou master spécialisé dans la science de la donnée (data science).
• Doit maîtriser Scala Python Kafka Spark Hadoop ; avec en option une bonne maîtrise de lanalyse de données de lintelligence artificielle ou des méthodes fondamentales en data science

Informations supplémentaires :

Les plus du poste :

Notre processus de recrutement :   un entretien RH (1h) et entretien technique (1h)

Remote Work : Yes

Employment Type : Full-time

Key Skills

Apache Hive,S3,Hadoop,Redshift,Spark,AWS,Apache Pig,NoSQL,Big Data,Data Warehouse,Kafka,Scala

Experience : years

Vacancy : 1