Data Engineer

Descriptif du poste

Votre mission

En tant que Data Engineer votre rôle sera dindustrialiser des solutions dIA scalables de développer des pipelines dingestion et de transformation de données à gros volume ainsi que de mettre en place des architectures data dans le cloud ou on-premise (data warehouses data lakes ). Ces solutions sinscrivent dans le cadre de projets sur-mesure pour nos clients ou pour répondre aux besoins en data engineering de nos produits. Parallèlement à ces activités de conception vous participerez également à faire grandir lactivité de Data Engineering / ML Ops chez ILLUIN Technology.

Vos responsabilités

Participer à la conception et loptimisation des applications et architectures traitant un gros volume de données et répondant aux besoins des utilisateurs / clients

Participer au pilotage dune équipe expérimentée de data engineers

Perfectionner ses compétences et chercher constamment à améliorer les outils et les méthodes employées (veille technologique R&D échanges de bonnes pratiques hackathons)

Participer à des code reviews avec les membres de votre équipe challenger les implémentations partager votre expertise et faire grandir les illuiners juniors autour de vous

Prendre part aux cérémonies et sprint reviews en lien direct avec le client / nos équipes produits

Participer à lévolution de notre stack technique de ML Ops

Participer à lévolution de notre pôle de Data Engineering en épaulant ponctuellement léquipe commerciale grâce à votre expertise technique

Participer au développement de projets internes transverses : recherche OPS sécurité formations etc

Profil recherché

Nous cherchons le match parfait mais nous croyons à la richesse des rencontres ! Alors si vous nêtes pas certain.e de matcher notre recherche nous vous encourageons à nous contacter quand même

Must have

Connaissance avancée dau moins un langage de programmation (Java / Kotlin / Scala / Python)

Maîtrise avancée de SQL

Bonne compréhension des solutions de processing de données (queueing streaming batch processing caching)

Bonne compréhension des solutions de stockage données (bases de données SQL / NoSQL data warehouse data lake data lakehouse)

Expérience avec Git et des outils dintégration continue

Expérience avec Docker

Nice to have

Certification de solutions cloud de data engineering (Azure GCP AWS Databricks Snowflake)

Utilisation de solutions de MLOps / ML Engineering (Bento ML Zen ML ClearML MLFlow Dvc )

Expérience en OPS (Kubernetes Terraform Ansible )

Bonne compréhension du fonctionnement du Web

Tests unitaires dintégration et de charge

Expérience avec un framework back-end (Spring Symfony )

Connaissances en IA / data science (machine learning deep learning NLP)

Connaissances de base UNIX & Bash

Appétence pour gérer la relation client

Les gens disent de vous que

Vous êtes engagé.e et prêt.e à donner le meilleur de vous-mêmes

Vous êtes flexible empathique autonome

Vous avez le sens du partage et le sens du travail en équipe

Vous partagez nos valeurs : confiance empowerment excellence innovation

Required Experience :

IC

Key Skills

Apache Hive,S3,Hadoop,Redshift,Spark,AWS,Apache Pig,NoSQL,Big Data,Data Warehouse,Kafka,Scala

Employment Type : Full-Time

Experience : years

Vacancy : 1