Description du poste
Offre d’Emploi : Data Engineer Expérimenté
Société : Aezan Localisation : Levallois-Perret Télétravail : 2 à 3 jours par semaine sur site
Langues: anglais courant indispensable
Contexte de la mission Aezan recherche un expert expérimenté en Ingénierie de Données possédant une double expertise en Développement Backend pour rejoindre l’un de ses clients. Le candidat participera au renforcement d’une équipe dédiée à l’observabilité et au traitement de données critiques.
Une maîtrise technique avancée dans le développement backend au sein d’un environnement Azure et DevOps, ainsi qu’une expertise approfondie en gestion et traitement des données (4+ ans) sont indispensables. Une excellente maîtrise du français et de l’anglais, à l’écrit comme à l’oral, est requise.
Responsabilités principales
Développement Backend Concevoir, développer et maintenir des services backend (Python, PySpark), exposant des APIs et des intégrations orientées observabilité. Implémenter des solutions robustes et performantes pour répondre aux besoins métier et d’observabilité.
Ingénierie des Données - Construire et orchestrer des pipelines ELT/ETL robustes (Airflow, Spark, Python), incluant ingestion, transformation, qualité et suivi des données.
- Garantir la fiabilité, la sécurité et la gouvernance des flux de données (tests, observabilité).
- Stockage et Visualisation des Données
- Gérer les données via PostgreSQL, Azure Blob Storage et ADLS.
- Créer des tableaux de bord et visualisations avancées avec Grafana pour suivre les performances et les métriques clés.
- Collaboration Inter-équipes
- Travailler en étroite collaboration avec les équipes de développement, Product Owners et parties prenantes dans un environnement Agile/Scrum.
- Intégrer les pratiques d’observabilité dans les cycles de développement pour améliorer la résilience et la visibilité des systèmes.
- Compétences techniques requises
Langages : Python (avancé), PySpark, SQL
Outils et environnements : Spark & Airflow, PostgreSQL, Azure Blob Storage, ADLS Familiarité avec AKS (Azure Kubernetes Service), Azure Functions, Event Hub Grafana pour la visualisation et le monitoring
DevOps et CI/CD : Expérience sur pipelines CI/CD via GitHub Connaissance des pratiques d’intégration et déploiement continus