Votre défi
Au cœur de notre Data Platform vous prendrez en main des pipelines de données fiables performants et prêts à grandir.
Sur une stack moderne (Dagster S3 AWS) vous construirez une architecture medallion (bronze / silver / gold) en production.
Votre rôle est central : garantir une donnée de qualité socle de nos équipes métiers de nos modèles ML et de nos APIs.
Vos responsabilités
Ingestion & stockage
Concevoir et maintenir des pipelines de données robustes avec Dagster (assets sensors partitions lineage)
Ingérer des sources hétérogènes : APIs REST webhooks fichiers bases de données
Implémenter larchitecture medallion S3 Bronze Silver Gold
Administrer et optimiser les tables Postgre MariaDB ... (schémas index TTL) et implémenter des stratégies de partitionnement adaptées aux volumes et aux patterns de requêtes
Qualité & observabilité
Mettre en place des tests de qualité des alertes de fraîcheur et des métadonnées de suivi (row count anomalies)
Superviser la santé des pipelines via Grafana (dashboards alertes SLOs)
Documenter le dictionnaire de données et maintenir le lineage
Exposition & APIs
Développer des APIs FastAPI pour exposer les données gold aux consommateurs internes
Participer à la définition des contrats de données avec les équipes Product et métiers
Data product
Concevoir des data products réutilisables (datasets versionnés APIs documentées semantic layer) en binôme avec les équipes Product & Analytics
Notre environnement technique
Orchestration : Dagster (assets sensors partitions lineage)
Stockage & query : AWS S3 Postrgres ClickHouse AWS Athena
Langage : Python SQL Pandas
Format données : Parquet JSON CSV
Exposition : FastAPI
Infrastructure : AWS (ECS S3 Athena SNS/SQS)
CI/CD & versioning : GitLab CI Docker Terraform
Monitoring : Grafana Dagster UI
Qualifications :
Indispensable
2 ans minimum dexpérience en data engineering avec Python et solide connaissance de SQL
Maîtrise de lécriture de pipelines robustes (gestion derreurs idempotence retry)
Expérience avec un orchestrateur de pipelines (Dagster Prefect ou Airflow) et familiarité avec AWS / architectures lakehouse (S3 Parquet Athena)
Apprécié
Expérience spécifique avec Dagster et Postgres
Connaissance de larchitecture medallion et des patterns de qualité de données
Expérience avec FastAPI pour lexposition de données
Maîtrise de GitLab CI et pratique des pipelines CI/CD pour la data
Softskills
Autonomie et sens des priorités dans un environnement proche des besoins métiers
Goût pour la documentation et la transmission
Mindset product : penser à lutilisateur final de la donnée autant quau pipeline
Communication claire avec des interlocuteurs non-techniques
Informations supplémentaires :
Ce que nous offrons
Une stack moderne toujours ouverte à de nouveaux outils
Un vrai ownership de la conception au monitoring
Un environnement hybride et flexible
Une équipe Data Platform soudée et bienveillante
Remote Work :
No
Employment Type :
Full-time
Data Engineer (FH) • Rennes, Ille-et-Vilaine, France
Devenez franchisé Pestaly et lancez votre entreprise dans le traitement des nuisibles.Vous souhaitez entreprendre, créer votre propre activité et vous positionner sur un marché essentiel, en forte ... Voir plus
En tant qu'ingénieur ou ingénieure d'Essais en signalisation ferroviaire, vous serez amené à : /strong /pullipPréparer, exécuter et coordonner des essais : /pullipElaborer et réaliser des prestat... Voir plus
Jeunes diplômés ambitieux ? Devenez ingénieur d'affaires industrielles chez agap2 !À propos d'Agap2agap2 est une société de conseil européenne en ingénierie industrielles.Depuis 20 ans, nou... Voir plus
Jeunes diplômés ambitieux ? Devenez ingénieur d'affaires industrielles chez agap2 !À propos d'Agap2agap2 est une société de conseil européenne en ingénierie industrielles.Depuis 20 ans, nou... Voir plus
Data Trust & AI Governance Manager Le Data Trust & AI Governance Manager garantit la conformité, la fiabilité et la traçabilité des systèmes d'intelligence artificielle déployés chez no... Voir plus
Recherche d'un ingénieur IAM à Rennes, avec compétences en Active Directory et scripting, et un bon niveau d'anglais. Voir plus
Groupe international d’ingénierie et d'expertise en technologies, fortil repose sur un modèle indépendant et rassemble plus de 2 500 collaborateurs.Avec 30 agences réparties dans 14 pays, fortil cu... Voir plus
Une société spécialisée en solutions IT recherche un(e) Ingénieur(e) Systèmes Linux pour rejoindre son équipe, avec la possibilité de travailler en full remote.Le candidat idéal possède une formati... Voir plus
Stage de 6 mois pour un futur Category Manager dans le secteur agroalimentaire à Rennes.Le rôle implique l'analyse des performances et la participation aux comités de vente. Voir plus
Le Data Analyst Senior sera responsable de piloter la feuille de route Power BI, d'implémenter le socle BI, et d'accompagner les équipes dans l'adoption de l'outil. Voir plus
L'expert en gouvernance des données met en place et gère des solutions MDM, conçoit des modèles de données, définit et met en œuvre des politiques de gouvernance. Voir plus
Vous souhaitez vous former au métier de Data Analyst ?Cette alternance vous permettra de développer vos compétences en gestion d’équipe, coordination de projets et optimisation de la performance au... Voir plus
Au sein d’une équipe d’une 50taine de personnes, en tant que.Consultant technique / développeur Sénior Microsoft Dynamics 365 F&O – F/H.Dynamics 365 Finance & Operations en X++ et.NET selon les bes... Voir plus
Filiale française du groupe O-Net Technologies (Group) Limited, 3SP Technologies est une PME en pleine croissance, qui conçoit et fabrique des puces et des modules optoélectroniques pour les réseau... Voir plus
Business Developer - H/F* Rennes* CDINotre cœur de métier, c’est la mise en relation.Notre mission c’est de permettre à chacun de trouver un job ou une formation qui lui correspond.Et ça marche : p... Voir plus
VV renforce son équipe de concepteurs - développeurs de projets de densification douceLe manque de foncier constructible, la hausse des coûts de construction et des taux d'intérêt enfonce de jo... Voir plus
Intégrée au pôle Numérique du Groupe E’nergys, notre filiale Agora Calycé est une entreprise qui propose des solutions d’hébergement informatique, d’optimisation des systèmes numériques, de migrati... Voir plus
Depuis 1994, Siradel est une entreprise française de référence en géointelligence, pionnière dans la modélisation, la cartographie 3D et l'analyse géospatiale.Depuis plus de 30 ans, nous accomp... Voir plus
Opérateur CN expérimenté pour le tournage et le fraisage, responsable du réglage, de la programmation et du contrôle des machines numériques pour la fabrication d'engins.Mission axée sur la qua... Voir plus
Net sera responsable de la conception et du développement de solutions web, de l'encadrement de l'équipe et de l'intégration des dernières technologies. Voir plus
){kind=logo}
