Cette offre d'emploi n'est pas disponible dans votre pays.

Data Engineer (AWS, Snowflake & Terraform) (IT) / Freelance

Trait d'Union ConsultingParis, Île-de-France, France

Il y a 6 jours

Type de contrat

Temps plein

Télétravail

Description de poste

Notre client souhaite renforcer son équipe DataPlatform.

Vous rejoindrez une équipe composée de 3 Data Engineer, 1 DB Admin, 1 Responsbale BI, 1 Product Owner appuyé par des DevOps mettant à disposition les infrastructures de gestion de la donnée.

Vous aurez la charge de 3 principales missions :

1° Implémentation de nouveaux flux de données sur AWS & Terraform avec Python / Airflow (COLD et STREAMING)

Implémentation des flux de données de l?extraction à l?exposition des données via Python / Airflow Managé ou avec Nifi pour les données « cold » et « streaming »

2° On vous demandera pour chacun des projets :

Code Review entre les data engineers

Réalisation des tests unitaire, de non-régression et d?intégration

Mise à jour de la documentation sous Confluence

Mettre à jour la documentation dans confluence.

Réaliser les tests unitaires et d?intégration.

Respecter les bonnes pratiques de développements

3° Maintenance corrective des flux de données

1 à 2 jrs de remote

Localisé Paris 12e

Profil candidat :

En terme d'environnement :

AWS, Terraform, ingestion dans Datawarehouse Snowflake.

Nifi pour l?ingestion sur du Kafka / API et AWS Lambda sous Python et Airflow.

SQS / SNS / Snowpipe (Snowflake)

Gitlab et CI / CD.

Créer une alerte emploi pour cette recherche

Data Engineer • Paris, Île-de-France, France