Senior Data Engineer H/F - 75

Nous recherchons un(e) Senior Data Engineer spécialisé(e) en Python, Pyspark, AWS, et data, pour rejoindre notre équipe dynamique. Vous jouerez un rôle clé dans la création, l'optimisation et l'amélioration des pipelines de données pour l'ingestion, l'enrichissement et l'exposition des données classifiées et transactionnelles sur AWS. Vous travaillerez directement sous la direction de notre Team Lead Data Engineer, qui organisera les tâches et assurera le bon déroulement du projet.

Les missions :

- Optimisation du pipeline : Analyser et améliorer les pipelines de données existants pour optimiser les performances, la rentabilité et l'évolutivité.
- Transformation du pipeline : Transition des pipelines batch/snapshot vers des pipelines de gestion delta.
- Infrastructure as Code : Développer et maintenir des modules Terraform pour une gestion efficace de l'infrastructure sur AWS.
- Migration du pipeline : Migration des pipelines de données de Google Cloud Platform vers AWS en minimisant les interruptions et en garantissant une fiabilité élevée.
- Surveillance et alertes : Concevoir et mettre en oeuvre des tableaux de bord et des systèmes d'alerte DataDog pour assurer une surveillance proactive des performances du pipeline de données.
- Veille technologique et innovation : Se tenir informé des nouvelles technologies et promouvoir activement les innovations et améliorations pertinentes au sein de l'équipe.
- Mentorat et soutien de l'équipe : Soutenir et guider les membres de l'équipe level junior, partager l'expertise et les bonnes pratiques, et contribuer à la croissance globale de l'équipe.