Tech lead Data Engineer (H/F)

Mission

Nous recherchons un Tech lead Data Engineer (H/F) pour intervenir sur un projet stratégique Big Data pour un grand groupe international.

L’objectif de ce projet est de développer une plateforme de données robuste et évolutive, capable de gérer un volume conséquent d’informations à l’échelle multi-pays. Cette plateforme permettra de centraliser et standardiser des indicateurs clés afin d’offrir des vues transverses et unifiées aux différentes entités du groupe.

Dans ce cadre, vous serez amené(e) à :

• Concevoir et développer les composants clés de la plateforme : ingestion, traitement/normalisation et distribution des données
• Participer à la mise en place et à l’amélioration d’un framework incluant : monitoring, CI/CD, tests, performance, résilience, bonnes pratiques de développement et qualité du code
• Garantir le respect des directives d’architecture et des frameworks internes
• Collaborer avec les différentes parties prenantes du projet pour promouvoir les bonnes pratiques et proposer des solutions transverses
• Encadrer techniquement une petite équipe de développeurs Big Data (3 personnes)

L’équipe est principalement basée à Paris, avec des déplacements ponctuels possibles en région et à l’international.

Environnement technique

• Solide expérience en Python (conception, tests, bonnes pratiques de développement)
• Maîtrise de Spark / PySpark pour le traitement et la transformation de données à grande échelle
• Maîtrise des problématiques de Data Engineering : architecture Big Data, modélisation, optimisation, environnements distribués
• Connaissance du cloud AWS
• Bonne compréhension des enjeux de monitoring, CI/CD, performance et qualité logicielle