Data Engineer confirmé / sénior

Contexte

Dans le cadre de projets de transformation et de modernisation des systèmes d'information chez de grands acteurs de la distribution et de la grande consommation, nous recherchons un Data Engineer confirmé / sénior pour intervenir sur une migration de plateforme Data vers le Cloud.

Vous intégrerez une squad Agile dédiée, au sein d'une organisation Data Factory, dont la mission est de concevoir et déployer des produits Analytics innovants à destination des fonctions support, des équipes logistiques et des points de vente.

Vos missions

En tant que Data Engineer, vous interviendrez sur tout ou partie des missions suivantes :

• Analyse des traitements existants dans le cadre de projets de migration on-premise vers le Cloud
• Conception et construction de pipelines de données pour transformer, enrichir et traiter les données au sein d'un Data Lake
• Développement de notebooks Databricks pour des traitements avancés de données
• Mise en œuvre de solutions de Cloud Data Warehousing (optimisation des traitements et tuning des requêtes SQL)
• Rédaction de la documentation technique (dossiers d'analyse, release notes, etc.)
• Réalisation de revues de code dans une logique de qualité et de bonnes pratiques
• Conception et exécution de tests unitaires
• Livraison des développements dans un environnement DevOps intégrant des processus CI/CD

Environnement technique

• Azure / Databricks / Spark
• Python / SQL
• CI/CD, Azure DevOps
• Outils Agile (JIRA)