Consultant Data - Databricks

Contexte client

Dans le cadre du renforcement de ses équipes data, la DSI recherche un profil capable de concevoir et industrialiser des pipelines Data et Machine Learning. Tu interviendras en étroite collaboration avec les data scientists afin de transformer des prototypes en solutions robustes et exploitables en production.

Missions

• Concevoir et développer des pipelines Data/ML batch sous Azure Databricks
• Exploiter les outils PySpark, Delta Lake, MLFlow et les workflows d’orchestration
• Optimiser les performances des traitements (partitionnement, gestion mémoire, exploitation GPU)
• Développer des composants logiciels en Python (qualité de code, tests, documentation) et des APIs sous Azure
• Participer aux projets de bout en bout : cadrage, conception, mise en production, ainsi qu’aux phases de maintenance et d’amélioration continue