Data Engineer Databricks Confirmé H/F

About Starclay

L'approche de Starclay au sein du Groupe Partenor se caractérise par une double compétence Métier et SI ; mettre les utilisateurs au centre de tous les projets depuis la formalisation des besoins jusqu'à la formation de ces derniers.

Nous nous positionnons en tant qu'acteur clé dans les dispositifs d'amélioration continue notamment à travers l'IA générative.

Vous rejoignez un acteur majeur engagé dans une transformation data d'envergure. Au sein de l'équipe Plateforme, vous êtes garant de la conception, de l'optimisation et de la fiabilité des pipelines d'ingestion pour l'ensemble des applications Data et IA du Groupe. Votre niveau de responsabilité sera adapté selon votre séniorité.

Missions

• Ingénierie de données : Concevoir, développer et tester des pipelines de données (Batch & Streaming) exclusivement sous Databricks.
• Culture DevOps : Opérationnaliser les traitements via CI/CD et tests d'intégration, puis assurer la mise en production.
• Performance et FinOps : Optimiser la consommation des ressources Cloud et la rapidité des traitements Databricks.
• Expertise et Support : Intervenir en support expert pour la résolution d'incidents complexes par l'analyse des causes racines.
• Outillage : Maintenir et faire évoluer les outils d'automatisation mis à disposition des développeurs data.

Qualifications

Issu d'une formation Bac +5 (ingénieur ou universitaire), vous justifiez d'au moins 5 ans d'expérience en tant que data engineer et une mission concrète avec databricks.

• Expertise Technique : Développeur en Python, Spark et Scala
• Certification : Une certification Databricks Certified Data Engineer Associate ou Professional est requise
• Cloud et Infra : Expérience sur AWS ou Azure. Maîtrise des outils Terraform, Jenkins ou GitLab CI
• Conteneurisation : Pratique de Docker ou Kubernetes
• Data Responsable : Sensibilité aux enjeux RGPD, au Data Act et à l'optimisation environnementale des codes
• Qualités : Rigueur analytique , excellente communication orale et rédactionnelle et curiosité technique