Plattformexpert/in für Databricks (m/w/d)

Leistungsbeschreibung

Ziel der Ausschreibung ist es ein Reporting für den Nachrichtenversand in der energiewirtschaftlichen Marktkommunikation (MaKo) in Data Bricks/PowerBI aufzubauen. Wir suchen eine/n erfahrene/n externe/n Plattformexpert/in für Databricks (m/w/d), die/der nicht nur tiefes technisches Know-how mitbringt, sondern auch erprobte Best Practices aus vergleichbaren Projekten einfließen lässt.

Anforderungen

Der Schwerpunkt der Tätigkeit liegt auf Konzeption und Umsetzung des Reports:

• Konzeption und Entwicklung einer skalierbaren Lösung für die Datenplattform in Databricks
• Datenintegration in den unternehmensweiten Data Lake in einer Medallion-Architektur
• Aufbau eines performanten Datenmodells für das Reporting unter der Berücksichtigung der unternehmensweiten IT-Vorgaben (Deployment in Multi-Tier-Umgebungen, Quality Gates)
• Durchführung von Optimierungsmaßnahmen zur Effizienz- und Qualitätssteigerung
• Dokumentation von Architekturentscheidungen, Prozessen und Projektergebnissen

Must-Have

• Mehrjährige Erfahrung mit Databricks in Konzeption und Implementierung im Bereich Data Engineering (Datenmodellierung, ETL, Orchestrierung von Ladeprozessen)
• Tiefgreifendes Verständnis von Layer-Datenmodellen (z.B. Medallion)
• Erfahrung in der Entwicklung von Berechtigungskonzepten
• Kenntnisse in Continuous Ingestion / Continuous Development
• Fundiertes Verständnis moderner Datenplattformen
• Lösungsorientierte, strukturierte Arbeitsweise
• Sehr gute Kommunikations- und Moderationsfähigkeiten
• Sicherer Umgang mit SQL und Python
• Verständnis von IT Service Management Prozessen (ITIL)
• Erfahrung in agilen Projekten, insbesondere Scrum

Nice-to-Have

• Kenntnisse in Microsoft Azure im Kontext von Databricks / Data Engineering
• Erfahrung mit Machine Learning und LLMs in Databricks
• Sicherer Umgang mit Jira und Confluence
• Gute Kenntnisse in Excel und PowerPoint
• Sehr gute Deutschkenntnisse in Wort und Schrift

Über den Auftraggeber

Start: asap Ende: 31.12.2026 Auslastung: 8 h/week Onsite Stunden: 0 Offsite Stunden: 160 Vertragsart: Contracting Standort: Remote