Data Engineer (m/w/d)

About the Role

Bei A1 entwickelst du gemeinsam mit einem erfahrenen Team moderne Analytics- und Datenintegrationslösungen – von der Konzeption über die Umsetzung bis zum stabilen Betrieb – und gestaltest die Weiterentwicklung unserer Datenplattform aktiv mit.

Responsibilities

• Verantwortung für die Migration, Modernisierung und Weiterentwicklung unternehmenskritischer, komplexer Datenverarbeitungs‑ und Datenintegrationslösungen, z. B. Migration klassischer DWH‑/ETL‑Architekturen auf moderne Big‑Data‑Plattformen.
• Konzeption und Implementierung von Lösungen für die gesetzeskonforme Verarbeitung und Historisierung hochregulierter, besonders schützenswerter Telekommunikationsdaten.
• Analyse, Design und Betrieb hochkomplexer Schnittstellen zwischen Data‑Produkten, Quellsystemen und Zielsystemen; Weiterentwicklung der kompletten Job‑ und Datenarchitektur auf Basis von Apache Spark, Airflow, Kubernetes, Python, SQL, C und Unix Shell.
• Entwicklung hochperformanter Analyse‑ und Abfragesysteme im Umfeld von PySpark und Sicherstellung eines stabilen, gesetzeskonformen Datenbetriebs.
• Gestaltung, Entwicklung und Betrieb innovativer ETL‑Frameworks – einschließlich eigenentwickelter Airflow‑Operatoren, ETL‑Pipelines und Automatisierungs‑Tools in Python, PySpark und Bash.
• Aktiver Beitrag zum Aufbau und zur Weiterentwicklung von CI/CD‑Prozessen im Data Engineering sowie Vorantreiben moderner Entwicklungsprozesse wie Testing, Git und Deployment.
• Arbeit mit agilen Methoden und zugehörigen Tools (JIRA, Confluence), strukturierte und verständliche Dokumentation von Konzepten und Umsetzungen sowie Setzen neuer Standards in der Nachvollziehbarkeit.

Requirements

• Abgeschlossenes technisches Studium (z. B. Informatik, Mathematik, Data Science) oder mehrjährige relevante Berufserfahrung im Big‑Data‑ bzw. Data‑Engineering‑Umfeld.
• Tiefgehende Erfahrung mit modernen Datenverarbeitungs‑Frameworks und Orchestrierung, insbesondere Apache Spark, Apache Airflow und Kubernetes.
• Sehr gute Programmierkenntnisse in Python, SQL und Unix Shell; weitere Kenntnisse, z. B. in C, sind von Vorteil.
• Praktische Erfahrung im Aufbau und Betrieb hochperformanter, gesetzeskonformer Data‑Processing‑Lösungen und Suchsysteme in verteilten Umgebungen (Data Lake, Data Mart).
• Nachweisliche Erfahrung im Design und in der Umsetzung komplexer ETL‑Prozesse inklusive Automatisierung und Performance‑Optimierung.
• Solide Kenntnisse in CI/CD, automatisiertem Testing und Versionsverwaltung (z. B. Git).
• Erfahrung im agilen Projektmanagement sowie in der Dokumentation und Optimierung von Prozessen, idealerweise mit JIRA und Confluence.
• Sehr gute Deutsch‑ und Englischkenntnisse in Wort und Schrift.

Benefits

• Hochspannende, herausfordernde Aufgaben an zentralen Datenprodukten im Telekommunikationsumfeld.
• Arbeiten in einem exzellenten, motivierten Team aus Data‑ und Software‑Engineers.
• Viel Raum für Eigenverantwortung, Gestaltung und Innovation.
• Attraktives Bruttojahresgehalt von mindestens 53.000 € mit Möglichkeit auf Überbezahlung bei entsprechender Qualifikation.