Data Engineer – Big Data

Über das Unternehmen

Die Otto Group ist eine weltweit agierende Handels- und Dienstleistungsgruppe mit rund 50.000 Mitarbeitern und einem Jahresumsatz von 16 Milliarden Euro. Als führender Online-Händler in Deutschland gestalten wir die Zukunft des E-Commerce durch innovative Technologien und datengetriebene Ansätze. Werden Sie Teil unseres Teams und revolutionieren Sie mit uns die Welt des Handels!

Stellenbeschreibung

Wir suchen einen erfahrenen Data Engineer mit Leidenschaft für Big Data-Technologien, um unsere Dateninfrastruktur und -plattformen weiterzuentwickeln und zu optimieren. In dieser Rolle werden Sie eng mit unseren Data Scientists und Softwareentwicklern zusammenarbeiten, um robuste, skalierbare und effiziente Datenpipelines zu entwerfen, zu implementieren und zu warten, die die Grundlage für unsere datengesteuerten Produkte und Geschäftsentscheidungen bilden.

Hauptverantwortlichkeiten

• Entwicklung und Wartung skalierbarer Datenpipelines und ETL-Prozesse unter Verwendung von Big Data-Technologien (z. B. Apache Spark, Kafka, Hadoop).

• Design und Implementierung von Datenmodellen und -schemata für Data Warehouses und Data Lakes.

• Zusammenarbeit mit Data Scientists und Analysten zur Bereitstellung hochwertiger und zugänglicher Daten.

• Überwachung, Optimierung und Fehlerbehebung von Datenpipelines und -systemen, um hohe Leistung und Verfügbarkeit zu gewährleisten.

• Sicherstellung der Datenqualität, -sicherheit und -governance.

• Evaluierung neuer Technologien und Tools zur Verbesserung unserer Datenarchitektur.

Erforderliche Fähigkeiten

• Fundierte Erfahrung mit Big Data-Technologien wie Apache Spark, Hadoop, Kafka oder Flink.

• Sichere Programmierkenntnisse in Python, Scala oder Java.

• Erfahrung mit SQL und NoSQL-Datenbanken (z. B. PostgreSQL, Cassandra, MongoDB).

• Kenntnisse in Cloud-Plattformen (z. B. AWS, Azure, GCP) und deren Daten-Services.

• Erfahrung mit Datenmodellierung und Data Warehousing-Konzepten.

• Fließende Deutsch- und gute Englischkenntnisse.

Bevorzugte Qualifikationen

• Abgeschlossenes Studium der Informatik, Wirtschaftsinformatik oder einem verwandten Bereich.

• Erfahrung mit Containerisierungstechnologien (Docker, Kubernetes).

• Kenntnisse in CI/CD-Pipelines für Datenprodukte.

• Vertrautheit mit Machine Learning-Pipelines und MLOps.

• Erfahrung in agilen Arbeitsmethoden (Scrum, Kanban).

Vorteile & Zusatzleistungen

• Attraktives Gehaltspaket und flexible Arbeitszeiten.

• Möglichkeit zum hybriden Arbeiten (Büro und Remote).

• Umfassende Weiterbildungsmöglichkeiten und Karriereentwicklung.

• Mitarbeitervergünstigungen im Otto Group Konzern.

• Moderne Büroausstattung in zentraler Lage in Hamburg.

• Betriebliche Altersvorsorge.