DataOps Engineer

Job Beschreibung

Die DataOps-Team ist verantwortlich für die nahtlose Integration, Freigabe und Überwachung von mission-kritischen Daten-Pipelines und Workflows.

Aufgaben und Verantwortungen

Die Aufgaben und Verantwortungen umfassen:

• Übernahme der operativen Verantwortung für bestimmte Daten-Dienste (Change-Management, Qualitätsicherung, SLA, SOP)
• Überwachung und Sicherstellung der Betriebskontinuität kritischer Daten-Pipelines innerhalb der Gruppe während der asiatischen Arbeitszeiten, unter Anwendung eines Follow-the-Sun-Unterstützungsmodells
• Entwurf, Implementierung und Optimierung von Daten-Pipelines im Batch- und Streaming-Modus
• Anwendung von CICD-Praktiken zur Automatisierung und Optimierung von Deployments und Integrationen
• Erstellung, Wartung und Verbesserung von Dokumentationen und Betriebsverfahren als Teil der operativen Verantwortung
• Zusammenarbeit mit cross-funktionalen Teams zur Überprüfung von Governance und Verbesserung von Integrations-Operationen
• Aufrechterhaltung hoher Standards an Datenqualität, Zuverlässigkeit und Leistung
• Auf dem neuesten Stand bleiben mit Fortschritten in der Daten-Engineering-, DataOps-Technologie, um kontinuierliche Verbesserungen zu unterstützen

Anforderungen und Qualifikationen

Die Anforderungen und Qualifikationen umfassen:

• Erfahrung in Daten-Engineering- und Daten-Operations-Rollen
• Praktische Erfahrung mit SQL, Python, PySpark und DataBricks
• Kenntnisse von Micro-Service-Architekturen, API-Management und Observability sind sehr wünschenswert
• Solides Verständnis von CICD-Plattformen und -Prozessen (z.B. Azure DevOps, GitLabCI, GitHub Actions)
• Erfahrung mit Cloud-Daten-Plattformen (Azure bevorzugt)
• Nachweisbare Fähigkeit, strenge, klare und umfassende Dokumentationen und Verfahren zu erstellen
• Vertrautheit mit Datenbank-Design
• Ausgezeichnete Problemlösungsfähigkeiten und Aufmerksamkeit für Details
• Effektive Kommunikations- und Kooperationsfähigkeiten

Wir bieten

Wir bieten eine unterstützende Umgebung, in der Ihre Beiträge geschätzt und anerkannt werden. Unsere Werte umfassen die Förderung von Vielfalt und Inklusion, um eine bessere Entscheidungsfindung und größere Innovation zu fördern.