Stellenangebot
DataOps Engineer
Die EFG International sucht einen DataOps Engineer in Singapur, der für die Integration, Freigabe und Überwachung von kritischen Datenpipelines und Workflows verantwortlich ist. Der idealen Kandidat sollte Erfahrung in Data Engineering und Data Operations haben und Kenntnisse in SQL, Python, PySpark und Databricks besitzen.
Job Beschreibung
Die DataOps-Engineer-Position ist Teil des Data-Ops-Teams, das für die nahtlose Integration, Freigabe und Überwachung von mission-kritischen Datenpipelines und Workflows verantwortlich ist.Aufgaben und Verantwortungen
Die Hauptaufgaben und Verantwortungen umfassen:- Übernahme der operativen Verantwortung für bestimmte Daten-Dienste (Change-Management, Qualitätsicherung, SLA, SOP)
- Überwachung und Sicherstellung der Betriebskontinuität kritischer Datenpipelines während der asiatischen Arbeitszeiten im Rahmen eines Follow-the-Sun-Support-Modells
- Entwurf, Implementierung und Optimierung von Datenpipelines in Batch- und Streaming-Modus
- Anwendung von CICD-Praktiken zur Automatisierung und Optimierung von Deployments und Integrationen
- Erstellung, Wartung und Verbesserung von Dokumentationen und Betriebsverfahren als Teil der operativen Verantwortung
- Zusammenarbeit mit cross-funktionalen Teams zur Überprüfung von Governance und Verbesserung von Integrationen
- Aufrechterhaltung hoher Standards für Datenqualität, Zuverlässigkeit und Leistung
- Aktualisierung mit den neuesten Entwicklungen im Bereich Data-Engineering und DataOps-Technologie-Stack, um kontinuierliche Verbesserungen zu unterstützen
Anforderungen und Qualifikationen
Die Anforderungen und Qualifikationen umfassen:- Erfahrung in Data-Engineering- und Data-Operations-Rollen
- Nachweisbare praktische Erfahrung mit SQL, Python, PySpark und Databricks
- Kenntnisse von Micro-Service-Architektur, API-Management und Observability sind sehr wünschenswert
- Solides Verständnis von CICD-Plattformen und -Prozessen (z.B. Azure DevOps, GitLabCI, GitHub Actions)
- Erfahrung mit Cloud-Datenplattformen (Azure bevorzugt)
- Nachweisbare Fähigkeit, strenge, klare und umfassende Dokumentationen und Verfahren zu erstellen
- Vertrautheit mit Datenbank-Design
- Hervorragende Problemlösungsfähigkeiten und Aufmerksamkeit für Details
- Effektive Kommunikations- und Kooperationsfähigkeiten
Wir bieten
Wir bieten eine unterstützende Umgebung, in der Ihre Beiträge geschätzt und anerkannt werden. Unsere Werte basieren auf dem Prinzip des gegenseitigen Respekts, und wir streben danach, ein Arbeitgeber der Wahl zu sein.Jobdetails