Senior Data Engineer - Data Analytics Platform

Aufgaben

• Entwicklung von Prozessen, die die Datensicherheit und -qualität gewährleisten

Ihr Profil

• Bachelor- oder Master-Abschluss in Informatik, Data Analytics, Informationssystemen oder einem verwandten technischen Fachgebiet, oder gleichwertige Ausbildung und berufliche Erfahrung
• 5+ Jahre Erfahrung in ETL/ELT, Data-Warehousing, Business Intelligence und Integration von Datenverarbeitungs-/Workfluss-Management-Tools in die Pipeline-Design
• 5+ Jahre Erfahrung beim Aufbau und Warten von End-to-End-Data-Systemen mit Python, Scala oder ähnlichen Programmiersprachen
• Solide Erfahrung in der Nutzung von SQL für Datenanalyse, Untersuchung von Datenproblemen, Diagnose von Ursachen und Entwurf effektiver Lösungen
• Erfahrung in der Arbeit mit cloudbasierten Daten-Technologien, vorzugsweise auf Microsoft Azure, in kontinuierlichen Integration- und Lieferumgebungen (CI/CD)
• Nachgewiesene Erfahrung in der Arbeit mit großen Datenmengen unter Verwendung von Databricks, PySpark, Spark Streaming und Delta Lake
• Praktische Erfahrung mit strukturierten, semistrukturierten und unstrukturierten Daten in verschiedenen Speichersystemen, einschließlich relationalen Datenbanken (RDBMS), Data-Warehouses, In-Memory-Caches und Dokumentendatenbanken
• Vertrautheit mit cloudbasierten Speicherlösungen wie Azure Data Lake und Blob Storage
• Solides Verständnis von Datenmodellierungsprinzipien (Erfahrung mit Data Vault ist ein Plus) und starke Fähigkeiten in Systemdesign, Implementierung und Testen
• Erfahrung mit ereignisgesteuerten Architekturen (z. B. Kafka, Event Hubs, Apache Flink) und containerisierten Microservices-Plattformen (z. B. Kubernetes, Docker, Helm Charts)