Senior Data Engineer - Data Analytics Platform

Aufgaben

• Du entwickelst Prozesse, die darauf ausgelegt sind, die Datensicherheit und die Datenqualität zu gewährleisten

Ihr Profil

• Bachelor- oder Master-Abschluss in Informatik, Data Analytics, Informationssystemen oder einem verwandten technischen Fachgebiet; oder gleichwertige Ausbildung und berufliche Erfahrung • 5+ Jahre Erfahrung in ETL/ELT, Data-Warehousing, Business Intelligence und Integration von Datenverarbeitungs-/Workfluss-Management-Tools in die Pipeline-Design • 5+ Jahre Erfahrung beim Aufbau und Warten von End-to-End-Datensystemen mit Python, Scala oder ähnlichen Programmiersprachen • Solide Erfahrung in der Nutzung von SQL für Datenanalyse, Untersuchung von Datenproblemen, Diagnose von Ursachen und Entwurf effektiver Lösungen • Erfahrung in der Arbeit mit cloudbasierten Daten-Technologien, vorzugsweise auf Microsoft Azure, in kontinuierlichen Integration- und Lieferumgebungen (CI/CD) • Nachgewiesene Erfahrung in der Arbeit mit großen Datenmengen mit Databricks, PySpark, Spark Streaming und Delta Lake • Praktische Erfahrung mit strukturierten, semistrukturierten und unstrukturierten Daten in verschiedenen Speichersystemen, einschließlich relationalen Datenbanken (RDBMS), Data-Warehouses, In-Memory-Caches und Dokumentendatenbanken • Vertrautheit mit cloudbasierten Speicherlösungen wie Azure Data Lake und Blob Storage • Solides Verständnis von Datenmodellierungsprinzipien (Erfahrung mit Data Vault ist ein Plus) und starke Fähigkeiten in Systemdesign, Implementierung und Test • Erfahrung mit ereignisgesteuerten Architekturen (z.B. Kafka, Event Hubs, Apache Flink) und containerisierten Umgebungen

Wir bieten

Keine Informationen vorhanden