Offerta di lavoro
Ingegnere dati senior
Stiamo cercando un Senior Data Engineer esperto per un contratto di 12 mesi a Singapore, che si occupi dell'implementazione di metodi e soluzioni per migliorare la qualità e l'affidabilità dei dati e che collabori con data scientist e data analyst. Il candidato ideale ha una solida esperienza nell'ingegneria dei dati, nella modellazione dei dati e nello sviluppo di pipeline e piattaforme di dati.
Compiti
I compiti principali comprendono:- Implementazione di metodi e soluzioni per migliorare l'affidabilità e la qualità dei dati
- Collaborazione con data scientist e data analyst per lo sviluppo di modelli e pipeline di dati per la ricerca, la reportistica e l'apprendimento automatico
- Acquisizione e manutenzione della piattaforma dati per garantire stabilità, prestazioni e miglioramento continuo
Requisiti
I requisiti per questa posizione sono:- Oltre 5 anni di esperienza nell'elaborazione dei dati e nell'integrazione di strumenti di gestione del flusso di lavoro nella progettazione della pipeline
- 5+ anni di esperienza in ETL/ELT, data warehousing e/o sviluppo di business intelligence
- Almeno 5 anni di esperienza nella realizzazione e nella manutenzione di sistemi informativi end-to-end e servizi di supporto in Python, Scala o linguaggi simili
- 5+ anni di esperienza con SQL per comprendere i dati, analizzare i problemi relativi ai dati e fornire soluzioni
- 3+ anni di esperienza con tecnologie di dati cloud
- Esperienza con dati strutturati, semi-strutturati e non strutturati
- Esperienza con diversi tipi di database, tra cui data warehouse, RDBMS, cache in memoria e database di documenti ricercabili
- Esperienza con grandi set di dati in SQL (Gatabricks/PySpark)
- Esperienza con Spark Streaming e tabelle Delta (live)
- Esperienza con sistemi di archiviazione come Azure Storage/Data Lakes
- Esperienza nella modellazione dei dati
- Ottime capacità di progettazione, implementazione e collaudo
- Esperienza con integrazione continua e distribuzione automatizzata
- Esperienza con piattaforme cloud (preferibilmente Azure) in un ambiente di consegna continua
Qualifiche preferite
Le qualifiche preferite sono:- Esperienza con piattaforme di microservizi (Kubernetes, Docker, Helm Charts)
- Esperienza con sistemi di streaming basati sugli eventi (Kafka, Event Hub, Event Grid, Apache Flink)
- Conoscenza e applicazione dell'OBT
- Esperienza nella convalida dei dati e
- Esperienza con strumenti BI
- 1+ anni di esperienza nello sviluppo di software con linguaggi quali JavaScript, Java o C#
- Capacità di assumere la guida tecnica per altri sviluppatori
Offriamo
Offriamo un ambiente di lavoro stimolante e interessante, in cui potrai mettere a frutto le tue capacità e la tua esperienza per contribuire al successo della nostra azienda.Dettagli sul lavoro