Ingegnere senior dei dati - Piattaforma di analisi dei dati

Compiti

· Sviluppo di processi che garantiscano la sicurezza e la qualità dei dati

Il tuo profilo

· Laurea triennale o magistrale in Informatica, Analisi dei dati, Sistemi informativi o in un settore tecnico affine, oppure formazione ed esperienza professionale equivalenti · 5+ anni di esperienza in ETL/ELT, data warehousing, business intelligence e integrazione di strumenti di elaborazione dati e gestione dei flussi di lavoro nella progettazione delle pipeline · 5+ anni di esperienza nella creazione e nella manutenzione di sistemi di dati end-to-end con Python, Scala o linguaggi di programmazione simili · Solida esperienza nell’utilizzo di SQL per l’analisi dei dati, l’individuazione di problemi nei dati, la diagnosi delle cause e la progettazione di soluzioni efficaci · Esperienza nell’utilizzo di tecnologie di dati basate sul cloud, preferibilmente su Microsoft Azure, in ambienti di integrazione e distribuzione continue (CI/CD) · Comprovata esperienza nella gestione di grandi volumi di dati con Databricks, PySpark, Spark Streaming e Delta Lake · Esperienza pratica con dati strutturati, semi-strutturati e non strutturati in vari sistemi di archiviazione, inclusi database relazionali (RDBMS), data warehouse, cache in memoria e database documentali · Familiarità con soluzioni di archiviazione basate su cloud come Azure Data Lake e Blob Storage · Solida comprensione dei principi di modellazione dei dati (l’esperienza con Data Vault costituisce un vantaggio) e ottime competenze nella progettazione, implementazione e collaudo di sistemi · Esperienza con architetture basate sugli eventi (ad es. Kafka, Event Hubs, Apache Flink) e piattaforme di microservizi containerizzati (ad es. Kubernetes, Docker, Helm Charts)