Responsabile, ingegnere dati cloud

Panoramica del lavoro

Il Principal - Cloud Data Platform Engineer è responsabile della progettazione, della realizzazione e della manutenzione di piattaforme dati scalabili, sicure e performanti basate su cloud che supportano l'analisi dei dati, l'apprendimento automatico e le esigenze aziendali in materia di dati.

Responsabilità

I compiti comprendono:

• Monitoraggio e ottimizzazione dei flussi di dati per l'acquisizione, la trasformazione, l'elaborazione e la strutturazione di dati strutturati, semi-strutturati e non strutturati.
• Creazione di framework e infrastrutture scalabili per flussi di dati, monitoraggio e scalabilità.
• Garantire che le soluzioni di archiviazione dati e di elaborazione siano ottimizzate in termini di prestazioni, sicurezza ed efficienza dei costi.
• Integrazione dei servizi dati cloud con applicazioni aziendali, API e strumenti di terze parti.

Gestione e governance dei dati

I compiti comprendono:

• Implementazione di soluzioni per la qualità dei dati, le linee e i cataloghi attraverso la piattaforma dati.
• Applicazione degli standard di governance, sicurezza e conformità (ad es. GDPR, HIPAA, SOX).
• Collaborazione con architetti e team di sicurezza per implementare la crittografia dei dati inattivi e in movimento e il controllo degli audit.
• Supporto alla gestione dei metadati, alla reperibilità dei dati e alla democratizzazione dei dati a livello aziendale.

Operazioni e affidabilità

I compiti comprendono:

• Gestione dello stato operativo della piattaforma dati cloud, compresi monitoraggio, allarmi e ricerca guasti.
• Creazione di pipeline CICD/CI/CD per servizi dati e componenti della piattaforma.
• Implementazione di strategie di ripristino di emergenza, backup e failover.
• Ottimizzazione continua delle prestazioni della piattaforma, dei costi e della scalabilità.

Collaborazione e innovazione

I compiti comprendono:

• Collaborazione con data scientist, team BI e sviluppatori di applicazioni per consentire analisi avanzate e carichi di lavoro Al/ML.
• Valutazione dei servizi di dati cloud emergenti e raccomandazione di implementazione in base alle esigenze aziendali.
• Fornitura di competenze tecniche nella progettazione di architetture e soluzioni di dati basate su cloud.
• Mentoring di ingegneri junior e contributo alle best practice nell'ingegneria cloud e nello sviluppo dei dati.

Qualifiche

I requisiti comprendono:

• Laurea in informatica, ingegneria dei dati o materia affine (preferibilmente laurea magistrale).
• Oltre 10 anni di esperienza nell'infrastruttura tecnologica.
• Oltre 10 anni di esperienza nell'ingegneria dei dati, nell'ingegneria cloud o nell'ingegneria delle piattaforme.
• Esperienza pratica con almeno un grande fornitore di servizi cloud (AWS o Azure).

Ulteriori requisiti

I requisiti comprendono:

• Esperienza in ambienti regolamentati (servizi finanziari, sanità, ecc.).
• Conoscenza di SQL e almeno un linguaggio di programmazione (Python, Java o Scala).
• Profonda conoscenza dei servizi dati cloud-native (ad es. AWS Redshift, Glue, S3, Athena, Azure Synapse, Data Factory, GCP BigQuery/Spanner).
• Familiarità con la containerizzazione e