Ingegnere Data Ops

Descrizione del lavoro

La missione del team della piattaforma DataOps consiste nel garantire un livello di servizio affidabile per ogni componente tecnologico della piattaforma dati EFG (Databricks, Kafka, Spark, Elasticsearch, Apache MQ, stack uServices).

Compiti principali

Man mano che la nostra piattaforma e il nostro panorama dei dati continuano a evolversi, desideriamo potenziare il nostro team con un ingegnere CICD/CV esperto, specializzato nell’implementazione di pipeline di dati. - Cerchiamo una persona che si senta a proprio agio nell’integrare Kafka, Spark e le operazioni Databricks con Python. - Avvalendoti del supporto del nostro team di esperti nei servizi dati (gestione del cambiamento, gestione della qualità, SLA, SOR), contribuirai in modo determinante alla continuità e alla qualità delle nostre operazioni:

• Monitoraggio quotidiano dei servizi di pipeline (gestione delle modifiche, gestione della qualità, SLA, SOR).
• Funzionamento senza interruzioni delle pipeline di dati critiche durante le ore asiatiche, in qualità di referente principale per i problemi critici nell’ambito di un modello di assistenza “Follow-the-Sun”.
• Progettazione, implementazione e ottimizzazione di pipeline di dati in modalità batch e streaming.
• Applicazione delle pratiche CICD per automatizzare e ottimizzare le operazioni di distribuzione e integrazione.
• Creazione, aggiornamento e miglioramento della documentazione e delle procedure operative, per le quali è garantita la responsabilità dell'azienda.
• Collaborazione con team interfunzionali per migliorare e verificare la governance delle integrazioni.
• Mantenere standard elevati in termini di qualità dei dati, affidabilità e prestazioni.
• Rimanere al passo con i progressi nel campo del data engineering e dello stack tecnologico DataOps per favorire il miglioramento continuo.

Requisiti e qualifiche

- Almeno 5 anni di esperienza pratica nell’ingegneria dei dati e nell’implementazione di pipeline di dati basate sulle pratiche DevOps. - Esperienza con Python, SQL, PySpark e Databricks. - Solida esperienza con le principali piattaforme e processi CICD in ambienti ibridi (ad es. Azure DevOps, GitLab CI, GitHub Actions). - Familiarità con l’architettura a microservizi. La gestione delle API e l’osservabilità costituiscono un vero e proprio vantaggio. - Esperienza con Azure Databricks. - Buone capacità comunicative e di collaborazione. - Approccio rigoroso e metodico nella documentazione e nella definizione dei processi. - Grande interesse per la convergenza, la normalizzazione e la riutilizzabilità. - Curiosità, entusiasmo e proattività. - Passione per le tecnologie innovative, con un forte desiderio di imparare e crescere in un ambiente stimolante. - Ottima padronanza dell’inglese parlato e scritto; la conoscenza del francese costituisce un vantaggio.

I nostri valori

- Responsabilità: assumersi compiti e sfide, nonché impegnarsi nel miglioramento continuo. - Approccio pratico: essere proattivi e rapidi per fornire risultati di alta qualità. - Passione: essere coinvolti e perseguire l’eccellenza. - Orientamento alle soluzioni: attenzione ai risultati dei clienti e trattamento equo degli stessi, con un approccio consapevole dei rischi. - Orientamento alla collaborazione: promozione della cooperazione e del lavoro di squadra. Collaborazione con spirito imprenditoriale.