Data Engineer Milano

Data Engineer
Milano
Lombardia, Milano

WESTHOUSE è una società leader che opera nel campo della ricerca e selezione del personale, gestione di progetti ed è autorizzata a tempo indeterminato per la somministrazione di lavoro con Autorizzazione Ministeriale Prot.

n. 0000095 del 03/08/2018. Per azienda finale attiva nel settore Energy&Utilities, fortemente improntata all'innovazione digitale, siamo alla ricerca di un/aDATA ENGINEER La risorsa, a riporto del responsabile dell'area, verrà inserita nel teamAI Facotrye avrà la responsabilità di progettare, sviluppare e mantenere le pipeline di dati e dell'infrastruttura che supporta le iniziative di analisi avanzata e intelligenza artificiale.

Lavorerà a stretto contatto con i Data Scientist, specialisti di AI e team di business per garantire che i dati vengano acquisiti, elaborati, archiviati e serviti in modo efficiente e sicuro, utilizzando tecnologie all'avanguardia come Azure, Databricks e Delta Lake. Nello specifico si occuperà di: Progettare e implementare pipeline di dati robuste utilizzandoAzure Data Factory, garantendo l'integrazione senza problemi di più fonti di dati.

Costruire e mantenere architettureDelta Lake(livelli Bronze, Silver, Gold) per gestire dati grezzi, puliti e arricchiti in modo efficiente; Sviluppare processi ETL per preparare e trasformare i dati per modelli di AI e strumenti di business intelligence e garantire che i dati sia strutturati e ottimizzati per il consumo attraverso dashboard e report costruite con PowerBI; Supportare il deployment di modelli utilizzandoDatabricks, MLfloweAzure Cognitive Services, abilitando l'accesso ai dati in tempo reale.

Creare, mantenere e ottimizzare le prestazioni di pipeline di dati e dell'archiviazione e garantire che le infrastrutture siano efficienti e scalabili, monitorando la qualità del dato; Collaborare con i team Agile della Digital Factory allo sviluppo della data platform aziendale, implementazione dei processi di gestione della qualità del dato, collaborare con gli sviluppatori per esporre servizi di dati e analisi tramiteAPI Gateway, e coordinare e supportare eventuali fornitori esterni;Requisiti principali: Laurea in Ingegneria Informatica, Statistica, Matematica e/o simili Esperienza di almeno 3 anni nel ruolo di Data Engineer, avendo partecipato a progetti di trasformazionedata-driven/AI-driven; Competenza nello sviluppo di processi ETL per la preparazione e trasformazione del dato; Competenza nell'uso di PowerBI per la creazione di report e dashboard; Conoscenza ed esperienza pratica con databaseSQLeNoSQL Esperienza con piattaformaDatabricksper analisi big data; Esperienza con piattaforme diMLOps(MLflow) Esperienza con uno dei principali Provider Cloud (GCP, Azure, AWS) Conoscenza dei linguaggi di programmazione:Python, Pyspark, SQL Metodologia di sviluppo Waterfall e Agile Buona conoscenza dellalingua ingleseper contatti con colleghi e referenti esteriCompletano il profilo: Spiccato interesse per attività gestionali/progettuali, oltre che puramente tecniche Team working Ottime capacità di analisi e problem solving Buone capacità comunicative e di relazioneSede lavorativa:MilanooTorino(modalità di lavoro ibrida)I candidati ambosessi (D. lgs n. 198/2006) sono invitati a leggere l'informativa privacy ai sensi degli artt.

13 e 14 del Reg.

EU 679/2016 al seguente indirizzo:Si comunica inoltre che i curricula potranno essere considerati per altre posizioni vacanti e potrebbero essere gestiti e comunicati anche attraverso l'uso di tools propri e/o dell'azienda cliente.