DATA ENGINEER

Omicron S.r.l., società in forte espansione nell’area della consulenza informatica e nella realizzazione d’importanti progetti ad alto contenuto tecnologico, ricerca: DATA ENGINEER (Remoto) Conoscenza della Google Cloud Platform e rispettivo SDK Conoscenza di toolchain DevOps per CI/CD mediante approccio GitFlow (Git, GitFlow, Jenkins,…) per procedere alla build ed al rilascio dell’applicativo. Linguaggi: Python, Java, SQL Archiviazione: Spanner, Cloud SQL, BigTable, BigQuery, Google Cloud Storage, Firestore Processing: Dataflow, Dataproc, Cloud Function, Composer Visualizzazione: Looker Studio Descrizione attività: La risorsa dovrà guidare i clienti nell’analisi e nella manipolazione di grandi dataset, opererà nelle fasi di: ingestion storage processing analysis visualization Utilizzando i servizi messi a disposizione dalla piattaforma Google Cloud. In particolare dovrà: Conoscere e saper consigliare il cliente sulle potenzialità dello strumento BigQuery in ambiti di archiviazione e analisi dei dati. Utilizzare il Dynamic Data Masking da BigQuery in modo da garantire il mascheramento dei dati in combinazione con il controllo degli accessi, rispettando la privacy e le policy di business. Creare strumenti di analisi per estrarre informazioni utili al business a partire dall’ingestion di dati Streaming e Batch, avvalendosi della tecnologia BigData e query SQL. Implementare pipeline di processing dati Streaming e Batch attraverso l’utilizzo di Dataflow, Dataproc e Pub/Sub avvalendosi del framework Apache Beam ed integrare all’interno di Dataproc applicativi basati su Apache Hadoop, Apache Spark. Avvalersi di un’ampia varietà di sorgenti dati come Pub/Sub, un database o un sistema di archiviazione messo a disposizione dalla piattaforma GCP. Implementare sistemi in grado di rispondere dinamicamente ad eventi tramite Cloud Functions (event-driven serverless). Realizzare un workflow di orchestrazione dati per un servizio gestito per la creazione, scheduling e monitoraggio di pipeline, come Cloud Composer. Realizzare dashboard per report dinamici e personalizzabili, come Looker Studio. Realizzazione di strutture dati in grado di esaltare i punti di forza dei servizi di archiviazione messi a disposizione della piattaforma ed ottimizzazione delle chiavi per ridurre il richio di bottleneck in lettura/scrittura dei dati, adottando il servizio più adatto al caso d’uso indicato dai requisiti di business. Conoscenza avanzata di SQL ed esperienza con database relazionali, familiarità con una varietà di database. Implementare tramite BigTable un sistema in grado di supportare grandi quantità di dati timeseries. Sviluppare test per nuove feature (Unit-Test, Integration Test, E2E & Functional Test). Collaborare con i team interessati (esecutivo, prodotto, dati) e supportarli nella risoluzione di problemi tecnici. Si offre: •Contratto a tempo determinato della durata iniziale di 18 mesi rinnovabile. •Retribuzione fissa commisurata alle effettive competenze maturate. Sede di lavoro: remoto Gl’interessati possono candidarsi inviando il CV all’indirizzo mail: L’offerta si intende rivolta a candidati ambosessi, nel rispetto del D.Lgs. n. 198/2006 e ss.mm.ii. e dei Decreti Legislativi n. 215 e n. 216 del 2003 sulle parità di trattamento. I candidati sono invitati a leggere l’informativa privacy ai sensi degli artt. 13 e 14 del Reg. EU 679/2016.