TECHNOLOGIES FOR ADVANCED PROGRAMMING

Obiettivo dell'insegnamento è fornire una generale comprensione dell’utilizzo di tecnologie avanzate utili a definire soluzioni end-to-end di analisi, gestione ed elaborazione dati in real time.

Attraverso l’utilizzo di strumenti di automatizzazione del deployment di applicazioni (docker) e di orchestrazione di processi (kubernetes), il corso vuole presentare le tecnologie “on the edge” per l’analisi di ingestion di dati in tempo reale, tecniche di data pipelines, strumenti di data processing e analisi e data visualization.

Il percorso formativo porterà gli studenti a migliorare le conoscenze e le capacità di comprensione (knowledge and understanding) delle principali metodologie (best practice) del settore delle tecnologie e i framework dall’analisi digitali.

Capacità di applicare conoscenza e comprensione (applying knowledge and understanding): lo studente acquisirà le competenze necessarie per approntare e redigere un rapporto tecnico, scegliendo gli apparati più opportuni, realizzando un piano di lavoro e redigendo una opportuna relazione tecnica.

Autonomia di giudizio (making judgements): Attraverso esempi concreti derivanti da "comuni errori" nell'analisi e nel preprocessing dei dati, lo studente sarà in grado di elaborare autonomamente soluzioni e ovviare alle principali difficcoltà

Abilità comunicative (communication skills): lo studente acquisirà le necessarie abilità comunicative e di appropriatezza espressiva nell'impiego del linguaggio tecnico nell'ambito.

Capacità di apprendimento (learning skills): il corso si propone, come obiettivo, di fornire allo studente le necessarie metodologie teoriche e pratiche per poter affrontare e risolvere autonomamente nuove problematiche che dovessero sorgere durante una attività lavorativa. A tale scopo diversi argomenti saranno trattati a lezione coinvolgendo lo studente nella ricerca di possibili soluzioni a problemi reali.

Lezioni Frontali con l’ausilio di PC per esercitazioni interattive.

Nessuno in particolare. PC portatile per esercitazioni.

Obbligatoria

• Nozioni di Stream Processing
• Concetti di Digital Marketing
• Introduzione a Docker e Kubernetes
• Data Ingestion (Apache Flume)
• Data Streaming (Apache Kafka)
• Data Processing (Spark)
• Fondamenti di Machine Learning e classificazione
• Data Indexing and Query (Elastic Search)
• Data Visualization (Grafana)

Slides e manuali di riferimento dei relativi framework utilizzati durante il corso.

Repository di codice su github a supporto.

Su Studium

Installation Day per l’installazione delle componenti utilizzate nel corso

Progetto finale di implementazione di architettura software sulla base dei contenuti del corso su una base di dati concordata.

In sede di esame gli studenti dovranno:

• Descrivere il design della soluzione tramite presentazione
• Effettuare una demo live
• Rispondere ad eventuali domande sulle componenti utilizzate

• Ingestion di una base dati provenenti da twitter
• Learning di un classificatore
• Definizione di Stream Processing
• Docker e Kubernetes