+ All Categories
Home > Data & Analytics > Introduzione ai Big Data e alla scienza dei dati

Introduzione ai Big Data e alla scienza dei dati

Date post: 14-Jun-2015
Category:
Upload: vincenzo-manzoni
View: 269 times
Download: 2 times
Share this document with a friend
Description:
Presentazione introduttiva ai Big Data e alla scienza dei dati fatta all'Ordine degli Ingegneri della provincia di Bergamo il 7 giugno 2014.
Popular Tags:
61
INTRODUZIONE AI BIG DATA E ALLA SCIENZA DEI DATI Ordine degli Ingegneri della Provincia di Bergamo, 7 giugno 2014 Ing. Vincenzo Manzoni, PhD [email protected]
Transcript
Page 1: Introduzione ai Big Data e alla scienza dei dati

INTRODUZIONE AI BIG DATA E ALLA SCIENZA DEI DATI

Ordine degli Ingegneri della Provincia di Bergamo, 7 giugno 2014 !

Ing. Vincenzo Manzoni, [email protected]

Page 2: Introduzione ai Big Data e alla scienza dei dati

UN’INTERESSANTE METAFORA…

Page 3: Introduzione ai Big Data e alla scienza dei dati

Big Data

Page 4: Introduzione ai Big Data e alla scienza dei dati

Big Data

Page 5: Introduzione ai Big Data e alla scienza dei dati

Big Data

Page 6: Introduzione ai Big Data e alla scienza dei dati

Big Datan. Computing data of a very large size, typically to the extent that its manipulation and management present significant logistical challenges; (also) the branch of computing involving such data.

Oxford English Dictionary, 2013

Page 7: Introduzione ai Big Data e alla scienza dei dati

L’ORIGINE DEL TERMINE

Usato per la prima volta nel 2008 nel Computing Community Consortium.

Stati Uniti

Italia

Page 8: Introduzione ai Big Data e alla scienza dei dati

LE 3 V

VolumeVelocitàVarietà

Page 9: Introduzione ai Big Data e alla scienza dei dati

VOLUME

Volume

VelocitàVarietà

Informazione prodotta in un giorno2.5 milioni di TB

(il 20% di tutta la conoscenza umana nel 1999!)

532.000.000 DVD

Se impilati, 640 km!

In un anno, raggiungerebbero il 60% della distanza Terra - Luna

Fonte: Harvard Business Review, “Big Data: the management revolution”, ottobre 2012.

Page 10: Introduzione ai Big Data e alla scienza dei dati

VELOCITÀ

VolumeVelocità

Varietà600.000 acquisti con carte di credito

In un minuto

204.000.000 e-mail inviate

48 ore di video su YouTube

100.000 tweet

2.200.000 azioni su facebook

Page 11: Introduzione ai Big Data e alla scienza dei dati

VARIETÀ

VolumeVelocitàVarietà

Fonte: Mobile Millennium, UC Berkeley.

Page 12: Introduzione ai Big Data e alla scienza dei dati

LE 3 V

Volume

Velocità

Varietà

MB GB TB PBpe

riodic

o

a lot

tiquasi

tempo

reale

tempo

reale

tabella database foto / video

socialsensori

Page 13: Introduzione ai Big Data e alla scienza dei dati

LE NUOVE V

VeracitàVisualizzazione

Page 14: Introduzione ai Big Data e alla scienza dei dati

LE NUOVE V

Veracità

Visualizzazione

Page 15: Introduzione ai Big Data e alla scienza dei dati

LE NUOVE V

VeracitàVisualizzazione

Page 16: Introduzione ai Big Data e alla scienza dei dati

VISUALIZZAZIONE

Page 17: Introduzione ai Big Data e alla scienza dei dati

IN COSA CONSISTONO? SECONDO 35 INGEGNERI DI BERGAMO

Page 18: Introduzione ai Big Data e alla scienza dei dati

Migliore informazione

Nuove analisi dati

Informazioni real-time

Influsso sui dati dalle nuove tecnologie

Forme non tradizionali di media

Grandi quantità di dati

L’ultima moda

Social media

0% 5% 9% 14% 18%

7%8%

10%13%13%

15%16%

18%

IN COSA CONSISTONO? SECONDO GLI EXECUTIVE INTERVISTATI DA IBM

Fonte: IBM, “Analytics: The real-world use of big data”, 2012.

Page 19: Introduzione ai Big Data e alla scienza dei dati

LE FONTI SECONDO 35 INGEGNERI DI BERGAMO

Page 20: Introduzione ai Big Data e alla scienza dei dati

LE FONTI SECONDO GLI EXECUTIVE INTERVISTATI DA IBM

TransazioniLog

EventiE-mail

Social networkSensori

RFID e POSTesto libero

GeograficiAudio

Fotografie / video

0% 23% 45% 68% 90%

24%38%

40%41%41%42%43%

57%59%

73%88%

Fonte: IBM, “Analytics: The real-world use of big data”, 2012.

Page 21: Introduzione ai Big Data e alla scienza dei dati

Le opportunità

Page 22: Introduzione ai Big Data e alla scienza dei dati

L’HYPE CYCLE DEI BIG DATA GARTNER, 2011

Fonte: Gartner.

Page 23: Introduzione ai Big Data e alla scienza dei dati

L’HYPE CYCLE DEI BIG DATA GARTNER, 2012

Fonte: Gartner.

Page 24: Introduzione ai Big Data e alla scienza dei dati

L’HYPE CYCLE DEI BIG DATA GARTNER, 2013

Fonte: Gartner.

Page 25: Introduzione ai Big Data e alla scienza dei dati

LE OPPORTUNITÀ

1.I big data applicati alla sanità possono far risparmiare agli Stati Uniti 300 B$ in efficienza.

2.L’Europa può risparmiare 149 B$ in costi di amministrazione e governo.

3.Solo negli Stati Uniti serviranno nel breve periodo 1.5+ M di data scientist e data manager.

Page 26: Introduzione ai Big Data e alla scienza dei dati

NUOVE (?) PROFESSIONI

• I bit sono inutili senza qualcuno che li sappia interpretare!

Page 27: Introduzione ai Big Data e alla scienza dei dati

I “DATA PRODUCT”

Cose che si conoscono

Cose che non si conoscono

Domande che ci si fanno

Domande che non ci si fanno

Business intelligence

Data Discovery

Analista dati

Data Scientist

Page 28: Introduzione ai Big Data e alla scienza dei dati

LE OPPORTUNITÀPer le aziende

Page 29: Introduzione ai Big Data e alla scienza dei dati

NUOVE TECNOLOGIE

Sorgente: Forbes.com

Page 30: Introduzione ai Big Data e alla scienza dei dati

SCIENZA

Page 31: Introduzione ai Big Data e alla scienza dei dati

E-COMMERCE Sistema di raccomandazione

Page 32: Introduzione ai Big Data e alla scienza dei dati

ADVERTISING

Page 33: Introduzione ai Big Data e alla scienza dei dati

SANITÀ Healthcare

SENSEable City Lab, MIT. Health Infoscape, 2011.

Page 34: Introduzione ai Big Data e alla scienza dei dati

SENSEable City Lab, MIT. Women’s health connections, 2011.

SANITÀ Healthcare

Page 35: Introduzione ai Big Data e alla scienza dei dati

FINANZA Sentiment Analysis

Page 36: Introduzione ai Big Data e alla scienza dei dati

POLITICA

Page 37: Introduzione ai Big Data e alla scienza dei dati

[…] Renzi ha spiegato di non avere in programma un aumento del prelievo fiscale e di volere anzi combattere l’evasione “anche attraverso innovazione digitale e incrocio dei dati”

Il Corriere della Sera Online, 21 marzo 2014

Page 38: Introduzione ai Big Data e alla scienza dei dati

SPORT

Page 39: Introduzione ai Big Data e alla scienza dei dati

URBAN PLANNING

Page 40: Introduzione ai Big Data e alla scienza dei dati

TenarisDalmine, 2011 →

Page 41: Introduzione ai Big Data e alla scienza dei dati

MANUFACTURING: TENARIS FASE 1: ACQUISIZIONE

Macchina 1

Macchina 2

Macchina n

DatabaseElaborazione dati sintesi

Segnali

Dati sinteticiSegnali

Segnali

Valor medio

Durata

Valor massimo

Page 42: Introduzione ai Big Data e alla scienza dei dati

MANUFACTURING: TENARIS FASE 1: ACQUISIZIONE

Macchina 1

Macchina 2

Macchina n

DatabaseElaborazione dati sintesi

Web Services .net Microsoft SQL Server

Page 43: Introduzione ai Big Data e alla scienza dei dati

Database

Visualizzazione di dati aggregati

Sistemi automatici di controllo basati sulla

anomalie dei dati aggregati

MANUFACTURING: TENARIS FASE 2: USO DEL DATO

Page 44: Introduzione ai Big Data e alla scienza dei dati

MANUFACTURING: TENARIS FASE 2: USO DEL DATO

Aumento improvviso e non giustificato di un parametro

di qualità del prodotto

Il processo è andato fuori controllo

… e con il parametro di qualità ritorno in controllo.

Viene fatto un intervento e il processo ritorna in controllo…

Page 45: Introduzione ai Big Data e alla scienza dei dati

LE OPPORTUNITÀPer i professionisti e i privati

Page 46: Introduzione ai Big Data e alla scienza dei dati

DATA JOURNALISM

Data

Selezione

Visualizzazione

Storia

Valore c

rescen

te per i

l pubblico

Page 47: Introduzione ai Big Data e alla scienza dei dati

DATA JOURNALISM

Font

e: Th

e G

uard

ian.

Page 48: Introduzione ai Big Data e alla scienza dei dati

DATA JOURNALISM

Page 49: Introduzione ai Big Data e alla scienza dei dati

DATA JOURNALISM

The Data Journalism Handbook può essere consultato a http://datajournalismhandbook.org.

Page 50: Introduzione ai Big Data e alla scienza dei dati

GLI OPEN DATA

Page 51: Introduzione ai Big Data e alla scienza dei dati

LE MINACCE

Page 52: Introduzione ai Big Data e alla scienza dei dati

IL ROI DEI BIG DATA

€ 0,00

€ 1,00

€ 2,00

€ 3,00

€ 4,00

Ritorno per 1 € investito Ritorno atteso in 3-5 anni

€ 3,50

€ 0,55

Fonte: Wikibon, “Enterprise struggling to derive maximum value form Big Data”, 2013.

Page 53: Introduzione ai Big Data e alla scienza dei dati

Big Data

Page 54: Introduzione ai Big Data e alla scienza dei dati

Big useless Data

Page 55: Introduzione ai Big Data e alla scienza dei dati

I CASI DI INSUCCESSO

1.Assenza di figure con la professionalità necessaria

2.Uso di tecnologie grezze e immature.

3.Mancanza di un business case specifico!

Page 56: Introduzione ai Big Data e alla scienza dei dati

I CASI DI SUCCESSO

1.Progetti non sponsorizzati da IT, ma da dipartimenti di line-of-business come marketing o logistica.

2.Focus su un caso d’uso piccolo, ma strategico.

3.Iterare e crescere sulla base dei risultati precedenti.

Page 57: Introduzione ai Big Data e alla scienza dei dati

L’ALGORITMO PER IL SUCCESSO

Contesto di business ben definito

Giuste domande

Risposte

Sorgenti dati di valore

Page 58: Introduzione ai Big Data e alla scienza dei dati

LA FORMAZIONE

Page 59: Introduzione ai Big Data e alla scienza dei dati

LA FORMAZIONE... IN ITALIA

Adnkronos, Ict: al via a Milano il nuovo centro per l’innovazione, 17 giugno 2013.

Page 60: Introduzione ai Big Data e alla scienza dei dati

PER APPROFONDIRE

Page 61: Introduzione ai Big Data e alla scienza dei dati

INTRODUZIONE AI BIG DATA E ALLA SCIENZA DEI DATI

Ordine degli Ingegneri della Provincia di Bergamo, 7 giugno 2014 !

Ing. Vincenzo Manzoni, [email protected]

Slide disponibili qui: http://www.vincenzomanzoni.com/corsi/


Recommended