Tool per raccogliere, pulire e analizzare

i dati

Andrea Nelson Mauro | @nelsonmau

Cortina tra le righe @ 11 luglio 2016 - Cortina D'Ampezzo

Network europeo di data giornalisti

• dataninja.it
• school.dataninja.it
• stories.dataninja.it
• dataninja.it/newsletter

• Inchieste
  • Confiscati Bene (open data, e1)
  • Bolivia's Water War (blog, e1)
  • The Migrants' Files (blog, e1, e2)
  • Dissesto Doloso (sky1)
  • Slot Invaders (blog, w1, s1, t1)
• Altri progetti
  • Sport data journalism (blog, f1)
  • Associazione onData (sito)
  • Datamediahub (blog)

Alessio, Andrea, Andrea, Carlo, Donata, Elena, Gianluca, Mara, Nicola, ...

Scraping

Tecnica informatica che consiste nel "grattare" ed estrarre dati da un sito web mediante programmi software

Procedura necessaria quando manca un dataset già costruito in formato "machine readable", ossia processabile da un computer

Immagini

Pagine html

File Pdf

Pulire i dati

Cosa significa?
I dati devono avere una formattazione corretta

• Qual è il formato dei numeri? Virgole e punti
• Le intestazioni sono presenti
• Maiuscole e minuscole: occhio al case
• Celle vuole: una cella vuota non è 0, è NULL
• ​Disaggrega i dati, rendili granulari

Una checklist di controlli

https://goo.gl/U7zgBf

Kawabonga!

www.dataninja.it

school.dataninja.it

dataninja.it/newsletter

onData

www.ondata.it

Andrea Nelson Mauro

nelsonmau@dataninja.it

@nelsonmau

Icon made by Freepik from www.flaticon.com