Spaghetti Open Data - (SOD15) Hackathon 28/03/2015

Monithon 2.0

chiaracio — Thu, 26 Mar 2015 11:13:45 +0000

Tipo di attività:

(SOD15) Hackathon 28/03/2015

Livello di difficoltà:

Semplice

Durata:

360 minuti

MONITHON 2.0
Hackathon di testing per non tecnici (ma come sempre siamo #nerdfriendly) e scrittura collettiva del nuovo toolkit: un vademecum per la primavera di monitoraggio (#verathon) in svolgimento.
Vi aspettiamo!

ConfiscatiBene Reloaded

Andrea Nelson Mauro — Wed, 11 Mar 2015 16:17:12 +0000

Tipo di attività:

(SOD15) Hackathon 28/03/2015

Livello di difficoltà:

Semplice

Durata:

360 minuti

Un anno dopo la sua nascita, ConfiscatiBene torna a SOD con una nuova forma e un nuovo gruppo di lavoro. Obiettivo dell'hackathon sarà migliorare il progetto esistente e ognuno potrà dare contributi come vorrà!

Open Sentenze

Monica Palmirani — Wed, 11 Mar 2015 12:27:42 +0000

Tipo di attività:

(SOD15) Hackathon 28/03/2015

Livello di difficoltà:

Intermedio

Durata:

360 minuti

L’hackathon si articolera’ nel seguente modo:
a) un gruppo di giuristi selezioneranno casi critici e definira’ specifiche tecnico-giuridiche in merito a proprietà intellettuale e licenze, anonimizzazione e privacy, salvaguardie speciali e limitazioni costituzionali e normative;
b) il gruppo dei tecnici cercherà di implementare con dei prototipi le indicazioni del gruppo giuridico adottando un approccio privacy-by-design;
c) il gruppo dei tecnici si divideranno in quattro sotto-gruppi: portale, pubblicazione e accesso; standard AkomaNtoso e modellazione dei metadati; anonimizzazione del contenuto; identificazione dei riferimenti giurisprudenziali in formato ECLI.

Si intende produrre alla fine:
i) indice di linee guida per il trattamento delle sentenze nel rispetto della normativa al fine di renderle fruibili in open data;
ii) un portale prototipo in cui le sentenze sono navigabili; ricercabili e scaricabili in Akoma Ntoso, annotate con ECLI e anonimizzate.

Semantic Lifting of OpenStreetMap Data

Luigi Selmi — Fri, 13 Feb 2015 13:48:18 +0000

Tipo di attività:

(SOD15) Hackathon 28/03/2015

Livello di difficoltà:

Avanzato

Durata:

120 minuti

Gli utenti di OpenStreetMap possono esportare dati in formato XML. Per integrare questi dati con altri provenienti da sorgenti diverse occorre eseguire diverse operazioni. In breve
1) identificare il significato dei metadati utilizzati da ciascuna sorgente per descrivere i dati
2) mappare i metadati su una o piu' ontologie
3) collegare i record delle diverse sorgenti al fine di integrare le descrizioni di entità identiche (luoghi, edifici, punti di interesse)

La sessione consiste nelle fasi:

1) acquisire i dati di OSM di un'area di interesse,
2) mappare i dati su un'ontologia in formato RDF attraverso trasformazioni XSLT
3) importare i dati RDF in un triple store e interrogare la base dati attraverso query SPARQL
4) linkare i dati con altri data set RDF
5) visualizzare il risultato su una mappa

Chi vuole partecipare attivamente deve aver installato di base sul proprio pc Java. Gli altri tool consigliati sono indicati per ciascuna fase

--------------------------------------- Fase 1 - Acquisizione dei dati da OpenStreetMap----------------------------

Si seleziona un area di interesse da OpenStreetMap e con jOSM scarichiamo i dati OSM/XML

--------------------------------------- Fase 2 - Mapping da XML a RDF (Semantic Lifting ) ------------------------

Usiamo un file XSLT che legge il file OSM XML e mappa in RDF fermate dell'autobus, scuole, chiese, musei e ristoranti. Vengono usate per lo piu' classi e proprietà definite in schema.org. Il file XSL è facilmente modificabile per mappare altre tipologie di oggetti. La URL del file è
https://raw.githubusercontent.com/fusepoolP3/p3-transformer-configs/mast...
Per questa fase occore avere il parser XSLT a cui dare in pasto i dati OSM/XML e il foglio di stile XSL di cui sopra. Quello consigliato è Saxon, versione opensource, scaricabile da http://sourceforge.net/projects/saxon/files/Saxon-HE/

------------------------------------------ Fase 3 - Import dei dati RDF in un triple store Jena -------------------------

A questo punto avremo un data set RDF con istanze delle classi di oggetti che avremo mappato con le relative coordinate geografiche e altre informazioni come un etichetta o nome, il link alla pagina del nodo o way su openstreetmap.
Vedremo in dettaglio cosa sono le URI, gli identificativi usati per nella comunità Semantic Web e Linked Data per dare un nome agli oggetti. Importeremo i dati RDF in un triple store Jena e scriveremo alcune query SPARQL
Jena con il server Fuseki ( versione 2 ) puo essere scaricato al link https://jena.apache.org/documentation/fuseki2/index.html

------------------------------------------- Fase 4 - Interlinking dei dati con altri dataset --------------------------------

Proveremo a collegare alcuni degli oggetti estratti da OSM con altri disponibili in altre banche dati attraverso endpoint SPARQL. Lo scopo è quello di connettere identificativi diversi di oggetti uguali nella realtà, ad esempio i comuni
presenti all'interno di una regione, allo scopo di integrare le informazioni. Vedremo anche come esplorare un endpoint SPARQL per vedere se contiene dati interessanti e quali vocabolari sono utilizzati. Alcuni di questi sono
DBpedia ( http://dbpedia.org/sparql )
Agenzia per l'Italia Digitale ( http://spcdata.digitpa.gov.it:8899/sparql )
Per riconoscere se due descrizioni corrispondono allo stesso oggetto occorre confrontare i dati. In RDF cio' si traduce nel confrontare le proprietà di ciascun oggetto della nostra base dati con quelle degli oggetti nella base dati remota.
Utilizzeremo un componente sviluppato nell'ambito del progetto Fusepool P3 scaricabile al link https://github.com/fusepoolP3/p3-silkdedup
L'applicazione è basata sul tool open source Silk ( http://wifo5-03.informatik.uni-mannheim.de/bizer/silk/ )
Vedremo le problematiche di questa specifica attività, dalla definizione delle regole per confrontare oggetti, al problema della dipendenza del tempo di esecuzione dal prodotto del numero degli oggetti da confrontare.

------------------------------------------ Fase 5 - Visualizzazione dei dati su una mappa -------------------------

Visualizziamo i dati RDF su una mappa Google .. :) ovviamente su una mappa OSM. L'applicazione prototipo che useremo è basata su leaflet.js e Jena e permette la ricerca di eventi o oggetti all'interno di un raggio.
Il codice dell'applicazione è disponibile su Github al link https://github.com/fusepoolP3/p3-spatialsearch-demo

Per concludere vedremo quali ulteriori passi occorre fare per pubblicare i nostri dati RDF come Linked Data e come tutto cio' puo' essere reso piu semplice utilizzando una Linked Data Platform come quella presentata nell'hackathon
"Riuso di dati LOD ovvero Linked Open Data - [Fusepool P3 Project]"
Disclaimer: partecipo al progetto Fusepool P3.

Open Data per il lavoro

framazzocchi — Thu, 12 Feb 2015 14:21:33 +0000

Tipo di attività:

(SOD15) Hackathon 28/03/2015

Durata:

240 minuti

E' nata da una discussione sul gruppo fb di RENA l'idea di realizzare una track sui dati per il lavoro. Siamo partiti dall'esperienza UK http://www.lmiforall.org.uk/ e ci siamo domandati a quali dati abbiamo accesso in Italia e quali dati sarebbe utile incrociare. Abbiamo buttato giù con Nicola Ghirardi questa prima lista , ci sarebbe bisogno di capire quali altri dati ci sono, ci servono e quanto la cosa sia fattibile. Di sicuro è un tema caldo, una priorità e un problema a cui bisogna cominciare a pensare di dare risposte con strumenti diversi. Un pò di ricerca ha arricchito le possibilità che possiamo esplorare, Nesta ha fatto un fantastico lavoro in merito https://hackpad.com/Jobs-Open-Data-Challenge-rCJvrDSdcHf da cui trarre ispirazione.
ABBIAMO BUTTATO GIU' UNA SCALETTA CON LA TRACCIA (tutta modificabile e implementabile) degli OBIETTIVI/OUTCOMES e DATASET, trovate tutto qui: https://docs.google.com/document/d/1Mu1nxWZ7L_JZ-_mt-TOw9vyuTdCMhYrheijO...

A chi vanno i finanziamenti europei alla ricerca?

Alberto Cottica — Tue, 10 Feb 2015 22:03:15 +0000

Tipo di attività:

(SOD15) Hackathon 28/03/2015

Livello di difficoltà:

Intermedio

Durata:

3 600 minuti

Vai al repo Github
L'Europa spende molto denaro in ricerca e innovazione. La commissione stessa stima che il 7° Programma Quadro 2007-2013 (FP7) abbia investito 55.8 miliardi di euro. Questo è ammirevole, ma molte persone che frequentano il mondo dell'europrogettazione ricavano la senzazione di pelle che sia un mondo piuttosto autoreferenziale, in cui pochi grandi università, centri di ricerca e consulenti navigatissimi hanno un ruolo sproporzionato nel catturare i fondi. Senza uno o più dei "soliti sospetti" come alleati, dicono queste persone, non si vince. Sarà vero?
Tentiamo di rispondere a questa domanda usando il fatto che i beneficiari dei fondi di ricerca sono spesso non soggetti singoli, ma consorzi di soggetti. Questo ci permette di rappresentare il FP7 (che ormai è concluso) come un grafo: un'istituzione di ricerca o un'azienda è connessa a un progetto se è parte del consorzio che lo realizza. Da questa rappresentazione possiamo derivarne un'altra, in cui due beneficiari (di fondi) sono connessi se partecipano a uno stesso progetto. Studiando le caratteristiche del grafo, possiamo capire se ci sono alleanze più o meno fisse; se l'ambiente della ricerca finanziata europea è molto connesso (tutti collaborano con tutti) o viceversa "conteso" tra alleanze contrapposte; scoprire se vi sono soggetti fortemente centrali (i "soliti sospetti") e chi sono; e se questa centralità è premiata con denaro o se viceversa il ruolo di connettere tra loro mondi diversi non correla al recepimento di finanziamenti.
Questa metodologia è stata sperimentata, con dati molto diversi, a Masters of Networks da Benjamin Renoust e alcuni altri, tra cui io. Per esempio, Ben ha scoperto che i fornitori della Banca Mondiale nel settore salute sono molto uniti: tutti lavorano con tutti, e c'è il rischio che non ci sia abbastanza concorrenza tra loro. Molto diversa la situazione nel settore education, dove invece la rete è molto più policentrica.

La rete dei fornitori della Banca Mondiale nel settore salute è molto connessa intorno a un nucleo centrale di "soliti sospetti" che partecipano a quasi tutti i contratti

La rete dei fornitori della Banca Mondiale nel settore education è molto più policentrica.
A SOD15 cercheremo di usare al meglio la relativa ricchezza dei dati eropei – e di tenere conto del fatto che la rete sarà molto più grande.
Obiettivo della sessione è scrivere un post ben documentato che cerca di trarre conclusioni sull'allocazione dei fondi di FP7 in una prospettiva di rete. Per arrivarci useremo dati del sito OD della Commissione Europea. In specifico:

questo file sui progetti (26 MB)
quest'altro file sulle organizzazioni beneficiarie (15 MB)

La stack tecnologica con cui lavoro io comprende:

Python 2.7
Tulip

Ovviamente benvenuto chi vuole lavorare con altri software, o anche solo partecipare alla discussione, o contribuire dando una mano alla scrittura o in qualunque altro modo.

Ma quanto costano gli Open Data agli Enti locali? Sportello di autoriflessione assistita sui costi del processo di rilascio

Patrizia Saggini — Tue, 10 Feb 2015 16:50:53 +0000

Tipo di attività:

(SOD15) Hackathon 28/03/2015

Livello di difficoltà:

Semplice

Durata:

50 minuti

Per progettare un incentivo per i Comuni che pubblicano Open Data ci serve sapere con una certa precisione che costi devono sostenere quelli che lo fanno.
Abbiamo preparato un questionario rivolto agli enti che hanno già pubblicato dati, per stimare quanto questo processo costa in funzione di qualità e ampiezza dei risultati raggiunti.
Proviamolo insieme ed aiutateci a somministrarlo.

Linkiamo i Dati

Marco Brandizi — Mon, 09 Feb 2015 19:15:24 +0000

Tipo di attività:

(SOD15) Hackathon 28/03/2015

Livello di difficoltà:

Intermedio

Durata:

480 minuti

--- Sommario post-hackathon ---
Pubblichiamo in seguito all'hackathon, qualche informazione su quello che abbiamo fatto.

Abbiamo deciso di lavorare a due tipi di dati, e di conseguenza, formare due sottogruppi.

Uno dei gruppi ha lavorato alla definizione di un'ontologia per supportre il progetto di Social Food Labelling. Un breve report, insieme a vari riferimenti a documenti prodotti è quì.
L'altro gruppo si è concentrato sulla conversione in RDF del catalogo dei database di rilevanza nazionale dell'AgID. Report e documentazione.

-----------------------------------------------------------

In breve la proposta di questo hackathon è di produrre o usare linked open data (https://prezi.com/9lp7g71_wuq9/linked-open-data/). Questo non è un lavoro solo per informatici smanettoni, anzi, invitiamo a partecipare anche chi ha dati da mettere a disposizione (o da usare), perché puntiamo a mettere insieme gli esperti di un certo tipo di dati con chi conosce l’informatica che serve a farci cose utili.

Questo tema è strettamente collegato anche alla track “Fusepool P3 Contest”, dove sarà possibile riusare dati già modellati come LOD, o eventualmente arricchirli. Questo tocca la dissemination dei concetti del mondo Linked Open Data e pertanto le due sessioni sono complementari.

Riguardo a noi, si tratta di scegliere una tipologia di dati e farci una (o più) di queste cose:

se sono dati aperti esistenti, ma non in formato linked data (ie, non RDF), stabilire come trasformarli in Linked Open Data, andando a vedere quali schemi (vocabolari, ontologie, ecc) esistono, oppure quali ci sono da creare e da adattare, e come farlo. Dati disomogenei (es, diversi nomi di colonne in diversi file, per indicare la stessa cosa) sono particolarmente interessanti.
se non ci sono dati, ma ci sono le potenzialità per recuperarli, aprirli e metterli a disposizione in modo unificato (es, un unico portale), vedere come modellarli, identificando quali entità riguardano (es, Museo, Comune, Opera), con quali proprietà descriverle (titolo, CAP, coordinate) e quali relazioni hanno tra loro (es, si trova nel comune, contiene le opere).
se ci sono già linked data (ma potenzialmente anche se non ci sono), immaginare quali applicazioni ci si potrebbe costruire sopra: ricerche, visualizzazioni (dash board, infografiche), statistiche e altre analisi (es, network analysis).

Chiaramente, tra le due cose dette sopra non c’è necessariamente una netta linea di divisione: potrebbero esserci dati parziali, da completare con del lavoro di modellazione e di estrazione di altri dati.

Tra i tipi di dati che potremmo prendere in considerazione per fare quanto sopra, finora abbiamo raccolto queste proposte: http://goo.gl/GfsGWp. Chiunque è liberissimo di aggiungere qualcosa alla lista, però ci piacerebbe selezionarne 2-3 almeno un 10 giorni prima.

Riuso di dati LOD ovvero Linked Open Data [Fusepool P3 project]

Matteo Brunati — Mon, 09 Feb 2015 18:40:55 +0000

Tipo di attività:

(SOD15) Hackathon 28/03/2015

Livello di difficoltà:

Avanzato

Durata:

360 minuti

Libera la tua creatività [e guadagna qualche spicciolo] riusando dati LOD - questi che trovi qui!
Unleash your creativity [and make some cash] re-using LOD data!
Work on a cool idea and earn up to 1500 euro to turn it into a real app. Physical event on Saturday, but you can also participate remotely! Read the detailed description for more information.
---
Questa è la pagina di riferimento ufficiale con tutti i dettagli: leggetela se non lo avete ancora fatto :)

http://getfp3.com/blog/publish/relate/lod-that-works/

"LOD that works!" è un hackathon che va oltre alla sessione che terremo qui a SOD.
Prendetelo come una specie di mini-challenge, con un evento interno rappresentato da questa stessa track.
L'obbiettivo è stimolare la creatività collettiva per avere due idee/prototipi di riuso dei dati LOD da finanziare con 1500 euro l'uno, e che avranno tempo fino al 17 maggio per portare a compimento il lavoro iniziato.
Questi sono gli step significativi:

iscrivetevi alla pagina su Eventbrite: agli iscritti arriveranno sempre le comunicazioni ufficiali, ed aggiornate;
ecco i dati!! - alcuni dati LOD su eventi, e diverse tipologie di POI - Point Of Interest, localizzati sulla provincia di Trento e sulla regione Toscana - documentazione;
dal 25 al 29 marzo sera sarà possibile inviare qualsiasi idea/prototipo di riuso di questi dati, pubblicando tutto su github ed inserendolo all'interno del sito Data:Hack award;
venerdì 3 aprile comunicheremo i vincitori: due team che avranno tempo fino al 17 maggio per sviluppare l'idea/prototipo, con un budget di 1500 euro a team.

I vincoli sono questi:

ci devono essere almeno 4 proposte, inviate entro le 20.00 di domenica 29 marzo, per poter selezionare i due team vincitori;
serve usare almeno due tipologie dei dati messi a disposizione;
seguire le regole per l'invio della proposta ovvero niente allegati guys, ed occhio agli orari limite!

Durante la sessione all'hackathon, saranno presenti alcune persone che stanno lavorando al progetto Fusepool P3, tra cui anche Adrain Gschwend, esperto di Linked Data, ed ovviamente sarà condiviso del materiale propedeutico a far usare quei dati. ( SPARQL di esempio, e cose del genere )
E' una ghiotta occasione anche per approfondire il tema Linked Data Platform: i dati saranno esposti anche secondo questa tecnologia, uno dei recenti standard diventati raccomandazione W3C.
Per avere un quadro di insieme, è utile leggere questo documento di progetto:
https://github.com/fusepoolP3/p3-wp1-deliverables/blob/master/d11-deliverable.md

Fate girare la voce :) #LODthatworks
--
Mail introduttiva con cui era stato introdotto il tema:
https://groups.google.com/d/msg/spaghettiopendata/TfDz4iCFCSo/yAG2Y-nbtIkJ

Nuovo sito Pompei

Ilaria Vitellio — Thu, 08 Jan 2015 14:38:51 +0000

Tipo di attività:

(SOD15) Hackathon 28/03/2015

Livello di difficoltà:

Semplice

Durata:

180 minuti

Il sito istituzionale di Pompei non è molto comunicativo! Molte informazioni mancano e se ci sono sono nascoste e bisogna fare una assidua ricerca per trovarle.
L'idea è di tirare su in poche ore un sito che abbia un senso, che racconti il luogo, che permetta a chiunque di sapere come arrivare, quando sono aperti, di avere la descrizione delle insule, i percorsi, la storia (dalla scoperta in poi),...
Per fare questo abbiamo bisogno di tutte le competenze possibili, della organizzazione dei materiali e, soprattutto, della creatività ostinata di SOD.
Chi c'è?