lunes, 23 de abril de 2012

Open Data, qué estamos haciendo mal?


La semana pasada tuve el placer de ser invitado por Jordi Torres (@JordiTorresBCN) a dar una charla sobre Big Data en los seminarios de EEDC en lo que fue mi universidad, la UPC.

Además de la alegría de volver a la universidad y reencontrarme con colegas del BSC tuve la suerte de poder compartir espacio de charla con los chicos de The Data Republic  (@thedatarepublic), David Sánchez (@dasago78) y Genís Barrera (@genisbarrera)

Mi charla fue sobre la experiencia de trabajar en un entorno de Big Data, pero no es de esto de lo que quiero hablar hoy, voy a hablar de la charla que hicieron The Data Republic, se tituló: Open Data

Hace tiempo que no hablo mucho del tema, y la razón es que aunque inicialmente el movimiento Open Data me entusiasmó, debido básicamente a los experimentos del Datablog de The Guardian y de la lectura del libro Open Government de O'reilly el tema ha ido decayendo.

En su charla de Open Data contaron lo difícil que es transformar los datos abiertos de España en productos con valor, que al fin y al cabo es (o tendría que ser) la finalidad del open data, poder dar transparencia a lo que está haciendo el gobierno y sacar provecho de esto.

Este artículo no es una pataleta, que quede claro, pero voy a intentar hacer una lista objectiva de las cosas que están fallando en el Open Data español. Y voy a hacer esto sabiendo que no soy el único que lo pienso, ya que en la charla vi que todo el mundo comparte las mismas preocupaciones:


  1. Datos en pdf? venga ya. Queremos API's. No vale en poner un pdf colgado, ni un link a otra página con un layout totalmente distinto de otra organización para que luego haya que "scrapearla" (si puedes claro). Y un excel? además todos distintos? na na, no vamos bien.
  2. No cualquier dato. Muchos de los datos que se han abierto (no todos) son viejos, o no son lo que quisiéramos o no se actualizan.  Los programadores y defensores del Open Data debemos jugar nuestro papel en esto, esto se traduce en hacer aplicaciones que sean útiles. Verdad? pues bien, el problema es que yo personalmente (y mucha otra gente) no vemos como hacer una aplicación útil (y rentable ya ni te digo) con los datos que está publicados (o su frecuencia de actualización). Lógicamente si los programadores no hacemos aplicaciones para el gran público esto significa que nadie utiliza los datos abiertos y al fin del año, cuando desde el gobierno pidan los resultados de las apertura de datos los encargados que han estado sudando para hacerlo tendrán que decir: pues no los usa nadie, y lógicamente esto no ayudará la apertura de datos nuevos. 

No obstante, cabe decir que se han hecho grandes cosas dentro del mundillo Open Data español, sólo hace falte echarle una ojeada a la calidad de los proyectos presentados en Abredatos, podéis encontrar una lista aquí.

Entra en escena: Smart Cities!

No termino aquí, vamos a continuar el post ligando todo este tema (que me preocupa mucho) con las smart cities...

Probablemente habrán ustedes oído a hablar de las smart cities no? este concepto de ciudad inteligente, totalmente informatizada que es capaz de reaccionar, digámoslo así. Pues visto lo visto no tengo mucha confianza en que el gobierno/ayuntamientos sean los mejores para hacerlo. No se me entienda mal, no estoy diciendo que no tengan capacidad tecnológica (que la tienen), sino que veo un sinfín de problemas burocráticos para usar o abrir estos datos. Así que últimamente he estado pensando que la única manera de que el tema de smart cities tenga una salida decente es hacerlo bottom-up, desde los ciudadanos y para los ciudadanos.

Algo así como una gran API sobre un sistema de almacenamiento como los que facilita Amazon en que todos los usuarios (ciudadanos) puedan participar, ya sea leyendo de esta API (mediante aplicaciones) y escribiendo encima de ella. Algo así como Pachube + Open Data que de el gobierno/ayuntamiento + Public Data (según los chicos de The Data Republic datos al alcance de la gente (Twitter/Flickr/Foursquare/...)

Y no me digáis loco porque ya hay proyectos así empezando via @algonpaje. Será que la gente empieza a hartarse de los proyectos de "hacerse la foto con el ministro" ?

Sinceramente creo que esta es la única solución práctica y que pueda ser rentable para que todo esto tenga éxito.

Lógicamente, es sólo mi opinión.

3 comentarios:

  1. Totalmente de acuerdo...ahora bien, tengo la suerte de participar en el proyecto de datos abiertos de la Junta de Castilla y León (http://www.datosabiertos.jcyl.es/) y mi visión desde dentro en que, como en todo, lo importante es que los de arriba estén realmente concienciados, involucrados y que impulsen el tema. Que no se conformen con cubrir el expediente y decir "ya tenemos el portal Opendata" para ponerse la medallita, sino que realmente quieran aportar ese valor añadido que solicita el sector informediario...En nuestro caso creo que no vamos por mal camino :)
    Saludos!!

    ResponderEliminar
  2. Buenas, gracias por el comentario.

    Estoy totalmente de acuerdo, de hecho en el post he escrito que nunca estoy diciendo que no hay calidad tecnológica en la administración, sino lo que falta es voluntad política, que es lo que tu dices, concienciar y involucrar a los de arriba.

    Buena suerte pues con el proyecto, le voy a echar una ojeada!

    ResponderEliminar
  3. Muy interesante el artículo Marc!

    Unos cuantos comentarios:

    - Personalmente también he tenido que "luchar" para obtener datos "abiertos". Los datos actualmente de "algunos" portales de open data son una auténtica locura (hay malos y hay peores). Desde dumps a XML de sus bases de datos (donde descubres con qué tipo de estructuras de datos trabajan) hasta ficheros con extensión .bin (¿?), o como bien comentas PDFs y Excels de todo tipo de versiones. Lo del tiempo real...

    - Sobre el concepto SmartCities, estoy completamente de acuerdo con el dibujo bottom-up que propones. Cualquier otro approach no es sostenible, inicialmente a nivel económico. Recomiendo el artículo de Usman Haque en la revista Wired [http://blog.pachube.com/2012/04/surely-theres-smarter-approach-to-smart.html]

    - Para terminar, mi punto de vista sobre la transparencia y España a día de hoy lo veo como 2 conceptos antagónicos. Necesitamos reeducar a la sociedad para cambiar el sistema político y esto se hace con transparencia, sin embargo, intuyo que los políticos no están muy interesados en abrir todos los datos. Para poner un ejemplo, en Chicago contrataron como CTO a un experto en Smart Cities con un extenso CV en IBM, John Tolva. Una de las primeras cosas que hizo fué publicar TODAS las facturas que el ayuntamiento había pagado en los últimos 15 años. No es que no se tengan esos datos, imagino que tendrán algún SAP o Navision en los ayuntamientos, así que... solo es cuestión de cambiar el rumbo de nuestra sociedad!

    Seguimos! :)

    ResponderEliminar

Comenta: