Cuando el diseño se encuentra con el Open Data

Los planteamientos de Daniel Torres Burriel sobre cómo ve él las iniciativas Open Data desde su perspectiva de un diseñador, que son de lectura obligada para comprender lo que viene a continuación, me dan pie a iniciar una conversación sobre un tema que ya me había planteado en varias ocasiones: la relación entre el Open Data y el mundo de los diseñadores, así como las oportunidades de interacción y colaboración entre ambos.

Open Data

Empiezo pues agradeciendo a Daniel el haber abierto el debate público sobre la materia y a continuación paso a expresar mis opiniones en cuanto a sus comentarios:

PDFs: El cementerio donde reposan los datos

Creo que nadie duda de ello, si bien es cierto que se sigue (y se seguirá) publicando información en PDF, mucha, claramente demasiada. El origen de este fenómeno suele ser que toda esa información normalmente ya estaba previamente en ese formato, ya que durante muchos años los PDFs fueron la forma cómoda (y pésima) de crear contenidos para las Webs de la Administración.

Pero, aunque siempre será algo mejor tener datos públicos en un mal formato que no tener ningún dato publicado, esto no debería ser tomado nunca como una solución definitiva, sino como una mera transición para publicar inmediatamente la información disponible a la vez que se trabaja en la mejora de esos formatos. El problema surge cuando lo que debería ser una solución (muy) temporal se convierte en el formato final y es entonces cuando los PDFs se convierten en el lugar a dónde van a morir los datos.

Modelos de representación de los datos

No tengo claro si he entendido bien el concepto de lo que propones como interfaz de consumo, por eso no estoy seguro de si es algo que realmente ya existe o algo que habría que hacer o si simplemente lo que pides es imposible.

Tal y como yo lo veo, cualquier dato que se exponga al final no es más que un dato, lo que al final sumará multitud de datos de las más variadas fuentes y dominios de información. Sí lo que pides es unas pautas generales de presentación de datos me atrevería a afirmar que eso es imposible más allá de todo el compendio que existe ya sobre el tratamiento general de la información y su visualización, pero eso también es una ciencia por sí misma que hay que saber aplicar en cada caso para saber sacarle partido a la información y aflorar las historias que esconde.

No hay más reglas ni puede haberlas. Si no lo he entendido bien por favor ayúdame a interpretarlo mejor, porque me encantaría poder buscarle una solución.

Los datos como entidades vivas

Sin lugar a dudas los datos son entidades vivas, y además existe cierta relación directa entre la frecuencia de actualización de los datos y su valor, es decir, generalmente los datos más vivos y que por su naturaleza se actualizan con mayor frecuencia son los que pueden aportar un mayor potencial en cuanto a beneficio social y económico.

Esa realidad se debe reflejar en los sistemas que gestionen los datos, pero el hecho de que un conjunto de datos se presente como fichero no quiere decir que ese datos estén condenados a la estaticidad de por vida. Al fin y al cabo un fichero tan solo refleja el estado de ese conjunto de datos en un momento determinado y por tanto podría ser también una solución válida aquella que aportase un fichero por cada versión de los datos, siempre que se combinase con un sistema adecuado de gestión de versiones, a través de una configuración apropiada de las URIs por ejemplo.

Cuestión aparte es que hay ciertos datos especialmente dinámicos a los que se les podría sacar mucho más partido a través de una API, e intuyo que por ahí van tus peticiones. En eso no puedo más que coincidir, con un algunos de matices:

  • Una API podría no ser siempre la mejor opción.
  • Para cumplir con los principios del Open Data esa API debería ser un complemento y nunca un sustituto del acceso completo a los datos en bruto.
  • Habrá que seleccionar cuidadosamente cuáles son los datos que se abren por este medio, ya que crear y mantener una infraestructura que de soporte a ciertos datos especialmente dinámicos puede resultar bastante caro, y por supuesto estaríamos hablando de dinero público.

Patrones de datos

Nuevamente no se si el concepto de patrón de diseño se podría aplicar a la explotación de los datos, está claro que sí debe aplicarse, y de hecho ya se hace, para el diseño de los modelos de datos, pero precisamente el potencial de la explotación de los datos se basa en que no hay patrones establecidos y la creatividad y la imaginación con los que somos capaces de combinarlos son los únicos elementos que definen los límites.

Evidentemente para poder sacar provecho de esos datos habrá que tener ciertos conocimientos que provienen de distintas disciplinas (cálculo, estadística, bases de datos, algoritmos, programación, visualización, etc.) que en conjunto se vienen denominando Data Science, y por supuesto contando siempre también con especialistas de la materia en cuestión que se esté tratando en cada momento (sanidad, educación, transportes, medio ambiente, etc.)

Lo que si que es cierto es que en general existe una ausencia muy preocupante de los famosos code books que deberían acompañar siempre a cualquier conjunto de datos para facilitar su explotación. Cuando tratamos con datos muy simples con estructuras mínimas es fácil que con poco esfuerzo cualquiera deduzca esas estructuras y pueda sacarles partido, pero en la mayoría de casos intentar hacer algo productivo con unos datos en crudo que no cuentan con ninguna documentación puede evolucionar fácilmente hacia una misión imposible, o cuando menos conllevará unos considerables esfuerzos superfluos que se podrían y deberían haberse evitado fácilmente.

La crítica final

Me alegra ver que todo el mundo esté últimamente ávido de datos, pero las iniciativas Open Data son carreras de fondo en la que hay que seguir una serie de pasos, entre los cuales se encuentra la necesidad de proporcionar un catálogo para que la información salga de los archivadores y los discos duros de la administración y se haga visible a todo el mundo.

Por muy poco acertada que pueda acabar siendo una iniciativa Open Data en su ejecución, que las hay, creo que llegar a compararlo con el despotismo ilustrado podría ser cuando menos un poco exagerado. Sobre todo si tenemos en cuenta que en este caso el Gobierno de Aragón lleva ya bastante tiempo trabajando tanto internamente, impartiendo formación a sus servidores públicos, como externamente llamando a la participación de todo el mundo, además de haber mostrado en repetidas ocasiones su voluntad de seguir haciéndolo en el futuro próximo.

Está claro que la colaboración entre todos los agentes implicados (Gobierno, Ciudadanos, Empresas, Profesionales, Universidad, etc.), incluyendo por supuesto a los diseñadores, es una herramienta fundamental para el éxito del Open Data, y por eso sería estupendo que el evento UX de referencia en España, al que acudirán muchos de esos diseñadores, adoptase un modelo más flexible, participativo e inclusivo,que las tradicionales conferencias y mesas redondas para abrirse más a la colaboración e intercambio de ideas con otros profesionales, como por ejemplo los del mundo del Open Data.

Personalmente me gustaría saber más sobre las inquietudes de diseñadores y profesionales de la UX acerca del Open Data, puesto que además ya forman parte de él cuando aplican RDFa, schema o microdatos a los diseños Web por ejemplo, pero es que si nunca hablamos, y cuando lo hacemos no es de forma constructiva, difícilmente nos vamos a poder entender.

How Open Data can contribute to a better world for everyone?

In 2000 world leaders agree on eight goals to eradicate extreme poverty. Important progress has been made so far, but there is still a lot to be done and that goals expire in 2015.

The eight millenium development goals

Now it is time to raise your voice and vote for the changes you think could make the most difference to our world, and I warn you this is not going to be easy. You will need to put yourself in the place of those that have nothing and choose just six among a series of basic needs such as:

  • Political freedoms.
  • Protection against crime and violence.
  • Affordable and nutritious food.
  • Better healthcare.
  • Reliable energy at home.
  • A good education.
  • Access to clean water and sanitation.
  • Support for people who can’t work.
  • And several more.

Definitively not easy, is it? But, almost as difficult as choosing the right goals, is to find adequate measures that will mark progress toward them, and it is there where Open Data can also play a key role on improving the human condition.

Visualization of the Millenium Development Goals with Gapminder

Data is critical to decide which approaches are working and which ones do not. Once you have a robust commitment to data-gathering and sharing in place, you will be able to drive change. You will see which countries are being successful in reaching their goals and why, using that observations to help other countries to do the same and, at the same time, forcing those who are falling behind to focus more resources and attention on the problem than they would have done without open data.

El mapa de la Transparencia en España

Ayer se hicieron públicos los resultados para este año del índice de transparencia de la Comunidades Autónomas en España elaborado por Transparencia Internacional con el que se busca un doble objetivo: evaluar el nivel de transparencia de los Gobiernos de las diferentes Comunidades Autónomas y, al mismo tiempo, impulsar la apertura de la información por parte de las instituciones.

Lo primero es felicitar a las Comunidades Autónomas que encabezan la clasificación: La Rioja, que consigue mantenerse en lo alto de la lista y, en especial, Euskadi, que gracias a su estrategia de Gobierno Abierto y Open Data ha conseguido dar un salto cualitativo y posicionarse en el primer lugar de la tabla, confirmándose así como iniciativa de referencia en la materia.

Mapa de la Transparencia

 

Cabe destacar también la mejora de Cantabria, que supone la mayor subida de todas las Comunidades Autónomas y, aunque algunas Comunidades como Murcia, Cataluña o Madrid han registrado bajadas significativas, la nota positiva es que todas superan el aprobado (50) y la media crece significativamente (+8,39) respecto al último estudio del 2010, lo que hace también que esas bajadas en la clasificación sean en parte motivadas por el estancamiento ante una mejora general.

puesto comunidad autónoma 2012 2010 variación
1 País Vasco 97,5 57,5 +13 ⇧
1 La Rioja 97,5 83,8 +2 ⇧
3 Cantabria 95,0 53,8 +14 ⇧
4 Andalucía 92,5 87,5 -3 ⇩
5 Navarra 91,3 80,0 +1 ⇧
6 Castilla y León 90,0 73,8 +2 ⇧
6 Galicia 90,0 87,5 -5 ⇩
8 Extremadura 87,5 81,3 -3 ⇩
9 Baleares 83,8 56,3 +6 ⇧
10 Cataluña 78,8 82,5 -6 ⇩
11 Aragón 75,0 70,0 -2 ⇩
12 Madrid 72,5 80,0 -6 ⇩
13 Asturias 66,3 67,5 -2 ⇩
14 Canarias 63,8 66,3 -2 ⇩
14 Valencia 63,8 56,3 +1 ⇧
16 Castilla la Mancha 58,8 62,5 -3 ⇩
17 Murcia 55,0 70,0 -8 ⇩
media 79,95 71,56 +8,39 ⇧

Sin duda son buenas noticias para el avance del Open Data y, sobre todo, del Gobierno Abierto y la Transparencia, sin embargo todavía hay camino por recorrer, mejorando no solo la cantidad de información disponible, sino también su encontrabilidad, ya que si hacemos el ejercicio de buscar la información correspondiente a cada uno de los 80 indicadores evaluados en alguno de los portales al azar veremos que en varios casos no resulta nada fácil.

Por eso, echando un vistazo a la metodología seguida para el análisis me hubiera gustado también saber más sobre las dificultades que han podido tener para encontrar la información buscada en primer término y cómo de grande podría ser la diferencia respecto al total de información finalmente proporcionada por cada Comunidad Autónoma, porque si la información está ahí pero nadie puede encontrarla tendríamos también un grave problema de transparencia.

La crisis pasa factura, pero el Open Data sigue avanzando en España

A lo largo de este año hemos visto algunos pasos atrás en cuanto al Open Data y la Reutilización de la Información en el Sector Público en nuestro país, por ejemplo el cierre de algunas iniciativas como Extremadura Reutiliza u Open Data Córdoba, aunque sin duda alguna el caso más sonado ha sido el anuncio de la Agencia Estatal de Meteorología (AEMET) respecto al cierre del servicio gratuito de acceso a ciertos datos mediante FTP, pasando en la actualidad a ser un servicio de pago, lo que ha dado lugar a una reacción unánime de rechazo por parte de la comunidad Open Data en España.

Estas noticias suponen claramente un paso atrás en las expectativas Open Data nacionales aunque, tal y como comenta Jorge Campanillas en su blog, la medida tomada por la AEMET es lícita y ajustada a la ley, pero desde luego discutible en cuanto a visión y oportunidad, ya que la imposición de tasas restringe claramente el acceso a los datos públicos, a la vez que resta eficacia y eficiencia en el acceso.

CrisisEs cierto que la gratuidad de la información, aún siendo algo plenamente recomendable, no está contemplada como uno de los principios básicos del Open Government Data, y que el Open Data cuesta tiempo y trabajo, y por tanto dinero, pero la cuestión en este caso es ¿por qué optar por ofrecer de forma abierta unos servicios de gran demanda y utilidad para luego pasar a un modelo de pago por acceso?.

A todas luces parece deberse a una mala estrategia que responde principalmente a motivos de sostenibilidad económica derivados de la complicada situación económica y social que estamos atravesando y que también puede haber afectado a las otras iniciativas que se han quedado por el camino. No obstante, dar prioridad a las cuentas a corto plazo y no pararse a pensar en la factura que eso pasará al desarrollo económico futuro no parece a priori una buena inversión.

El Open Data sigue adelante

A pesar de todo, y aunque el contexto actual esté afectando y puede hacer que surjan algunas dudas sobre la viabilidad de las iniciativas, todo parece indicar que el Open Data está aquí para quedarse, y que hay más motivos para el optimismo que para el pesimismo, como por ejemplo:

Y para seguir avanzando recordemos que el Open Data no es cuestión de publicar algunos datos en bruto y realizar un par de hackatones con ellos, ya que una iniciativa sostenible implica un viaje largo y sin atajos que se debe recorrer paso a paso sobre los cimientos sólidos que proporciona una estrategia coherente.

Comunidades Open Data en España

Un signo distintivo de la madurez que están alcanzando alguna de las iniciativas Open Data en nuestro país es la proliferación de varias comunidades Open Data que nacen con el objetivo de promover el interés ciudadano por los datos abiertos y su reutilización como fuente de creación de valor social y económica, lo que hace que sean un factor determinante para el éxito de cualquier iniciativa.

OpenData Sevilla

Pionera en España como grupo Open Data organizado, se inició de forma espontánea y casi en paralelo al nacimiento de la iniciativa Open Data de la Junta de Andalucía. Formado por un grupo de gente con muchas ganas de hacer cosas como demuestra la organización del I Encuentro Opendata Sevilla celebrado a su nacimiento en Noviembre del 2011 y la gran variedad de actividades de difusión y proyectos ciudadanos en los que han participado en su escaso año de vida.

Open Data SevillaEn la actualidad se encuentran plenamente inmersos en la organización de las II Jornadas Gobierno Abierto y Opendata Sevilla, a celebrar el próximo viernes y sábado 23 y 24 de Noviembre con un programa muy interesante que lo colocan entre los mejores eventos de nuestro país y que aplica una fórmula a imitar, compaginando teoría y práctica, y demostrando que para hacer cosas útiles lo más importante es tener ganas e interés.

Datos.gob.es

Plataforma que da soporte a la iniciativa de Reutilización de la Información del Sector Público de carácter nacional y el Catálogo de Información Pública de la Administración General del Estado.datos.gob.es Reutiliza la Información PúblicaDesde el sitio web y el canal de Twitter asociado se proporciona información general, materiales formativos y noticias de actualidad sobre la reutilización de la información del sector público, ofreciendo recursos prácticos, informativos y divulgativos de utilidad para el desarrollo de productos y servicios de alto valor social y económico. A todo esto hay que sumar el ya tradicional Encuentro Aporta, que se ha convertido ya en la cita anual de referencia para las iniciativas Open Data en España.

Además, esta iniciativa se encarga también de dar soporte a los organismos de la AGE y ayudarles a llevar a cabo sus estrategias de reutilización, además de brindarles un punto de encuentro abierto a la colaboración y participación y un servicio que recoge las sugerencias de mejora aportadas por todos los actores implicados.

Comunidad Open Data y RISP en GNOSS

Comunidad de Trabajo Open Data en España en la que se discuten temas relacionados con la apertura de datos de la administración pública y sobre su reutilización. Un grupo abierto a la participación online de cualquiera que tenga interés en la materia, coordinado por la Oficina Española del W3C y con el apoyo de varias de las iniciativas RISP actualmente en marcha en España.

Open Data y RISPEste grupo funciona como un foro de intercambio de opiniones y aprovechamiento de sinergias entre los distintos publicadores de información, con el objetivo de intentar optimizar la inversión de recursos mediante la colaboración. Entre sus actuaciones destaca la participación en la elaboración del decálogo Open Data.

OKF España

Uno de los grupos locales de la Open Knowledge Foundation que están emergiendo y que actualmente se encuentra en proceso de formación, aspirando a convertirse en capítulo oficial de la organización líder a nivel mundial en difusión del Open Data y el Open Knowledge en general.

OKFN Local: EspañaPese a que se encuentra todavía en una etapa temprana de constitución, entre las áreas de trabajo previstas se encuentran algunas tan diversas como el Gobierno Abierto, las Ciencias Abiertas, el Periodismo de Datos o las Ciudades Inteligentes y el Internet de las Cosas, así como la organización de eventos a nivel nacional, la traducción de guías y documentos al español y la colaboración con otras iniciativas a nivel mundial.

Catalunya Dades

Un grupo que engloba a los distintos actores implicados en la iniciativa Open Data de Cataluña: administraciones, universidades, empresas, desarrolladores y distintos sectores profesionales relacionados con la comunicación, la tecnología o el conocimiento abierto.

Catalunya DadesEl objetivo que persigue es la participación de la sociedad en los procesos de generación de valor que surjan a partir del conocimiento proporcionado por los Datos Abiertos. Entre sus próximas actuaciones se encuentra la formación en Open Data.

Aragón

Aún cuando la iniciativa Open Data de Aragón se encuentra todavía en estado de desarrollo, ya cuentan con algunos primeros pasos muy significativos e inteligentemente orientados.

Si tuviésemos que destacar un aspecto que distinga ya desde un principio a esta iniciativa es la búsqueda de colaboración y formación de comunidad junto a las empresas y los ciudadanos desde los comienzos como ayuda para la definición de la propia estrategia a seguir.

¿Quién quiere ser el último?

Si bien es cierto que todavía queda mucho camino por recorrer para alcanzar la madurez del Open Data en este país, el crecimiento y la mejora de la comunidad entorno al Open Data es una de las vías claramente necesarias. Ahora tendremos que ver si esta proliferación de comunidades será capaz de dar lugar a una colaboración más efectiva y abierta que beneficie al conjunto de iniciativas o a una división de esfuerzos y confrontación de intereses que las penalice en contra de los propios principios que deberían perseguir.

Muy pocos años atrás la duda era saber quién sería el último en sumarse a las iniciativas Open Data en nuestro país, en el punto en el que nos encontramos actualmente parece que la pregunta es quién será el último en contar con una comunidad que sostenga y le de sentido a esa iniciativa Open Data en marcha.

2013, el año de los emprendedores Open Data

Este artículo fue publicado primero en Gijón Open Data Lab.

En los últimos tiempos hemos vivido una explosión de las iniciativas Open Data en los Gobiernos, tanto a nivel nacional como regional o local. Esta proliferación de iniciativas ha dado lugar a que hayamos pasado, en tan sólo tres años, de las decenas de conjuntos de datos inicialmente publicados a más de un millón de conjuntos disponibles en la actualidad, procedentes de cientos de catálogos a lo largo del mundo.

Mujer emprendedora en la pizarra

Sin embargo, el número de aplicaciones y servicios disponibles que explotan esos datos no ha crecido de forma proporcional, por lo que en muchos casos los beneficios del Open Data no están llegando finalmente a los ciudadanos debido sobre todo a las potenciales barreras técnicas, sociales y económicas existentes en algunos casos, como por ejemplo:

  • Disponibilidad de datos de alto valor.
  • Calidad y granularidad de los datos.
  • Barreras administrativas e incertidumbre legal.
  • Falta de una infraestructura sostenible para la explotación de los datos.
  • Ausencia de modelos de negocio.
  • Ajuste entre oferta y demanda de datos.

Con un volumen de negocio en torno a 500 millones de euros en España y un potencial de 200 billones de euros en toda Europa, el Open Data promete unos beneficios económicos que, añadidos a los sociales, evidencian una oportunidad que no debemos dejar escapar. Pero para poder beneficiarnos de ese desarrollo social y económico será necesario superar primero todos los obstáculos actualmente presentes.

Con ese objetivo en mente nace el Open Data Lab Gijón, que ofrecerá un entorno donde los emprendedores puedan llevar a cabo sus proyectos facilitándoles el acceso a los datos de calidad que necesitan, garantizando las infraestructuras y tecnologías necesarias para la sostenibilidad del proyecto y asesorándoles respecto al modelo de negocio a seguir.

Todo ello en el marco urbano de la ciudad de Gijón, lo que proporciona además una fuente de datos de alto interés y gran cercanía para los ciudadanos colaborando también así a construir las nuevas ciudades del siglo XXI en la línea marcada por las Smart Cities.

How to Improve the Best Open Data Site?

The World Bank Data initiative has asked for feedback about what we would like to change on their Open Data site.

This is a tough question as I personally think that, for many reasons, they already own the best Open Data site in the world so far. From tons of quality data to great searchdeveloper and visualization tools, as well as a variety of communication, dissemination and training resources. They have even explored places that others still consider inhospitable. It is really difficult to find some room for improvement, anyway, we can make a wish, so here is mine.

A community meeting place at the World Bank Data site

As all we know, just putting data online is not enough to get it used. Efforts on outreach, community building and engagement are always required, as well as designing for participation, allowing multiple kinds of contributions and letting people contribute in multiple ways. Support conversation around the data and join actively that conversation contributing with the World Bank expertise will increase value, connectivity and the overall network impact derived from the ability of participants to affect each other.

Community

This is why my wish is a thematic space where the stakeholder community can join the World Bank in decision making, building skills and make real contributions. Open Data need to be developed by an amazing variety of people with varying interests and incentives. It is not just about government, business, academic and certain institutions, but also about individuals, nonprofits or any other informal group of people that have already proved to be instrumental in its operation and growth. For me this is the only missing piece to complete the Open Data building blocks jigsaw at the World Bank.

I am aware of the great community building stuff that the World Bank has already put in place, as well as apps competitions that challenge developers to come up with prototypes to show data potential or discussion groups to support them. But we need to get further into the Open Data engagement scale and be able to create an ecosystem devoted to lead to useful and sustainable tools or services based on data.

Of course, this is not only about letting everybody play, but also about playing nice and getting others to involve in the game as a unique team. That’s not an easy task and, apart from online tools and resources, will require special leadership, but I am sure that the World Bank can find it within its great staff.

Avances de la Comisión Europea en materia de Open Data y RISP

Este artículo fue publicado primero en inglés.

Tal y como se viene afirmando últimamente, los datos son el nuevo combustible que alimenta la era digital. Si tenemos en cuenta el amplio rango de oportunidades que el Open Data puede proporcionarnos, no es ninguna sorpresa que dentro de los planes de la Comisión Europea esté el continuar revolucionando la forma en la que las autoridades públicas comparten sus datos. A continuación se muestra una visión general de cuáles son las acciones llevadas a cabo por la CE hasta el momento en materia de Open Data e Información del sector público, así como una revisión de las acciones futuras más inmediatas.Logo European Commission

Un hito de referencia: Workshop de Datos en la Asamblea de la Agenda Digital 2011

La CE organizó una primera Asamblea de la Agenda Digital en Junio de 2011 para tratar los avances en relación a los objetivos de la Agenda Digital para Europa. Con ese propósito se organizaron una serie de dos sesiones plenarias y 24 talleres temáticos, uno de los cuales estuvo dedicado al Open data y la reutilización de la información en el Sector Público (RISP), donde distintos actores implicados en la materia se dieron cita para colaborar con la Comisión en el desarrollo de su estrategia Open Data para la Unión Europea.

Khalil Rouhana (Director General de Sociedad de la Información de la CE) realizó varios anuncios clave en relación a las políticas Open Data en la UE que analizaremos en las siguientes secciones.

El papel de los portales Open Data Europeos

Los portales Open Data están destinados a ser una referencia clave en la infrastructura digital que facilite el acceso y reutilización de la Información del Sector Público y son varios los estados miembro que están desarrollando portales Open Data a todos los niveles. Dado que la cantidad de datos publicados hasta el momento es relativamente limitada en comparación con los disponibles, la CE tiene dentro de sus planes la publicación de dos nuevos portales Open Data que faciliten el acceso a datos Europeos:

Captura de pantalla de data.gov.eu

  •  El portal Open Data de la Comisión Europea data.gov.eu, pensado para facilitar la localización de los datos de la propia Comisión y otras instituciones Europeas. El portal, actualmente en desarrollo, estará disponible para el público a lo largo del 2012.
  • Portal Open Data Pan-Europeo, que facilite la localización y reutilización de los datos de administraciones nacionales, regionales y locales a lo largo de Europa. Un prototipo estará disponible en el 2013.

Revisión de la directiva de reutilización de la Información del Sector Público

Originaria de Noviembre de 2003, y actualmente traspuesta por completo a todos los estados miembros, la Directiva original proporcionaba una harmonización mínima de reglas y procedimientos a lo largo de la UE para facilitar la reutilización de la Información del Sector Público a través de las fronteras. En diciembre de 2011 se presentó una propuesta para la revisión de la Directiva para mejorar la apertura del mercado de servicios sobre la Información del Sector Público a través de las siguientes medidas:

  • Incluir nuevos participantes en el ámbito de aplicación de la Directiva, como por ejemplo bibliotecas, museos y archivos.
  • Determinar límites en las tasas que se establezcan como costes márginales por parte de las autoridades públicas.
  • Introducir medidas de seguimiento independientes en los Estados Miembros.
  • Desarrollar estándares para formatos legibles por máquinas que puedan ser utilizados por las autoridades públicas.

Otros pasos previos significativos

El primer taller sobre Open Data en la Asamblea de la Agenda Digital supuso sin duda un antés y un después, tanto en las políticas Open Data y de reutilización en la UE como en la forma en que la CE comunica esas políticas e interactua con los distintos agentes implicados.

Sin embargo, varias fueron también las medidas adoptadas por la CE en materia de Open Data y RISP con anterioridad a este primer talle, como por ejemplo:

Diciembre 2011: El Comunicado sobre Open Data

Como continuación del primer taller de la Agenda Digital, la Comisión adoptó un Comunicado oficial sobre Open Data a través del cual se proponen una serie de acciones para cumplir con los objetivos previamente anunciados:

  • Crear un portal para la información de la Comisión que se extienda posteriormente también a otras instituciones y agencias de la UE.
  • Trabajar en conjunto con los Estados Miembros sobre los formatos de datos y la interoperabilidad de los distintos sitios.
  • Crear un portal Pan-Europeo que enlace información de distintas instituciones de los Estados Miembro.

Segundo taller sobre Datos en la Asamblea de la Agenda Digital 2012

En Junio de 2012, la Asamblea de la Agenda Digital acogió una nueva edición del taller de Datos en la que se dio un nuevo repaso a la hoja de ruta de la EC en materia de Open Data y RISP:

También es destacable la apuesta global Europea en materia de tratamiento de datos, Open Data y Open Access, no solo solo mediante políticas y medidas regulatorias, sino también a través de investigación, innovación y la implementación de pilotos y portales financiados mediante los múltiples programas de I+D+I FP7 y CIP-ICT-PSP 2011-13, que tendrán su continuación con el nuevo Programa Horizon 2020.

Horizon 2020 logoAlgunas de las cuestiones que destacan de entre las tratadas en este nuevo taller fueron:

Licencia de Datos Europea

Existe una necesidad real de estudiar los requisitos para una Licencia de Datos Europea, dado que será un elemento necesario a la hora de facilitar el acceso y la reutilización de los datos a través de las fronteras Europeas. Varias son las cuestiones que hay que resolver al respecto: ¿Sirve alguna de las licencias ya existentes o necesitaríamos una nueva? En caso de necesitar una nueva licencia, ¿hay alguna opción obvia a seguir o se necesitaría algo completamente nuevo?

Publicación de Datos Clave

Dado que los Estados Miembros de Europa cuentan ya con una enorme cantidad de datos valiosos, una tarea prioritaria sería la identificación y difusión abierta de Datos clave de referencia. Algunos de esos datos ya están siendo publicados de forma abierta por ciertos Estados Miembro, pero son todavía demasiados los que permanecen cerrados bajo extrañas reglas de reutilización o modelos de recuperación de costes insostenibles.

Próximos pasos

Además de todas las actuaciones en marcha anteriormente mencionadas, y según lo anunciado por la Vice Presidenta de la Comisión Neelie Kroes, la CE tienen en mente continuar con el desarrollo de su estrategia Europea para la publicación y reutilización de los datos del sector público en las instituciones Europeas y los Estados Miembros. Algunos elementos destacables dentro de los próximos pasos serían los siguientes:

Servicios para la publicación, acceso y reutilización de los Datos Públicos en la UE

Están planificados una serie de servicios orientados a dar soporte en la publicación de Datos por parte de agentes públicos de la EU en cualquier nivel. Estos servicios incluirán:

  • Servicios relacionados con la preparación, transformación y publicación de los datos, con el compromiso de publicar al menos 15.000 nuevos conjuntos de datos en formatos legibles por la máquinas – incluyendo tecnologías Linked Open Data – y que procedan de todos los Estados Miembro de la UE.
  • Formación a trabajadores públicos en las áreas de Open Data, y en particular para favorecer la adopción de tecnologías Linked Open Data por parte de las instituciones públicas de la Unión Europea.
  • Servicios de asesoría y consultoría técnica en materia de Open Data en general, y particularmente en cuanto a tecnologías Linked Open Data se refiere.

La Incubadora de Reutilización del Open Data

Los distintos instrumentos financieros establecidos continuarán dando soporte a distintos desarrollos Open Data. Cabe destacar el Programa de Trabajao FP7-ICT 2013 que ayudará a las pequeñas y medianas empresas (PYMEs) en el desarrollo de aplicaciones innovadoras para la gestión de contenidos digitales, y particularmente en la reutilización de Open Data a través de la Incubadora Open Data. El objetivo de la Incubadora será establecer un entorno adecuado para:

  • Sondear al público en general en búsqueda de ideas de reutilización del Open Data y llevar a cabo una campaña de Reutilización de la Información Open Data a nivel Europeo.
  • Gestionar convocatorias regulares dirigidas a PYMES en busca de mini-proyectos que puedan ser financiados y llevados a cabo en un periodo de entre 6 y 12 meses.
  • Crear una infraestructura donde las propuestas ganadoras puedan encontrar versiones corregidas y actualizadas de los datos que necesiten para crear sus servicios.
  • Establecer mecanismos para la conexión entre la oferta y la demanda, poniéndose en contacto a los agentes públicos Europeos y ayudándoles a conseguir una publicación eficiente y sostenible de la información.

Armonización de iniciativas Open Data

Como respuesta al reciente clamor por la armonización de iniciativas Open Data, la Unión Europea está financiando proyectos como “Armonización del Open Data en el área del Mediterráneo mediante un mejor acceso y reutilización de la Información del Sector Público – Homer”, cuyo objetivo principal es establecer una estrategia efectiva capaz de armonizar las políticas y portales Open Data a lo largo del área Mediterránea, dando soporte tanto a Gobiernos regionales como locales.Homer Logo

Nuevas vías de crecimiento

La búsqueda de nuevas vías de crecimiento que exploten las posibilidades del Open Data alrededor de una temática específica es tan importante a la hora de avanzar en la materia como los esfuerzos políticos, estructurales y educativos. Algunos de las temáticas Open Data que se están explorando actualmente a nivel de la Comisión Europea son:

  • Datos Culturales: La iniciativa de bibliotecas digitales de la UE pretende hacer que todos los recursos culturales de Europa sean accesibles por todo el mundo, preservándolos para las generaciones futuras. En este área cabe destacar la reciente adopción de la licencia CC0 por parte de Europeana, que supone un cambio importante en el acceso al Open Data que sienta un precedente internacional en el distanciamiento del mundo de los datos cerrados y controlados.

Europeana

  • Smart Cities: Uno de los mayores retos a los que se enfrenta la UE es cómo diseñar y adaptar las ciudades hacia entornos más inteligentes y sostenibles. Las tecnologías urbanas intelligentes suponen una mejora importante a la hora de afrontar los retos urbanos gracias a que involucran a los distintos sectores implicados, dando lugar a soluciones adaptables e interoperables y creando una vía para un uso transparente y abierto de los datos.
  • Open Science: La EC ya ha realizado un primer esbozo de las medidas para mejorar el acceso a la información científica producida en Europa. Un acceso más amplio y rápido a las publicaciones y datos científicos financiados con dinero público hará que sea más fácil aprovechar los resultados por parte de investigadores y empresas, mejorando sustancialmente la capacidad de innovación Europea y dando un acceso más rápido a los beneficios de los descubrimientos científcos. La Comisión hará que el acceso abierto a publicaciones científicas sea un principio general de Horizon 2020, el programa de Investigación e Innovación Europeo para el periodo 2014-2020.

Networking, concienciación y difusión

Tal y como se extrae de las conclusiones en materia Open Data de la última Asamblea de la Agenda Digital,  las actividades de networking, concienciación y difusión son elementos clave para el éxito de una política Open Data y RISP en la EU. De forma complementaria a las acciones legislativas, la Comisión también da soporte a acciones de concienciación difusión y networking como por ejemplo:

  • El Public Sector Information Group, un grupo de expertos en RISP que incluye representantes de 27 Estados Miembro y ha sido convocado por la CE para el intercambio de buenas prácticas e iniciativas que den soporte al RISP, así como proponer soluciones a los retos pendientes, tales como tasas, acuerdos de exclusividad o indicadores de desarrollo RISP.
  • LAPSI, la Red Temática Europea sobre Aspectos Legales de la Información del Sector Público. Principal punto de referencia Europeo en cuanto al análisis de políticas de alto nivel y acciones estratégicas sobre cualquier cuestión legal relacionada con el acceso y la reutilización de la Información del Sector Público en el ámbito digital.
  • El European Data Forum, reunido por primera vez en Copenague en Junio de 2012 y próximamente en Dublín (Abril 2013). Es un foro en el que los agentes de negocio –  incluyendo un gran número de PYMES – investigadores y otros agentes implicados pueden reunirse para discutir el estado de la economía del dato.

La Plataforma Europea de la Información del Sector Público

La EPSI Platform es el nodo central Europeo en cuanto a Reutilización de la Información en el Sector Público (RISP) y su objetivo es la promoción de un mercado RISP dinámico a lo largo de la UE. La Plataforma proporciona un punto de reunión donde los diferentes agentes implicados pueden obtener toda la información relevante acerca de los desarrollos RISP en la UE, así como buenas prácticas destacadas, cuestiones legales y ejemplos de productos y servicios RISP.

EPSI PlatformLa plataforma publica noticias sobre desarrollos RISP Europeos y casos legales acerca de la reutilización, así como buenas prácticas y ejemplos de nuevos productos y servicios que dan cobertura a los principales mercados RISP. Desde la plataforma se hace un seguimiento continuo de los principales desarrollos en políticas Open Data, Government Data y RISP y se elaboran informes sobre distintas iniciativas y proyectos, tanto a nivel Europeo como en el resto del mundo.

The European Commission steps forward on Open Data and PSI re-use

As so often repeated these days, data is the new fuel for the digital age. Considering the wide spectrum of opportunities Open Data may bring, it is no surprise that the EC plans how to keep shaking up the way public authorities share data. The following lines aim to be an overview of the EC developments so far on Open Data and Public Sector Information, as well as a review of future planned actions.

Logo European Commission

A Landmark Event: Data Workshop at the Digital Agenda Assembly 2011

The EC organized the first Digital Agenda Assembly in June 2011 to discuss advances with regards to the Digital Agenda objectives for Europe. With that aim, twenty-four thematic workshops and two plenary sessions were conducted. One of those events was the Open data and Re-use of Public Sector Information workshop, where different types of stakeholders congregated to collaborate with the Commission on developing its strategy for Open Data in the EU.

Khalil Rouhana (DG Information Society and Media Content & Cognitive Systems of the European Commission) made several key announcements in relation to Open Data policies in the EU during that workshop. We will focus briefly on these in the forthcoming sections.

The role of European Open Data portals

Open Data portals are aimed to be a key referral of the digital infrastructure bound for facilitating access to and re-use of Public Sector Information. Open Data portals have been -and are being- created around many EU Member States at all governmental levels. Given that the quantity of data published so far is relatively limited as compared to that potentially available for publication, the EC plans to publish two new central Open Data portals to facilitate access to European Open Data:

data.gov.eu screenshoot

  • The European Commission Open Data portal data.gov.eu, a portal easing the search for Commission data, as well as other EU institutions, bodies and agencies to citizens and industry. The portal, currently under developement, is expected to be released soon in 2012.
  • Pan-European Open Data portal, to make data from EU, national, regional and local administrations more easily available and re-usable. A prototype is expected to be released in 2013.

Review of the Directive on the Re-use of Public Sector Information

First adopted on November 17, 2003 and by now completely transposed to all member States, this original PSI Directive provided a minimal harmonisation of rules and procedures across the EU in order to facilitate cross-border re-use of the PSI. A proposal for a revision of the Directive, which is currently being discussed by the Union legislator, was presented in December 2011 to further open up the market for services based on PSI by:

  • Including new bodies in the scope of application of the Directive such as libraries, museums and archives.
  • Determining limits on the fees that can be charged by the public authorities at marginal costs.
  • Introducing independent oversight re-use rules in the Member States.
  • Making standard machine-readable formats for information held by public authorities.

Other Meaningful Previous Steps

That first Open Data and PSI workshop was a landmark event both in Open Data and PSI policies in the EU as well as in the way that the EC communicates these policies and interacts with the different stakeholders. Nevertheless, several steps forward were also made by the EC on the Open Data and PSI matters before this first Digital Agenda Workshop, such as:

December 2011: The Communication on Open Data

Following the first Digital Agenda workshop, the Commission adopted a Communication on Open Data by December 2011. In this Communication, the Commission proposes several actions to accomplish the objectives previously announced in the aforementioned DAE workshop:

  • To create a portal site for Commission-held information aiming at an expansion to other EU institutions, bodies and agencies at a later stage.
  • To work with the Member States on data formats and interoperability between existing sites.
  • To create a Pan-European umbrella site linking information held by EU institutions, bodies and agencies and by Member States.

First Update: New Data Workshop at the Digital Agenda Assembly 2012

In June 2012, the Digital Agenda Assembly 2012 housed a new Data Workshop where the European Commission Open Data and PSI roadmap was presented again, mainly:

It is also remarkable to recall the European overall bet for data handling, Open Data and Open Access, not only by Open Data policies and a regulatory strand (PSI Directive), but also by means of research, innovation and ICT deployment pilots and portals implemented through financial support instruments such as the FP7 and CIP-ICT-PSP 2011-13 R&D&I multiple programmes, that are currently almost gone but will have continuity with the new Horizon 2020 programme.

Horizon 2020 logoSome of the questions that lead this Workshop where:

European Data license

There is a strong need to investigate requirements for an European Data License, given that if we want to encourage use and reuse of data across European borders, there may be the need for a single cross-border license. Several questions then arise: Will one of the existing licenses do the job, or do we need a new one? If we do need a license, is there an obvious choice, or is something new required?

Release of Core Data

A first-priority task will be to identify and evangelise Open release of Core Reference Data, given that European Member States have already huge quantities of valuable data. Some of this data is now becoming freely available in certain Member States, but too much of it remains locked up behind odd rules and unsustainable cost-recovery models. It is also difficult to compare data between Member States.

Future Steps

In addition to all the work in progress that has been previously mentioned, and as announced by the Vice President of the Commission Mme Neelie Kroes, the EC also plans to continue developing their European strategy for the publication and reuse of public sector data from European institutions and the Member States, as established with Commission’s commitment to turn public data into business included in action 3 of the Digital Agenda for Europe Communication.

Some highlights of the future planned distributed actions include:

Services for publication, access and reuse of EU Open Public Data

A series of services will be purchased aimed at supporting the EU-wide availability of PSI and Open Data from public bodies at different governmental levels. These services will include:

  • The provision of data preparation, transformation and publication services, with a commitment to publish at least 15.000 new data sets from all EU Member States in machine readable formats, including Linked Open Data technologies.
  • Training services in the area of Open Data, in particular to favour the uptake of Linked Open Data technologies by public bodies within the European Union.
  • Provision of an IT advisory and consultancy service in the area of Open Data, and in particular on Linked Open Data technologies, including specific software development tasks.

The Open Data Reuse Incubator

Financial support instruments will continue to support several Open Data developments, notably, the FP7-ICT Work programme 2013 will help Small and Medium Enterprises (SMEs) to develop innovative applications in structured and unstructured digital content management and, particularly, in the reuse of open data through an Open Data Incubator.

This Incubator will establish an environment to:

  • Solicit open data reuse ideas from the general public and conduct a European wide open data reuse information campaign.
  • Publish and manage regularly scheduled calls for SMEs to submit mini-proposals to be funded for a period between six and twelve months.
  • Create a computing infrastructure where the winning mini-proposals will find accurate and up-to-date versions of the data they need for their services.
  • Establish a mechanism for connecting open data demand and supply by systematically contacting European public bodies for their open data and assisting them in the efficient and sustainable publication of such data.

Harmonization of Open Data initiatives

In response to the increasing clamour in search of harmonising Open Data initiatives, the European Union is financing projects such as “Harmonising Open Data in the Mediterranean through better access and Reuse of Public Sector Information – Homer”, which aims mainly to set up an effective strategy able to harmonise Open data policy and portals across the Mediterranean area, supporting regional and local governments.Homer Logo

New paths for growth

As important as political, structural and educational efforts, uncovering new paths for growth, in which Open Data possibilities about a given topic are explored, is also critical in order for Open Data and PSI re-use to advance. Some Open Data and PSI topics that are currently being explored by the European Commission are:

  • Cultural Data: The EU’s digital libraries initiative sets out to make all Europe’s cultural and scientific resources accessible to all, and preserve them for future generations. In this area it should be pointed out that recent Europeana’s move to CC0 is a step change in open data access, given that releasing data from across EU country sets an important new international precedent and a decisive move away from the world of closed and controlled data.

Europeana

  • Smart Cities: One of the greatest challenges facing the EU is how best to design and adapt cities into smart intelligent and sustainable environments. Smart urban technologies can make a major contribution in tackling urban challenges by breaking down boundaries between the sectors involved, ensuring adaptable and interoperable solutions and finding a way to use data transparently and openly, without breaching privacy.
  • Open Science: The European Commission outlined measures to improve access to scientific information produced in Europe. Broader and more rapid access to scientific papers and data will make it easier for researchers and businesses to build on the findings of public-funded research, boosting Europe’s innovation capacity and give citizens quicker access to the benefits of scientific discoveries. The Commission will make open access to scientific publications a general principle of Horizon 2020, the EU’s Research & Innovation funding programme for 2014-2020.

Networking, awareness raising and Dissemination

As seen from the last Digital Agenda Assembly Open Data conclusions above, networking, awareness raising, dissemination and outreach activities are considered key elements for the Open Data and PSI re-use market success at the EU. Complementary to legislation, the Commission supports deployment, support, awareness raising, and networking actions such as:

  • The Public Sector Information Group, an PSI expert group which includes representatives of 27 Member States that was set up by the EC to exchange good practices and initiatives supporting public sector information re-use and discuss and recommend solutions to challenges such as charging, exclusive agreements, development indicators for measuring public sector information and technology.
  • LAPSI, The European Thematic Network on Legal Aspects of Public Sector Information to become the main European point of reference for high-level policy discussions and strategic action on all legal issues related to the access and the re-use of the PSI, namely in the digital environment.
  • The European Data Forum, with a first meeting in Copenhagen (June 2012), and the next scheduled for Dublin in April 2013. It is a forum in which business actors, including a large number of SMEs, researchers and other stakeholders can come together to work out what a data economy really looks like.

The European Public Sector Information Platform

The EPSI Platform is Europe’s One-Stop Shop on Public Sector Information (PSI) Re-use which objective is the promotion of a dynamic PSI re-use market across the EU, a place where the different stakeholders can get all the relevant information about the European and international PSI re-use developments, emerging good practices, legislation, legal cases, examples of PSI re-use products and services, etc.

EPSI PlatformThe Platform provides news on European PSI developments, legal cases around re-use, good practices and examples of new products and services, covering the main PSI re-use markets. It follows and reports on a daily basis the developments of the PSI re-use/open-data/government-data policies, initiatives and/or projects in the EU and elsewhere.

Sin tecnología (y sin tecnólogos) tampoco habría ni Open Data ni Gobierno Abierto

La reciente publicación de Cesar Calderón en su blog, que recomiendo leer antes de lo que viene a continuación, me ha hecho reflexionar a mí también sobre la corriente anti-tecnológica que últimamente viene apareciendo en cualquier debate sobre Open Data o Gobierno Abierto y que produce también algunos fenómenos extraños.

Aunque nunca está de más reiterar la importancia del compromiso y la voluntad política como punto clave e imprescindible para una iniciativa Open Data o de Gobierno Abierto en general, lo que no acabo de entender es qué puede aportar de malo una brillante construcción técnica en cuanto al éxito de la iniciativa o al compromiso de sus promotores, y menos todavía el tono negativo o incluso a veces rozando el sarcasmo que me parece percibir al respecto.

No se equivoquen, la absoluta totalidad de iniciativas exitosas de Open Government, Open Data, participación y transparencia tienen un mismo origen, la política, y un medio común, la tecnología, como herramienta que facilita una transparencia, colaboración, participación y reutilización efectivas.

Y para demostrarlo podemos utilizar los mismos tres ejemplos mencionados como iniciativas de referencia – Obama en USA, Patxi en Euskadi y Cameron en UK – que han estado asociados siempre a sus respectivas brillantes soluciones técnicas, desde la plataforma abierta de Open Government que se utiliza en USA y que ahora está también disponible para su reutilización por otras iniciativas gracias a la Open Government Platform, hasta el recientemente renovado data.gov.uk referente a nivel mundial en casi todos los sentidos, pasando como no por el portal de Apertura de Datos públicos del Gobierno Vasco, que ha sido posible gracias al aprovechamiento de la sólida base técnica previamente existente en la infraestructura Web de Euskadi. Todo eso por no hablar de la reciente apuesta de Obama por las APIs como vía de futuro para la sostenibilidad del Open Data, o la forma en la que desde el Reino Unido se ha ido abriendo camino con las tecnologías de la Web Semántica y el Linked Data como apuesta de futuro para los Datos Abiertos, vía a la que recientemente se ha unido también la Comisión Europea.

Por otro lado, es realmente difícil que si no existe un verdadero compromiso político se realice la apuesta necesaria para llevar a cabo una solución técnica adecuada. Esto da lugar a que en la gran mayoría de las ocasiones la existencia de una solución técnica brillante sea por pura lógica un claro indicativo del compromiso político previamente establecido, es decir, dicha solución técnica surge normalmente como consecuencia del compromiso. De hecho, aquellos casos en los que el compromiso político no existe realmente muchas veces se pueden detectar con facilidad gracias a que se suelen materializar a través de soluciones técnicas pobres e inadecuadas, incapaces a todas luces de sostener un proyecto que se hubiese conceptualizado como algo duradero.

Por tanto yo diría que si bien el compromiso político es el verdadero habilitador, la solución técnica es el posibilitador final capaz de hacer una iniciativa sostenible a lo largo del tiempo, y no olvidemos que si no fuera por la plataforma abierta que nos ofrece Internet no estaríamos problabemente hablando de las iniciativas de Open Data o Gobierno Abierto a las que sirve de soporte imprescindible.

De esta forma, un político que no sepa hacer un uso adecuado de la tecnología que tiene a su disposición está dando el primer paso hacia la insostenibilidad de cualquier iniciativa de reutilización de la información. De igual modo que una comunidad de Gobierno Abierto y Open Data que no es capaz de trabajar unida está dando grandes zancadas hacia su autodestrucción, y todo por no saber respetar, apreciar y valorar en su justa medida el trabajo de los distintos implicados, ya sean grandes políticos de nueva generación, brillantes tecnólogos o visionarios del Gobierno Abierto.