The G20 Open Data Plan against corruption

The G20 Leaders established the Anti-Corruption Working Group (ACWG) at the Toronto Summit in 2010 in recognition of the significant negative impact of corruption on economic growth, trade and development. The work of the ACWG has been guided by two-year action plans that include commitments by G20 countries to ratify and implement the United Nations Convention against Corruption. Still, at the end of 2014, corruption continues to represent a significant threat to global growth and financial stability.

The ACWG recognizes that promoting greater transparency and integrity in the public sector is essential to preventing the misuse or diversion of public funds, which can have a significant negative impact on economic growth and development. The G20 must continue to lead by example in this area by ensuring that government agencies, policies, and officials model international best practices for public transparency and integrity.

For that, the new 2015-16 G20 Anti-Corruption Implementation Plan that has just been ratified in the last Leader’s summit in Brisbane includes different areas of action with specific commitments, including several focused on Open Data. More specifically:

The ACWG has identified open data, public procurement, whistleblower protections, immunities from prosecution, fiscal and budget transparency, and standards for public officials as main issues affecting the public sector transparency and integrity which merit particular attention in 2015-16.

What’s the problem?

Open data initiatives play an important role in promoting public sector transparency and accountability, and can also have significant benefits for the private sector. In particular, open data helps businesses to assess risks and opportunities in different markets so they can make better investment decisions. Open data also gives citizens better visibility of the flow of public money across borders, and enhances public debate on the use of public money.

The G20 value add

Building on open data initiatives developed in other fora (e.g. the G8 Open Data principles), the G20 will lead by example in promoting and implementing international best practices on open data.

Links to the G20 broader agenda

Open data has important benefits for the wider G20 agenda, for example, with regard to investment by empowering the private sector to make better investments decisions.

Specific commitments in the current G20 implementation plan

  1. The ACWG will prepare a G20 compendium of good practices and lessons learned on open data and its application in the fight against corruption.
  2. The ACWG will prepare G20 Open Data Principles, including identifying areas or sectors where their application is particularly useful and taking into account different national legal frameworks.
  3. G20 countries will complete self assessments of their open data frameworks and initiatives, with reference to the G20 Open Data Principles, and consider next steps.

Calidad e Interoperabilidad de los datos

No hay mejor forma de empezar el año que con una nueva edición del encuentro anual Aporta sobre el estado de la reutilización de los datos públicos en España, organizado por el Ministerio de Industria, Energía y Turismo, el Ministerio de Hacienda y Administraciones Públicas y la Entidad Pública Red.es.

Encuentro Aporta

Este año el encuentro estuvo dedicado al valor de los datos abiertos y contó también con la novedad de incorporar un foro sectorial sobre los datos de turismo. Además, tuve el placer y privilegio de compartir mesa con Antonio Rodriguez (Jefe del Área de Infraestructura GIS en el Instituto Geográfico Nacional de España), Aleida Alcaide (Consejera Técnica del Ministerio de Hacienda y Administraciones Públicas) y Jose Luis Roda (Profesor titular de la Universidad de la Laguna) como moderador de una sesión con un tema de lo más interesante: la Calidad e Interoperabilidad de los datos.

Sesión de Calidad e Interoperabilidad de los datos

El planteamiento que realicé como hilo conductor de la mesa seguía tres premisas básicas que me gustaría compartir:

1 – Los problemas de calidad e interoperabilidad no son una novedad de los datos abiertos

La calidad de los datos y la interoperabilidad son dos retos importantes que no son nuevos en absoluto y llevan con nosotros desde el inicio de las TIC e incluso mucho antes. Ahora sin embargo, gracias a la proliferación de iniciativas de datos abiertos, los datos están cada vez más expuestos y los reutilizadores comienzan a verlos con nuevas y diferentes perspectivas distintas a las originales. Los datos son puestos a prueba, se analizan, se visualizan y se buscan nuevas utilidades y servicios que hacen aflorar también nuevos problemas no detectados hasta el momento, aumentando al mismo tiempo el grado de exigencia de calidad.

Quien piense que sus datos no tienen ningún problema es que no los ha mirado nunca con suficiente detenimiento.

Todo analista de datos experimentado ha aprendido a convivir con cierto grado de error e incertidumbre en los datos como parte natural e inevitable del proceso; y también han aprendido a planificar los proyectos adecuadamente incluyendo el esfuerzo y los procedimientos necesarios para el tratamiento de esos errores.

2 – La calidad total de los datos es una “quimera” que debemos perseguir

Sin embargo, al contrario que los analistas, los “propietarios” o gestores de los datos sienten habitualmente una cierta resistencia natural a la aceptación de los errores, mucho más cuando ahora son expuestos “públicamente”. Debido a ello necesitan cierto periodo de aceptación y durante la última reunión del comité de dirección del Open Data Institute, Tim Berners-Lee comparaba este proceso con las 5 etapas del trauma descritas por el modelo Kübler-Ross:

Modelo Kubler-Ross
  1. Negación: Los datos no pueden estar mal, el problema tiene que estar en otro sitio.
  2. Ira: ¿Quién es el responsable y por qué no nos habíamos dado cuenta hasta ahora?
  3. Regateo o Negociación: ¿Podemos ignorar y ocultar los fallos de alguna manera?
  4. Depresión: En realidad estos datos están tan mal que no servirán para nada. Sería mejor dejarlo.
  5. Aceptación: De acuerdo, sabemos que hay un problema. Documentémoslo y describamos el alcance y las limitaciones.

Una vez superadas las etapas anteriores es necesaria la transición hacia una etapa adicional de “Esperanza” en la que finalmente nos damos cuenta de que, gracias a que los datos están ahora más expuestos, podemos contar también con más ayuda, mejores herramientas y canales de feedback para poder corregir los problemas y usarlos en nuestro beneficio para mejorar la calidad final.

3 – Las tres vertientes de la interoperabilidad.

Podemos descomponer la problemática de la interoperabilidad de los datos en tres componentes principales.

Interoperabilidad Técnica

Interoperabilidad Técnica

En este nivel hablamos de infraestructuras, protocolos y tecnologías utilizadas para compartir datos de forma común para que los sistemas puedan hablar entre sí.

Este punto generalmente no suele resultar especialmente conflictivo, al contar ya con una base de infraestructuras y tecnologías en Internet y la Web suficientemente maduras y adecuadas para este fin. No obstante la creación de frameworks específicos y adecuados para cubrir las necesidades de este tipo de proyectos puede ayudar a facilitar considerablemente el uso y aprovechamiento de los datos. Un ejemplo en esta línea sería el proyecto Europeo FI-WARE que explota el concepto cada vez más extendido de las Open APIs.

Interoperabilidad Semántica

Interoperabilidad SemánticaAquí nos centramos en que los sistemas sean capaces no únicamente de hablar, sino de entenderse entre ellos. Está vertiente se encuentra a medio camino entre la parte más técnica y la más humana, y será la capa encargada de facilitar los estándares adecuados para la representación de los datos y la información, de forma que pueda analizarse e intercambiarse automáticamente, pero al mismo tiempo mantenga también su capacidad de poder ser comunicada a las personas de forma comprensible para ellos.

Interoperabilidad Sintáctica o Humana

Interoperabilidad SintácticaEste último componente se centra en las personas que tienen que llegar a acuerdos y convenios para “hablar el mismo idioma”¿Qué es el Open Data? ¿Qué principios sigue? ¿Cómo se hace “bien”? ¿Qué datos hay que abrir? ¿Con qué estándar y en qué formato? ¿Qué modelo deben seguir unos determinados datos? ¿Sirve un único modelo para todo el mundo?

Poner a todo el mundo de acuerdo para dar respuesta común a estas preguntas es quizás el reto más grande, y más difícil será aún cuanto más global es el objetivo, ya que a los retos propios del Open Data tenemos que unir aquellos relacionados con el Big Data o la Internacionalización (en ambas vertientes: globalización y localización) y el reto del Broad Data.

En esta parte se están centrando actualmente múltiples grupos de trabajo en organizaciones tan diversas como el G8, el Grupo del Open Data del Open Government Partnership, la iniciativa de Interoperabilidad de la Comisión Europea, la Global Open Data Initiative, la actividad de Datos del W3C, etc.

Calidad e interoperabilidad en tres casos de uso.

Las intervenciones de mis compañeros de mesa se centraron en explicar la necesidad y los beneficios de las acciones para asegurar la calidad e interoperabilidad de los datos en tres casos de uso distintos y a cada cual más interesante: La directiva Inspire, la actualización de la Directiva Europea de Reutilización de la Información y el proyecto Open Data Canarias.

Sus intervenciones y la del resto de las mesas del encuentro, así como entrevistas y otros materiales audiovisuales pueden consultarse en el mini-site temático SpainESData.

The new Open Government Partnership Open Data Working Group

Governments are increasingly creating new open data initiatives and they are the most popular Open Government Partnership commitment so far. Still, the potential of Open Data and its implications for governance are only starting to be articulated.

The mission of the OGP Open Data Working Group is to hold the promise of radically transforming the way government and societies work together to analyze and solve challenges; helping OGP governments implement their commitments and develop more ambitious and innovative action plans related to open data.

Open Government Partnership

More specifically, the new Open Data Working Group aims to:

  • Serve as a guiding voice on open data issues to help OGP governments implement their action plans and develop ambitious new commitments.
  • Increase awareness of open government data issues across the OGP.
  • Amplify and broaden the evidence base for open data reforms.
  • Gather and strengthen existing resources.
  • Engage with the broader global open data community.

Participation in the group is open to all OGP countries and civil society organizations working on open data issues. I was invited to participate on behalf of OpenKratio, a citizens’ group that promote Open Government and Open Data values within the society and the only Spanish representation in the group so far.

OpenKratio.org

The working group first convened on the side of the OGP Summit in London last October. Topics that were discussed during the meeting included:

  1. Open Data measurement – the need to better understand the impacts of open data.
  2. Capacity building – what’s yet to be done and were are the gaps.
  3. Data standards – how to cross-link between information silos to achieve greater impact.
  4. Developing and implementing stronger open data commitments – is there a need for a common set of principles?

There was also a formal launch in a public event as part of the really interesting OGP summit general agenda, which included several high-level participants from governments and civil society, such as Tim Berners-Lee (Founding Director of the Web Foundation; President and Co-Founder of the Open Data Institute) and Beth Noveck (Professor of The Gov Lab, New York University).

This panel explored the current reality of open data implementation, drawing upon early findings from the Open Data Barometer study, and how to move faster to close the gap between rhetoric and reality to unlock the real potential of open data.

The group is currently working on a more specific concept note that will drive the group work in the future on the basis of the feedback and input from the first meeting. Stay tuned for the next steps of the Group during the following months.

Nueva Directiva Europea de Reutilización de la Información del Sector Público

Recientemente el Comité de Representantes de los países miembro de la Unión Europea ha dado su visto bueno a la actualización de la Directiva de Reutilización de la Información del Sector Público. Aunque todavía habrá que esperar al trámite de su aprobación por el Parlamento Europeo en Junio, es de esperar que no se produzcan cambios ni retrasos significativos.

En general la nueva Directiva supone un avance respecto a la directiva anterior del 2003 y un nuevo paso adelante en la estrategia Open Data de la Unión Europea, destacando la intención general de la actualización:

“Una vez implementada la nueva Directiva establecerá un derecho legítimo sobre la reutilización de la información pública que no estaba presente en la Directiva del 2003” – Neelie Kroes, Vicepresidenta de la Unión Europea.

No obstante, tras un primer análisis inicial por parte de la comunidad parece que sigue también habiendo algunos puntos mejorables, por ejemplo:

  • Existe la posibilidad de cargar costes marginales en el tratamiento de los datos y mantener otros modelos adicionales de ingresos mediante tasas cuando sean de aplicación en casos concretos con normativas propias.
  • En general se permite la aplicación de cualquier tipo de tasas, siempre que se justifique y se aplique de forma transparente, ignorando los efectos negativos que la aplicación de tasas tiene sobre la reutilización o los beneficios indirectos adicionales que una mayor apertura de los datos puede proporcionar.
  • Los formatos abiertos y legibles por máquinas serán obligatorios, pero siempre que sea posible y apropiado. Un matiz que sin duda dará lugar a distintas interpretaciones que permitan saltarse la regla general.
  • Se mantienen los acuerdos exclusivos de explotación de los datos siempre que sean por el bien del interés público. Lo que en la práctica supone la posibilidad de perpetuar estos acuerdos.

En cualquier caso, también existen puntos muy positivos, como la garantía de que los documentos afectados por las libertad de información deben ser no únicamente accesibles, sino también reutilizables, las mejoras sustanciales en los mecanismos de reclamación para garantizar su independencia, la promoción de licencias únicas, automatizables y estándar para todos los organismos dentro de un mismo estado miembro o la ampliación de la directiva al ámbito cultural.

Por tanto, y aunque tengamos todavía un par de años de transposición por delante una vez aprobada por el Parlamento, en general la Directiva supone un nuevo avance del Open Data en la Agenda Digital Europea, y por tanto bienvenida sea. Estaremos pendientes también de cómo se lleva a cabo la transposición de la Directiva en el caso de España y el impacto que tendrá sobre la actual Ley de Reutilización del Sector Público.

Comunidades Open Data en España

Un signo distintivo de la madurez que están alcanzando alguna de las iniciativas Open Data en nuestro país es la proliferación de varias comunidades Open Data que nacen con el objetivo de promover el interés ciudadano por los datos abiertos y su reutilización como fuente de creación de valor social y económica, lo que hace que sean un factor determinante para el éxito de cualquier iniciativa.

OpenData Sevilla

Pionera en España como grupo Open Data organizado, se inició de forma espontánea y casi en paralelo al nacimiento de la iniciativa Open Data de la Junta de Andalucía. Formado por un grupo de gente con muchas ganas de hacer cosas como demuestra la organización del I Encuentro Opendata Sevilla celebrado a su nacimiento en Noviembre del 2011 y la gran variedad de actividades de difusión y proyectos ciudadanos en los que han participado en su escaso año de vida.

Open Data SevillaEn la actualidad se encuentran plenamente inmersos en la organización de las II Jornadas Gobierno Abierto y Opendata Sevilla, a celebrar el próximo viernes y sábado 23 y 24 de Noviembre con un programa muy interesante que lo colocan entre los mejores eventos de nuestro país y que aplica una fórmula a imitar, compaginando teoría y práctica, y demostrando que para hacer cosas útiles lo más importante es tener ganas e interés.

Datos.gob.es

Plataforma que da soporte a la iniciativa de Reutilización de la Información del Sector Público de carácter nacional y el Catálogo de Información Pública de la Administración General del Estado.datos.gob.es Reutiliza la Información PúblicaDesde el sitio web y el canal de Twitter asociado se proporciona información general, materiales formativos y noticias de actualidad sobre la reutilización de la información del sector público, ofreciendo recursos prácticos, informativos y divulgativos de utilidad para el desarrollo de productos y servicios de alto valor social y económico. A todo esto hay que sumar el ya tradicional Encuentro Aporta, que se ha convertido ya en la cita anual de referencia para las iniciativas Open Data en España.

Además, esta iniciativa se encarga también de dar soporte a los organismos de la AGE y ayudarles a llevar a cabo sus estrategias de reutilización, además de brindarles un punto de encuentro abierto a la colaboración y participación y un servicio que recoge las sugerencias de mejora aportadas por todos los actores implicados.

Comunidad Open Data y RISP en GNOSS

Comunidad de Trabajo Open Data en España en la que se discuten temas relacionados con la apertura de datos de la administración pública y sobre su reutilización. Un grupo abierto a la participación online de cualquiera que tenga interés en la materia, coordinado por la Oficina Española del W3C y con el apoyo de varias de las iniciativas RISP actualmente en marcha en España.

Open Data y RISPEste grupo funciona como un foro de intercambio de opiniones y aprovechamiento de sinergias entre los distintos publicadores de información, con el objetivo de intentar optimizar la inversión de recursos mediante la colaboración. Entre sus actuaciones destaca la participación en la elaboración del decálogo Open Data.

OKF España

Uno de los grupos locales de la Open Knowledge Foundation que están emergiendo y que actualmente se encuentra en proceso de formación, aspirando a convertirse en capítulo oficial de la organización líder a nivel mundial en difusión del Open Data y el Open Knowledge en general.

OKFN Local: EspañaPese a que se encuentra todavía en una etapa temprana de constitución, entre las áreas de trabajo previstas se encuentran algunas tan diversas como el Gobierno Abierto, las Ciencias Abiertas, el Periodismo de Datos o las Ciudades Inteligentes y el Internet de las Cosas, así como la organización de eventos a nivel nacional, la traducción de guías y documentos al español y la colaboración con otras iniciativas a nivel mundial.

Catalunya Dades

Un grupo que engloba a los distintos actores implicados en la iniciativa Open Data de Cataluña: administraciones, universidades, empresas, desarrolladores y distintos sectores profesionales relacionados con la comunicación, la tecnología o el conocimiento abierto.

Catalunya DadesEl objetivo que persigue es la participación de la sociedad en los procesos de generación de valor que surjan a partir del conocimiento proporcionado por los Datos Abiertos. Entre sus próximas actuaciones se encuentra la formación en Open Data.

Aragón

Aún cuando la iniciativa Open Data de Aragón se encuentra todavía en estado de desarrollo, ya cuentan con algunos primeros pasos muy significativos e inteligentemente orientados.

Si tuviésemos que destacar un aspecto que distinga ya desde un principio a esta iniciativa es la búsqueda de colaboración y formación de comunidad junto a las empresas y los ciudadanos desde los comienzos como ayuda para la definición de la propia estrategia a seguir.

¿Quién quiere ser el último?

Si bien es cierto que todavía queda mucho camino por recorrer para alcanzar la madurez del Open Data en este país, el crecimiento y la mejora de la comunidad entorno al Open Data es una de las vías claramente necesarias. Ahora tendremos que ver si esta proliferación de comunidades será capaz de dar lugar a una colaboración más efectiva y abierta que beneficie al conjunto de iniciativas o a una división de esfuerzos y confrontación de intereses que las penalice en contra de los propios principios que deberían perseguir.

Muy pocos años atrás la duda era saber quién sería el último en sumarse a las iniciativas Open Data en nuestro país, en el punto en el que nos encontramos actualmente parece que la pregunta es quién será el último en contar con una comunidad que sostenga y le de sentido a esa iniciativa Open Data en marcha.

2013, el año de los emprendedores Open Data

Este artículo fue publicado primero en Gijón Open Data Lab.

En los últimos tiempos hemos vivido una explosión de las iniciativas Open Data en los Gobiernos, tanto a nivel nacional como regional o local. Esta proliferación de iniciativas ha dado lugar a que hayamos pasado, en tan sólo tres años, de las decenas de conjuntos de datos inicialmente publicados a más de un millón de conjuntos disponibles en la actualidad, procedentes de cientos de catálogos a lo largo del mundo.

Mujer emprendedora en la pizarra

Sin embargo, el número de aplicaciones y servicios disponibles que explotan esos datos no ha crecido de forma proporcional, por lo que en muchos casos los beneficios del Open Data no están llegando finalmente a los ciudadanos debido sobre todo a las potenciales barreras técnicas, sociales y económicas existentes en algunos casos, como por ejemplo:

  • Disponibilidad de datos de alto valor.
  • Calidad y granularidad de los datos.
  • Barreras administrativas e incertidumbre legal.
  • Falta de una infraestructura sostenible para la explotación de los datos.
  • Ausencia de modelos de negocio.
  • Ajuste entre oferta y demanda de datos.

Con un volumen de negocio en torno a 500 millones de euros en España y un potencial de 200 billones de euros en toda Europa, el Open Data promete unos beneficios económicos que, añadidos a los sociales, evidencian una oportunidad que no debemos dejar escapar. Pero para poder beneficiarnos de ese desarrollo social y económico será necesario superar primero todos los obstáculos actualmente presentes.

Con ese objetivo en mente nace el Open Data Lab Gijón, que ofrecerá un entorno donde los emprendedores puedan llevar a cabo sus proyectos facilitándoles el acceso a los datos de calidad que necesitan, garantizando las infraestructuras y tecnologías necesarias para la sostenibilidad del proyecto y asesorándoles respecto al modelo de negocio a seguir.

Todo ello en el marco urbano de la ciudad de Gijón, lo que proporciona además una fuente de datos de alto interés y gran cercanía para los ciudadanos colaborando también así a construir las nuevas ciudades del siglo XXI en la línea marcada por las Smart Cities.

Avances de la Comisión Europea en materia de Open Data y RISP

Este artículo fue publicado primero en inglés.

Tal y como se viene afirmando últimamente, los datos son el nuevo combustible que alimenta la era digital. Si tenemos en cuenta el amplio rango de oportunidades que el Open Data puede proporcionarnos, no es ninguna sorpresa que dentro de los planes de la Comisión Europea esté el continuar revolucionando la forma en la que las autoridades públicas comparten sus datos. A continuación se muestra una visión general de cuáles son las acciones llevadas a cabo por la CE hasta el momento en materia de Open Data e Información del sector público, así como una revisión de las acciones futuras más inmediatas.Logo European Commission

Un hito de referencia: Workshop de Datos en la Asamblea de la Agenda Digital 2011

La CE organizó una primera Asamblea de la Agenda Digital en Junio de 2011 para tratar los avances en relación a los objetivos de la Agenda Digital para Europa. Con ese propósito se organizaron una serie de dos sesiones plenarias y 24 talleres temáticos, uno de los cuales estuvo dedicado al Open data y la reutilización de la información en el Sector Público (RISP), donde distintos actores implicados en la materia se dieron cita para colaborar con la Comisión en el desarrollo de su estrategia Open Data para la Unión Europea.

Khalil Rouhana (Director General de Sociedad de la Información de la CE) realizó varios anuncios clave en relación a las políticas Open Data en la UE que analizaremos en las siguientes secciones.

El papel de los portales Open Data Europeos

Los portales Open Data están destinados a ser una referencia clave en la infrastructura digital que facilite el acceso y reutilización de la Información del Sector Público y son varios los estados miembro que están desarrollando portales Open Data a todos los niveles. Dado que la cantidad de datos publicados hasta el momento es relativamente limitada en comparación con los disponibles, la CE tiene dentro de sus planes la publicación de dos nuevos portales Open Data que faciliten el acceso a datos Europeos:

Captura de pantalla de data.gov.eu

  •  El portal Open Data de la Comisión Europea data.gov.eu, pensado para facilitar la localización de los datos de la propia Comisión y otras instituciones Europeas. El portal, actualmente en desarrollo, estará disponible para el público a lo largo del 2012.
  • Portal Open Data Pan-Europeo, que facilite la localización y reutilización de los datos de administraciones nacionales, regionales y locales a lo largo de Europa. Un prototipo estará disponible en el 2013.

Revisión de la directiva de reutilización de la Información del Sector Público

Originaria de Noviembre de 2003, y actualmente traspuesta por completo a todos los estados miembros, la Directiva original proporcionaba una harmonización mínima de reglas y procedimientos a lo largo de la UE para facilitar la reutilización de la Información del Sector Público a través de las fronteras. En diciembre de 2011 se presentó una propuesta para la revisión de la Directiva para mejorar la apertura del mercado de servicios sobre la Información del Sector Público a través de las siguientes medidas:

  • Incluir nuevos participantes en el ámbito de aplicación de la Directiva, como por ejemplo bibliotecas, museos y archivos.
  • Determinar límites en las tasas que se establezcan como costes márginales por parte de las autoridades públicas.
  • Introducir medidas de seguimiento independientes en los Estados Miembros.
  • Desarrollar estándares para formatos legibles por máquinas que puedan ser utilizados por las autoridades públicas.

Otros pasos previos significativos

El primer taller sobre Open Data en la Asamblea de la Agenda Digital supuso sin duda un antés y un después, tanto en las políticas Open Data y de reutilización en la UE como en la forma en que la CE comunica esas políticas e interactua con los distintos agentes implicados.

Sin embargo, varias fueron también las medidas adoptadas por la CE en materia de Open Data y RISP con anterioridad a este primer talle, como por ejemplo:

Diciembre 2011: El Comunicado sobre Open Data

Como continuación del primer taller de la Agenda Digital, la Comisión adoptó un Comunicado oficial sobre Open Data a través del cual se proponen una serie de acciones para cumplir con los objetivos previamente anunciados:

  • Crear un portal para la información de la Comisión que se extienda posteriormente también a otras instituciones y agencias de la UE.
  • Trabajar en conjunto con los Estados Miembros sobre los formatos de datos y la interoperabilidad de los distintos sitios.
  • Crear un portal Pan-Europeo que enlace información de distintas instituciones de los Estados Miembro.

Segundo taller sobre Datos en la Asamblea de la Agenda Digital 2012

En Junio de 2012, la Asamblea de la Agenda Digital acogió una nueva edición del taller de Datos en la que se dio un nuevo repaso a la hoja de ruta de la EC en materia de Open Data y RISP:

También es destacable la apuesta global Europea en materia de tratamiento de datos, Open Data y Open Access, no solo solo mediante políticas y medidas regulatorias, sino también a través de investigación, innovación y la implementación de pilotos y portales financiados mediante los múltiples programas de I+D+I FP7 y CIP-ICT-PSP 2011-13, que tendrán su continuación con el nuevo Programa Horizon 2020.

Horizon 2020 logoAlgunas de las cuestiones que destacan de entre las tratadas en este nuevo taller fueron:

Licencia de Datos Europea

Existe una necesidad real de estudiar los requisitos para una Licencia de Datos Europea, dado que será un elemento necesario a la hora de facilitar el acceso y la reutilización de los datos a través de las fronteras Europeas. Varias son las cuestiones que hay que resolver al respecto: ¿Sirve alguna de las licencias ya existentes o necesitaríamos una nueva? En caso de necesitar una nueva licencia, ¿hay alguna opción obvia a seguir o se necesitaría algo completamente nuevo?

Publicación de Datos Clave

Dado que los Estados Miembros de Europa cuentan ya con una enorme cantidad de datos valiosos, una tarea prioritaria sería la identificación y difusión abierta de Datos clave de referencia. Algunos de esos datos ya están siendo publicados de forma abierta por ciertos Estados Miembro, pero son todavía demasiados los que permanecen cerrados bajo extrañas reglas de reutilización o modelos de recuperación de costes insostenibles.

Próximos pasos

Además de todas las actuaciones en marcha anteriormente mencionadas, y según lo anunciado por la Vice Presidenta de la Comisión Neelie Kroes, la CE tienen en mente continuar con el desarrollo de su estrategia Europea para la publicación y reutilización de los datos del sector público en las instituciones Europeas y los Estados Miembros. Algunos elementos destacables dentro de los próximos pasos serían los siguientes:

Servicios para la publicación, acceso y reutilización de los Datos Públicos en la UE

Están planificados una serie de servicios orientados a dar soporte en la publicación de Datos por parte de agentes públicos de la EU en cualquier nivel. Estos servicios incluirán:

  • Servicios relacionados con la preparación, transformación y publicación de los datos, con el compromiso de publicar al menos 15.000 nuevos conjuntos de datos en formatos legibles por la máquinas – incluyendo tecnologías Linked Open Data – y que procedan de todos los Estados Miembro de la UE.
  • Formación a trabajadores públicos en las áreas de Open Data, y en particular para favorecer la adopción de tecnologías Linked Open Data por parte de las instituciones públicas de la Unión Europea.
  • Servicios de asesoría y consultoría técnica en materia de Open Data en general, y particularmente en cuanto a tecnologías Linked Open Data se refiere.

La Incubadora de Reutilización del Open Data

Los distintos instrumentos financieros establecidos continuarán dando soporte a distintos desarrollos Open Data. Cabe destacar el Programa de Trabajao FP7-ICT 2013 que ayudará a las pequeñas y medianas empresas (PYMEs) en el desarrollo de aplicaciones innovadoras para la gestión de contenidos digitales, y particularmente en la reutilización de Open Data a través de la Incubadora Open Data. El objetivo de la Incubadora será establecer un entorno adecuado para:

  • Sondear al público en general en búsqueda de ideas de reutilización del Open Data y llevar a cabo una campaña de Reutilización de la Información Open Data a nivel Europeo.
  • Gestionar convocatorias regulares dirigidas a PYMES en busca de mini-proyectos que puedan ser financiados y llevados a cabo en un periodo de entre 6 y 12 meses.
  • Crear una infraestructura donde las propuestas ganadoras puedan encontrar versiones corregidas y actualizadas de los datos que necesiten para crear sus servicios.
  • Establecer mecanismos para la conexión entre la oferta y la demanda, poniéndose en contacto a los agentes públicos Europeos y ayudándoles a conseguir una publicación eficiente y sostenible de la información.

Armonización de iniciativas Open Data

Como respuesta al reciente clamor por la armonización de iniciativas Open Data, la Unión Europea está financiando proyectos como “Armonización del Open Data en el área del Mediterráneo mediante un mejor acceso y reutilización de la Información del Sector Público – Homer”, cuyo objetivo principal es establecer una estrategia efectiva capaz de armonizar las políticas y portales Open Data a lo largo del área Mediterránea, dando soporte tanto a Gobiernos regionales como locales.Homer Logo

Nuevas vías de crecimiento

La búsqueda de nuevas vías de crecimiento que exploten las posibilidades del Open Data alrededor de una temática específica es tan importante a la hora de avanzar en la materia como los esfuerzos políticos, estructurales y educativos. Algunos de las temáticas Open Data que se están explorando actualmente a nivel de la Comisión Europea son:

  • Datos Culturales: La iniciativa de bibliotecas digitales de la UE pretende hacer que todos los recursos culturales de Europa sean accesibles por todo el mundo, preservándolos para las generaciones futuras. En este área cabe destacar la reciente adopción de la licencia CC0 por parte de Europeana, que supone un cambio importante en el acceso al Open Data que sienta un precedente internacional en el distanciamiento del mundo de los datos cerrados y controlados.

Europeana

  • Smart Cities: Uno de los mayores retos a los que se enfrenta la UE es cómo diseñar y adaptar las ciudades hacia entornos más inteligentes y sostenibles. Las tecnologías urbanas intelligentes suponen una mejora importante a la hora de afrontar los retos urbanos gracias a que involucran a los distintos sectores implicados, dando lugar a soluciones adaptables e interoperables y creando una vía para un uso transparente y abierto de los datos.
  • Open Science: La EC ya ha realizado un primer esbozo de las medidas para mejorar el acceso a la información científica producida en Europa. Un acceso más amplio y rápido a las publicaciones y datos científicos financiados con dinero público hará que sea más fácil aprovechar los resultados por parte de investigadores y empresas, mejorando sustancialmente la capacidad de innovación Europea y dando un acceso más rápido a los beneficios de los descubrimientos científcos. La Comisión hará que el acceso abierto a publicaciones científicas sea un principio general de Horizon 2020, el programa de Investigación e Innovación Europeo para el periodo 2014-2020.

Networking, concienciación y difusión

Tal y como se extrae de las conclusiones en materia Open Data de la última Asamblea de la Agenda Digital,  las actividades de networking, concienciación y difusión son elementos clave para el éxito de una política Open Data y RISP en la EU. De forma complementaria a las acciones legislativas, la Comisión también da soporte a acciones de concienciación difusión y networking como por ejemplo:

  • El Public Sector Information Group, un grupo de expertos en RISP que incluye representantes de 27 Estados Miembro y ha sido convocado por la CE para el intercambio de buenas prácticas e iniciativas que den soporte al RISP, así como proponer soluciones a los retos pendientes, tales como tasas, acuerdos de exclusividad o indicadores de desarrollo RISP.
  • LAPSI, la Red Temática Europea sobre Aspectos Legales de la Información del Sector Público. Principal punto de referencia Europeo en cuanto al análisis de políticas de alto nivel y acciones estratégicas sobre cualquier cuestión legal relacionada con el acceso y la reutilización de la Información del Sector Público en el ámbito digital.
  • El European Data Forum, reunido por primera vez en Copenague en Junio de 2012 y próximamente en Dublín (Abril 2013). Es un foro en el que los agentes de negocio –  incluyendo un gran número de PYMES – investigadores y otros agentes implicados pueden reunirse para discutir el estado de la economía del dato.

La Plataforma Europea de la Información del Sector Público

La EPSI Platform es el nodo central Europeo en cuanto a Reutilización de la Información en el Sector Público (RISP) y su objetivo es la promoción de un mercado RISP dinámico a lo largo de la UE. La Plataforma proporciona un punto de reunión donde los diferentes agentes implicados pueden obtener toda la información relevante acerca de los desarrollos RISP en la UE, así como buenas prácticas destacadas, cuestiones legales y ejemplos de productos y servicios RISP.

EPSI PlatformLa plataforma publica noticias sobre desarrollos RISP Europeos y casos legales acerca de la reutilización, así como buenas prácticas y ejemplos de nuevos productos y servicios que dan cobertura a los principales mercados RISP. Desde la plataforma se hace un seguimiento continuo de los principales desarrollos en políticas Open Data, Government Data y RISP y se elaboran informes sobre distintas iniciativas y proyectos, tanto a nivel Europeo como en el resto del mundo.

The European Commission steps forward on Open Data and PSI re-use

As so often repeated these days, data is the new fuel for the digital age. Considering the wide spectrum of opportunities Open Data may bring, it is no surprise that the EC plans how to keep shaking up the way public authorities share data. The following lines aim to be an overview of the EC developments so far on Open Data and Public Sector Information, as well as a review of future planned actions.

Logo European Commission

A Landmark Event: Data Workshop at the Digital Agenda Assembly 2011

The EC organized the first Digital Agenda Assembly in June 2011 to discuss advances with regards to the Digital Agenda objectives for Europe. With that aim, twenty-four thematic workshops and two plenary sessions were conducted. One of those events was the Open data and Re-use of Public Sector Information workshop, where different types of stakeholders congregated to collaborate with the Commission on developing its strategy for Open Data in the EU.

Khalil Rouhana (DG Information Society and Media Content & Cognitive Systems of the European Commission) made several key announcements in relation to Open Data policies in the EU during that workshop. We will focus briefly on these in the forthcoming sections.

The role of European Open Data portals

Open Data portals are aimed to be a key referral of the digital infrastructure bound for facilitating access to and re-use of Public Sector Information. Open Data portals have been -and are being- created around many EU Member States at all governmental levels. Given that the quantity of data published so far is relatively limited as compared to that potentially available for publication, the EC plans to publish two new central Open Data portals to facilitate access to European Open Data:

data.gov.eu screenshoot

  • The European Commission Open Data portal data.gov.eu, a portal easing the search for Commission data, as well as other EU institutions, bodies and agencies to citizens and industry. The portal, currently under developement, is expected to be released soon in 2012.
  • Pan-European Open Data portal, to make data from EU, national, regional and local administrations more easily available and re-usable. A prototype is expected to be released in 2013.

Review of the Directive on the Re-use of Public Sector Information

First adopted on November 17, 2003 and by now completely transposed to all member States, this original PSI Directive provided a minimal harmonisation of rules and procedures across the EU in order to facilitate cross-border re-use of the PSI. A proposal for a revision of the Directive, which is currently being discussed by the Union legislator, was presented in December 2011 to further open up the market for services based on PSI by:

  • Including new bodies in the scope of application of the Directive such as libraries, museums and archives.
  • Determining limits on the fees that can be charged by the public authorities at marginal costs.
  • Introducing independent oversight re-use rules in the Member States.
  • Making standard machine-readable formats for information held by public authorities.

Other Meaningful Previous Steps

That first Open Data and PSI workshop was a landmark event both in Open Data and PSI policies in the EU as well as in the way that the EC communicates these policies and interacts with the different stakeholders. Nevertheless, several steps forward were also made by the EC on the Open Data and PSI matters before this first Digital Agenda Workshop, such as:

December 2011: The Communication on Open Data

Following the first Digital Agenda workshop, the Commission adopted a Communication on Open Data by December 2011. In this Communication, the Commission proposes several actions to accomplish the objectives previously announced in the aforementioned DAE workshop:

  • To create a portal site for Commission-held information aiming at an expansion to other EU institutions, bodies and agencies at a later stage.
  • To work with the Member States on data formats and interoperability between existing sites.
  • To create a Pan-European umbrella site linking information held by EU institutions, bodies and agencies and by Member States.

First Update: New Data Workshop at the Digital Agenda Assembly 2012

In June 2012, the Digital Agenda Assembly 2012 housed a new Data Workshop where the European Commission Open Data and PSI roadmap was presented again, mainly:

It is also remarkable to recall the European overall bet for data handling, Open Data and Open Access, not only by Open Data policies and a regulatory strand (PSI Directive), but also by means of research, innovation and ICT deployment pilots and portals implemented through financial support instruments such as the FP7 and CIP-ICT-PSP 2011-13 R&D&I multiple programmes, that are currently almost gone but will have continuity with the new Horizon 2020 programme.

Horizon 2020 logoSome of the questions that lead this Workshop where:

European Data license

There is a strong need to investigate requirements for an European Data License, given that if we want to encourage use and reuse of data across European borders, there may be the need for a single cross-border license. Several questions then arise: Will one of the existing licenses do the job, or do we need a new one? If we do need a license, is there an obvious choice, or is something new required?

Release of Core Data

A first-priority task will be to identify and evangelise Open release of Core Reference Data, given that European Member States have already huge quantities of valuable data. Some of this data is now becoming freely available in certain Member States, but too much of it remains locked up behind odd rules and unsustainable cost-recovery models. It is also difficult to compare data between Member States.

Future Steps

In addition to all the work in progress that has been previously mentioned, and as announced by the Vice President of the Commission Mme Neelie Kroes, the EC also plans to continue developing their European strategy for the publication and reuse of public sector data from European institutions and the Member States, as established with Commission’s commitment to turn public data into business included in action 3 of the Digital Agenda for Europe Communication.

Some highlights of the future planned distributed actions include:

Services for publication, access and reuse of EU Open Public Data

A series of services will be purchased aimed at supporting the EU-wide availability of PSI and Open Data from public bodies at different governmental levels. These services will include:

  • The provision of data preparation, transformation and publication services, with a commitment to publish at least 15.000 new data sets from all EU Member States in machine readable formats, including Linked Open Data technologies.
  • Training services in the area of Open Data, in particular to favour the uptake of Linked Open Data technologies by public bodies within the European Union.
  • Provision of an IT advisory and consultancy service in the area of Open Data, and in particular on Linked Open Data technologies, including specific software development tasks.

The Open Data Reuse Incubator

Financial support instruments will continue to support several Open Data developments, notably, the FP7-ICT Work programme 2013 will help Small and Medium Enterprises (SMEs) to develop innovative applications in structured and unstructured digital content management and, particularly, in the reuse of open data through an Open Data Incubator.

This Incubator will establish an environment to:

  • Solicit open data reuse ideas from the general public and conduct a European wide open data reuse information campaign.
  • Publish and manage regularly scheduled calls for SMEs to submit mini-proposals to be funded for a period between six and twelve months.
  • Create a computing infrastructure where the winning mini-proposals will find accurate and up-to-date versions of the data they need for their services.
  • Establish a mechanism for connecting open data demand and supply by systematically contacting European public bodies for their open data and assisting them in the efficient and sustainable publication of such data.

Harmonization of Open Data initiatives

In response to the increasing clamour in search of harmonising Open Data initiatives, the European Union is financing projects such as “Harmonising Open Data in the Mediterranean through better access and Reuse of Public Sector Information – Homer”, which aims mainly to set up an effective strategy able to harmonise Open data policy and portals across the Mediterranean area, supporting regional and local governments.Homer Logo

New paths for growth

As important as political, structural and educational efforts, uncovering new paths for growth, in which Open Data possibilities about a given topic are explored, is also critical in order for Open Data and PSI re-use to advance. Some Open Data and PSI topics that are currently being explored by the European Commission are:

  • Cultural Data: The EU’s digital libraries initiative sets out to make all Europe’s cultural and scientific resources accessible to all, and preserve them for future generations. In this area it should be pointed out that recent Europeana’s move to CC0 is a step change in open data access, given that releasing data from across EU country sets an important new international precedent and a decisive move away from the world of closed and controlled data.

Europeana

  • Smart Cities: One of the greatest challenges facing the EU is how best to design and adapt cities into smart intelligent and sustainable environments. Smart urban technologies can make a major contribution in tackling urban challenges by breaking down boundaries between the sectors involved, ensuring adaptable and interoperable solutions and finding a way to use data transparently and openly, without breaching privacy.
  • Open Science: The European Commission outlined measures to improve access to scientific information produced in Europe. Broader and more rapid access to scientific papers and data will make it easier for researchers and businesses to build on the findings of public-funded research, boosting Europe’s innovation capacity and give citizens quicker access to the benefits of scientific discoveries. The Commission will make open access to scientific publications a general principle of Horizon 2020, the EU’s Research & Innovation funding programme for 2014-2020.

Networking, awareness raising and Dissemination

As seen from the last Digital Agenda Assembly Open Data conclusions above, networking, awareness raising, dissemination and outreach activities are considered key elements for the Open Data and PSI re-use market success at the EU. Complementary to legislation, the Commission supports deployment, support, awareness raising, and networking actions such as:

  • The Public Sector Information Group, an PSI expert group which includes representatives of 27 Member States that was set up by the EC to exchange good practices and initiatives supporting public sector information re-use and discuss and recommend solutions to challenges such as charging, exclusive agreements, development indicators for measuring public sector information and technology.
  • LAPSI, The European Thematic Network on Legal Aspects of Public Sector Information to become the main European point of reference for high-level policy discussions and strategic action on all legal issues related to the access and the re-use of the PSI, namely in the digital environment.
  • The European Data Forum, with a first meeting in Copenhagen (June 2012), and the next scheduled for Dublin in April 2013. It is a forum in which business actors, including a large number of SMEs, researchers and other stakeholders can come together to work out what a data economy really looks like.

The European Public Sector Information Platform

The EPSI Platform is Europe’s One-Stop Shop on Public Sector Information (PSI) Re-use which objective is the promotion of a dynamic PSI re-use market across the EU, a place where the different stakeholders can get all the relevant information about the European and international PSI re-use developments, emerging good practices, legislation, legal cases, examples of PSI re-use products and services, etc.

EPSI PlatformThe Platform provides news on European PSI developments, legal cases around re-use, good practices and examples of new products and services, covering the main PSI re-use markets. It follows and reports on a daily basis the developments of the PSI re-use/open-data/government-data policies, initiatives and/or projects in the EU and elsewhere.

Condiciones mínimas para la Estrategia RISP de la Agenda Digital de España

Dada la importancia de la Agenda Digital para España como documento que dirige la estrategia nacional en materia de Tecnologías de la Información y la Comunicación para los próximos años, no quiero dejar pasar la oportunidad de aportar mis comentarios sobre una de las medidas Open Data que se contemplan, en concreto la que propone la elaboración de una Estrategia y un Plan de acción de reutilización de la información del sector público.

Condiciones mínimas para la elaboración de una estrategia RISP

Mis sugerencias para la elaboracción de dicha estrategia y el consiguiente plan de acción son tan simples como seguir las buenas prácticas que permiten construir los pilares de una iniciativa sólida sobre una serie de condiciones mínimas que garanticen la viabilidad:

  • Contemplar explícitamente la transparencia, eficiencia, participación y el desarrollo económico como objetivos.
  • Fijar un calendario público claro y con objetivos concretos y medibles, teniendo en cuenta tanto los resultados a corto plazo como la sostenibilidad de la iniciativa a largo plazo.
  • Dotar económicamente a la iniciativa, de forma que se garantice su sostenibilidad y la financiación de las acciones previstas.
  • Crear una autoridad central que sirva como guía de los procesos previstos,  promueva las actuaciones necesarias para su ejecución y vele por la obtención de resultados.
  • Acometer la transición hacia una política en la que la publicación de toda la información disponible sea la opción por defecto, salvaguardando adecuadamente la información sensible.
  • Realizar un ejercicio previo de inventariado de la información existente y su descripción para poder planificar la publicación.
  • Incluir listados específicos con los conjuntos de datos que se deben publicar o, al menos, directrices detalladas para la selección de los datos.
  • Habilitar técnicamente la reutilización mediante la utilización de formatos abiertos, la harmonización de la información y de los estándares de publicación, la creación de identificadores únicos para los datos y un esquema de metadatos apropiado.
  • Mantener mecanismos de persistencia de los datos, incluyendo todo el ciclo de publicación, actualización, versionado y archivado, para que se pueda desarrollar un ecosistema capaz de explotar dichos datos.
  • Establecer procedimientos e infraestructuras de catalogación que permitan actualizar la información en tiempo real o con la periodicidad adecuada para cada caso concreto.
  • Proporcionar acceso abierto, completo y permanente a los conjuntos de datos en crudo (raw data) para garantizar el acceso a toda la información, sin detrimento de otros canales como APIs específicas que faciliten la reutilización.
  • Garantizar el acceso a los datos de forma gratuita, ilimitada y sin necesidad de justificación o identificación, eliminando cualquier restricción para la reutilización y estableciendo criterios claros y unificados en cuanto a las licencias aplicables.
  • Incluir el Open Data dentro del ciclo de contratación de la Administración, añadiendo requisitos de apertura y reutilización por defecto para cualquier sistema contratado y extendiendo dichos requisitos a los proveedores.
  • Evangelizar y formar en la publicación y uso de los datos, tanto de forma interna como externa a la Administración.
  • Potenciar sinergias contínuas entre la Administración y otros agentes externos como organizaciones no gubernamentales, instituciones académicas o grupos de expertos, con el objetivo de fomentar la participación pública y la colaboración.
  • Aplicar los principios de transparencia a la propia iniciativa, tanto en los mecanismos de participación y colaboración como con respecto a los resultados obtenidos.

Fomento de la reutilización de los datos en iniciativas Open Data

Durante el repaso realizado a las Pautas para el desarrollo de políticas Open Data de la Sunlight Foundation ya hemos revisado los aspectos relacionados con la planificación de la iniciativa,  aquellos relativos a la preparación de los datos, las implicaciones técnicas y los aspectos políticos y legales. Hoy para finalizar analizaremos aquellos aspectos que tienen que ver con las actividades cuyo objetivo es fomentar la reutilización de los datos.

Fomento de la reutilización

Otros de los aspectos importantes, y probablemente el que puede marcar la diferencia entre el éxito y el fracaso a la hora de llevar a cabo una iniciativa Open Data, es la realización de una campaña de promoción activa para fomentar la reutilización de los datos publicados.

Este es uno de los aspectos aún en fase de exploración para la mayoría de las iniciativas, y en los que menos se incide también por parte de la Sunlight Foundation, pero aún así nos dedican también algunas pautas básicas que se deberían tomar como objetivos mínimos al respecto.

Explorar y utilizar mecanismos de colaboración público-privada

El hecho de potenciar sinergias entre la Administración y otros entes externos como organizaciones no gubernamentales, instituciones academicas o grupos de expertos, permitirá un mejor desarrollo de la iniciativa al incluir otros elementos que pueden ayudar a fomentar la participación pública y mejorar y completar algunos aspectos débiles de las políticas.

Esta es una herramienta que deberá utilizarse con cuidado para tratar de evitar que dichos mecanismos de colaboración acaben degenerando en alianzas exclusivas que centralicen la explotación de los datos a través de un único proveedor o den lugar a cualquier otro tipo de ventaja competitiva para un agente específico del mercado.

LLAMAR A LA PARTICIPACIÓN PÚBLICA

Las políticas de Apertura de Datos tendrán repercusiones que afecten a toda la sociedad y por tanto podrían beneficiarse enormemente de la participación pública. Establecer distintos mecanismos de escucha y participación, ya sean formales o informales, ayudará sin duda alguna a mejorar sustancialmente la política de apertura de datos que se desarrolle.

Promocionar concursos y otros eventos de reutilización

Los concursos y otros eventos de reutilización similares han demostrado ser un medio efectivo para llamar la atención sobre los datos, generar interés y demostrar el potencial de los mismos, contribuyendo además a la generación de una comunidad activa en torno a los datos.

No obstante es necesario complementar estos eventos con otro tipo de actuaciones en las que se de cabida también a la participación de otros sectores menos técnicos y que permitan desarrollar productos y servicios más maduros que vayan más allá de una mera prueba de concepto.

Publicar datos y estadísticas de uso

Hacer públicas estadísticas detalladas de explotación y utilización debería ser obligatorio en cualquier iniciativa Open Data, tanto por la transparencia de la propia iniciativa como para facilitar una herramienta de análisis que permita optimizar la efectividad y realizar los ajustes necesarios.