Building the foundation for an Open Data Directory

This post was first published at the ePSI Platform and the Open Knowledge Foundation blog.

Open (Government) Data as it is understood nowadays can still be considered a new concept. It started to gain traction worldwide since the Obama memo in early 2009 and the launch of data.gov a few months later. Following successful leading examples of the US and UK governments we have seen Open Data flourishing all over the world over the last three years. More than two hundred Open Data catalogs have been identified so far.

But still, it’s not always clear how to deliver good solutions and many questions remain unanswered. In order to build sustainable Open Data initiatives in a varied range of countries a broader view to address challenges is needed. New and existing initiatives willbenefit from shared knowledge and will also produce a range of resources that should be published in a freely and open way for others to reuse.

As the Open Data movement is growing worldwide; the number of available resources is also increasing. The scarcity of only 3-4 years ago is ending but the resources are appearing in disparate places and formats, sometimes difficult to find and share. There is a pressing need to compile and document existing resources that are verified, trustworthy, comparable, and searchable.

The Open Data Directory

Upon discussions with many in the Open Data community, an initial analysis of their own project needs and preliminary research on existing public resources, the Web Foundation believes that the community at large would benefit from a central entry point to Open Data related resources at a neutral source, the Open Data Directory (ODD).

This ODD will help to produce clear evidence base of the benefits of Open Data holding a wide range of resources types such as: use cases, case studies, stories and anecdotes, methodologies, strategies, business cases, papers, reports, articles, blog posts, training materials, slide sets, software tools, applications andvisualisations. The directory will not focus on compiling a vast number of references, instead it will give priority to high-quality references endorsed by the Open Data community.

As a first step towards the ODD, we are making public the Use Cases and Requirements Draft in order to get comments from the wide community, not only on the content of the document itself but also on the overall idea of the ODD. We’ve published it as a Google Document with comments turned on. This is a tool for you, the Open Data community, so suggestions, feedback and comments are very welcome. The extended deadline for submitting comments is: April 29th, 2013.

La crisis pasa factura, pero el Open Data sigue avanzando en España

A lo largo de este año hemos visto algunos pasos atrás en cuanto al Open Data y la Reutilización de la Información en el Sector Público en nuestro país, por ejemplo el cierre de algunas iniciativas como Extremadura Reutiliza u Open Data Córdoba, aunque sin duda alguna el caso más sonado ha sido el anuncio de la Agencia Estatal de Meteorología (AEMET) respecto al cierre del servicio gratuito de acceso a ciertos datos mediante FTP, pasando en la actualidad a ser un servicio de pago, lo que ha dado lugar a una reacción unánime de rechazo por parte de la comunidad Open Data en España.

Estas noticias suponen claramente un paso atrás en las expectativas Open Data nacionales aunque, tal y como comenta Jorge Campanillas en su blog, la medida tomada por la AEMET es lícita y ajustada a la ley, pero desde luego discutible en cuanto a visión y oportunidad, ya que la imposición de tasas restringe claramente el acceso a los datos públicos, a la vez que resta eficacia y eficiencia en el acceso.

CrisisEs cierto que la gratuidad de la información, aún siendo algo plenamente recomendable, no está contemplada como uno de los principios básicos del Open Government Data, y que el Open Data cuesta tiempo y trabajo, y por tanto dinero, pero la cuestión en este caso es ¿por qué optar por ofrecer de forma abierta unos servicios de gran demanda y utilidad para luego pasar a un modelo de pago por acceso?.

A todas luces parece deberse a una mala estrategia que responde principalmente a motivos de sostenibilidad económica derivados de la complicada situación económica y social que estamos atravesando y que también puede haber afectado a las otras iniciativas que se han quedado por el camino. No obstante, dar prioridad a las cuentas a corto plazo y no pararse a pensar en la factura que eso pasará al desarrollo económico futuro no parece a priori una buena inversión.

El Open Data sigue adelante

A pesar de todo, y aunque el contexto actual esté afectando y puede hacer que surjan algunas dudas sobre la viabilidad de las iniciativas, todo parece indicar que el Open Data está aquí para quedarse, y que hay más motivos para el optimismo que para el pesimismo, como por ejemplo:

Y para seguir avanzando recordemos que el Open Data no es cuestión de publicar algunos datos en bruto y realizar un par de hackatones con ellos, ya que una iniciativa sostenible implica un viaje largo y sin atajos que se debe recorrer paso a paso sobre los cimientos sólidos que proporciona una estrategia coherente.

Comunidades Open Data en España

Un signo distintivo de la madurez que están alcanzando alguna de las iniciativas Open Data en nuestro país es la proliferación de varias comunidades Open Data que nacen con el objetivo de promover el interés ciudadano por los datos abiertos y su reutilización como fuente de creación de valor social y económica, lo que hace que sean un factor determinante para el éxito de cualquier iniciativa.

OpenData Sevilla

Pionera en España como grupo Open Data organizado, se inició de forma espontánea y casi en paralelo al nacimiento de la iniciativa Open Data de la Junta de Andalucía. Formado por un grupo de gente con muchas ganas de hacer cosas como demuestra la organización del I Encuentro Opendata Sevilla celebrado a su nacimiento en Noviembre del 2011 y la gran variedad de actividades de difusión y proyectos ciudadanos en los que han participado en su escaso año de vida.

Open Data SevillaEn la actualidad se encuentran plenamente inmersos en la organización de las II Jornadas Gobierno Abierto y Opendata Sevilla, a celebrar el próximo viernes y sábado 23 y 24 de Noviembre con un programa muy interesante que lo colocan entre los mejores eventos de nuestro país y que aplica una fórmula a imitar, compaginando teoría y práctica, y demostrando que para hacer cosas útiles lo más importante es tener ganas e interés.

Datos.gob.es

Plataforma que da soporte a la iniciativa de Reutilización de la Información del Sector Público de carácter nacional y el Catálogo de Información Pública de la Administración General del Estado.datos.gob.es Reutiliza la Información PúblicaDesde el sitio web y el canal de Twitter asociado se proporciona información general, materiales formativos y noticias de actualidad sobre la reutilización de la información del sector público, ofreciendo recursos prácticos, informativos y divulgativos de utilidad para el desarrollo de productos y servicios de alto valor social y económico. A todo esto hay que sumar el ya tradicional Encuentro Aporta, que se ha convertido ya en la cita anual de referencia para las iniciativas Open Data en España.

Además, esta iniciativa se encarga también de dar soporte a los organismos de la AGE y ayudarles a llevar a cabo sus estrategias de reutilización, además de brindarles un punto de encuentro abierto a la colaboración y participación y un servicio que recoge las sugerencias de mejora aportadas por todos los actores implicados.

Comunidad Open Data y RISP en GNOSS

Comunidad de Trabajo Open Data en España en la que se discuten temas relacionados con la apertura de datos de la administración pública y sobre su reutilización. Un grupo abierto a la participación online de cualquiera que tenga interés en la materia, coordinado por la Oficina Española del W3C y con el apoyo de varias de las iniciativas RISP actualmente en marcha en España.

Open Data y RISPEste grupo funciona como un foro de intercambio de opiniones y aprovechamiento de sinergias entre los distintos publicadores de información, con el objetivo de intentar optimizar la inversión de recursos mediante la colaboración. Entre sus actuaciones destaca la participación en la elaboración del decálogo Open Data.

OKF España

Uno de los grupos locales de la Open Knowledge Foundation que están emergiendo y que actualmente se encuentra en proceso de formación, aspirando a convertirse en capítulo oficial de la organización líder a nivel mundial en difusión del Open Data y el Open Knowledge en general.

OKFN Local: EspañaPese a que se encuentra todavía en una etapa temprana de constitución, entre las áreas de trabajo previstas se encuentran algunas tan diversas como el Gobierno Abierto, las Ciencias Abiertas, el Periodismo de Datos o las Ciudades Inteligentes y el Internet de las Cosas, así como la organización de eventos a nivel nacional, la traducción de guías y documentos al español y la colaboración con otras iniciativas a nivel mundial.

Catalunya Dades

Un grupo que engloba a los distintos actores implicados en la iniciativa Open Data de Cataluña: administraciones, universidades, empresas, desarrolladores y distintos sectores profesionales relacionados con la comunicación, la tecnología o el conocimiento abierto.

Catalunya DadesEl objetivo que persigue es la participación de la sociedad en los procesos de generación de valor que surjan a partir del conocimiento proporcionado por los Datos Abiertos. Entre sus próximas actuaciones se encuentra la formación en Open Data.

Aragón

Aún cuando la iniciativa Open Data de Aragón se encuentra todavía en estado de desarrollo, ya cuentan con algunos primeros pasos muy significativos e inteligentemente orientados.

Si tuviésemos que destacar un aspecto que distinga ya desde un principio a esta iniciativa es la búsqueda de colaboración y formación de comunidad junto a las empresas y los ciudadanos desde los comienzos como ayuda para la definición de la propia estrategia a seguir.

¿Quién quiere ser el último?

Si bien es cierto que todavía queda mucho camino por recorrer para alcanzar la madurez del Open Data en este país, el crecimiento y la mejora de la comunidad entorno al Open Data es una de las vías claramente necesarias. Ahora tendremos que ver si esta proliferación de comunidades será capaz de dar lugar a una colaboración más efectiva y abierta que beneficie al conjunto de iniciativas o a una división de esfuerzos y confrontación de intereses que las penalice en contra de los propios principios que deberían perseguir.

Muy pocos años atrás la duda era saber quién sería el último en sumarse a las iniciativas Open Data en nuestro país, en el punto en el que nos encontramos actualmente parece que la pregunta es quién será el último en contar con una comunidad que sostenga y le de sentido a esa iniciativa Open Data en marcha.

2013, el año de los emprendedores Open Data

Este artículo fue publicado primero en Gijón Open Data Lab.

En los últimos tiempos hemos vivido una explosión de las iniciativas Open Data en los Gobiernos, tanto a nivel nacional como regional o local. Esta proliferación de iniciativas ha dado lugar a que hayamos pasado, en tan sólo tres años, de las decenas de conjuntos de datos inicialmente publicados a más de un millón de conjuntos disponibles en la actualidad, procedentes de cientos de catálogos a lo largo del mundo.

Mujer emprendedora en la pizarra

Sin embargo, el número de aplicaciones y servicios disponibles que explotan esos datos no ha crecido de forma proporcional, por lo que en muchos casos los beneficios del Open Data no están llegando finalmente a los ciudadanos debido sobre todo a las potenciales barreras técnicas, sociales y económicas existentes en algunos casos, como por ejemplo:

  • Disponibilidad de datos de alto valor.
  • Calidad y granularidad de los datos.
  • Barreras administrativas e incertidumbre legal.
  • Falta de una infraestructura sostenible para la explotación de los datos.
  • Ausencia de modelos de negocio.
  • Ajuste entre oferta y demanda de datos.

Con un volumen de negocio en torno a 500 millones de euros en España y un potencial de 200 billones de euros en toda Europa, el Open Data promete unos beneficios económicos que, añadidos a los sociales, evidencian una oportunidad que no debemos dejar escapar. Pero para poder beneficiarnos de ese desarrollo social y económico será necesario superar primero todos los obstáculos actualmente presentes.

Con ese objetivo en mente nace el Open Data Lab Gijón, que ofrecerá un entorno donde los emprendedores puedan llevar a cabo sus proyectos facilitándoles el acceso a los datos de calidad que necesitan, garantizando las infraestructuras y tecnologías necesarias para la sostenibilidad del proyecto y asesorándoles respecto al modelo de negocio a seguir.

Todo ello en el marco urbano de la ciudad de Gijón, lo que proporciona además una fuente de datos de alto interés y gran cercanía para los ciudadanos colaborando también así a construir las nuevas ciudades del siglo XXI en la línea marcada por las Smart Cities.

The next OGD frontier: Low and middle income countries

This post was first published at the OKFN blog in collaboration with Aman Grewal from the World Wide Web Foundation.

Last year we witnessed an impressive expansion of Open Government Data initiatives all around the world. We can assert without any doubt that it was clearly the year when Open Government spread throughout the world.

However, if we look at the map of the Open Government Data initiatives worldwide, we immediately detect than almost all of these initiatives incubated around Western Europe and North America. There is a big gap in the map, especially with reference to the developing countries.

The Challenge

Given the very apparent benefits of Open Government Data programmes, it is important to consider the development of similar programmes all over the world, and particularly in low and middle-income countries. But first, we need to go one step back and ask ourselves how we analyse whether a given country is ready to engage and sustain an OGD programme, and how much we know from existing initiatives.

The World Wide Web Foundation and CTIC Foundation took the first steps in this direction by conducting an assessment of the feasibility and potential of an OGD program in two countries – Chile and Ghana.

The key questions were:

  • Is the country ready to engage in an OGD initiative?
  • If so, what support might they need?
  • If not, why not, and what lesson can we take away from this assessment?

But while we were trying to give answers to these questions, new important questions arose:

  • What pre-conditions exist?
  • How much of what we know from existing initiatives is applicable?
  • What are the indicators that will enable the definition of OGD readiness in a given country?

We decided to start by developing a new methodology for OGD readiness assessment, based on our experience and a previous study commissioned by the Transparency and Accountability Initiative and written by Becky Hogge from early 2010. For the assessment completion, we developed a questionnaire and conducted desk research and country visits to interview people and organisations that may be key to any future success.

The findings from the studies have enabled us to start a global debate that we aim to carry forward.

Chile use case

Chile has always been a prosperous country and has long played a leadership role in Latin America. Now, more than ever, it has a government capable of decisively delivering on its vision and related governance schemes.

In the case of Chile, the political momentum is clearly present, and there are perceived interests and needs. Governmental willingness to adopt an OGD initiative is very clear at the executive layer and extends to the middle layer. In addition, the first strategic steps towards OGD are being taken, and pioneering pilot initiatives on information openness in Public Administration have been implemented. There are also several reuse initiatives being carried out by groups of civil hackers.

Nevertheless, Chile needs to establish an institutional roadmap related to OGD, putting in place all the regulations that are needed for implementation and developing a common methodology for Open Data, selecting and adopting open standard formats for data to facilitate reuse.

A good start is the recent incorporation of OGD as one of the key objectives of Chile’s digital agenda, but they still need to improve the means, processes and channels used to disseminate information and centralize access to a single common point or nodal agency. Finally, a dialogue on information sharing between the administration, civil society and the private sector should also be initiated with the objective of increasing awareness of reuse initiatives promoted by enthusiastic civil society groups.

We came to the conclusion that Open Government Data initiatives in Chile should rely on the transparency community, a very active group that would strongly support any initiative taken in favour of information openness.

Ghana use case

In terms of democracy, Ghana is one of the top few countries in Africa. For the common citizen, there is no apparent lack of respect for the democratic set-up, though there seems to be a trust deficit with respect to the politicians, either in power or in the opposition.

The required regulatory framework for an Open Data strategy is not currently present in the law, but is a work in progress. The RTI Act has been discussed since 2000 and its approval is imminent. However it has taken many years of study and the current draft has provisions for a number of exceptions. This has created friction in its smooth passage resulting in a number of revisions and subsequent delay. The RTI Act cannot exist in isolation and requires a supporting legal framework of data privacy and intellectual property. This work is still in its early stages and further advances can be expected in the short or medium term only if the RTI Act sees the light of day.

Civil society organizations in Ghana are very active in highlighting these issues and have become more vocal ever since oil reserves were found on a substantially large scale. They believe that this is the right opportunity for OGD initiatives that will not only improve the perception of a clean government in the minds of ordinary citizens, but would also strengthen the overall notion of a strong and transparent democracy. It would give them the right set of legal and technical knowledge to avoid the “oil curse”, which they are keen to avoid at any cost.

The opportunity here is two-fold. The RTI Act may give the much-needed legal framework for civil servants that would enable them to answer the data requests in a defined process. Simultaneously technology and implementation support with respect to the open interoperability framework would provide a much needed standardization platform to the apex IT agency of the country, a critical area where they are already soliciting support from external agencies. Civil society organizations like the Population Council are already running initiatives in few African countries related to data (demographic in this case) reuse by third parties that can act as examples and guideposts for OGD initiatives.

The case of Ghana has its own set of challenges and the situation may not be ideal. In such a scenario the groundwork to bootstrap OGD initiatives would be tougher, but at the same time the potential global impact would also be significant.

As Tim Berners-Lee observed, “It has to start at the top, it has to start in the middle and it has to start at the bottom.”

Make your contribution

We are publishing the draft versions of both the reports. Our objective is to gather comments from the OGD community. We invite you to read the reports for Chile and Ghana and send in your comments atogd-comments@webfoundation.org before the end of March 2011.

Your comments will assist the growing OGD community in the developing world by providing new tools, best practices and support.