The new Open Government Partnership Open Data Working Group

Governments are increasingly creating new open data initiatives and they are the most popular Open Government Partnership commitment so far. Still, the potential of Open Data and its implications for governance are only starting to be articulated.

The mission of the OGP Open Data Working Group is to hold the promise of radically transforming the way government and societies work together to analyze and solve challenges; helping OGP governments implement their commitments and develop more ambitious and innovative action plans related to open data.

Open Government Partnership

More specifically, the new Open Data Working Group aims to:

  • Serve as a guiding voice on open data issues to help OGP governments implement their action plans and develop ambitious new commitments.
  • Increase awareness of open government data issues across the OGP.
  • Amplify and broaden the evidence base for open data reforms.
  • Gather and strengthen existing resources.
  • Engage with the broader global open data community.

Participation in the group is open to all OGP countries and civil society organizations working on open data issues. I was invited to participate on behalf of OpenKratio, a citizens’ group that promote Open Government and Open Data values within the society and the only Spanish representation in the group so far.

OpenKratio.org

The working group first convened on the side of the OGP Summit in London last October. Topics that were discussed during the meeting included:

  1. Open Data measurement – the need to better understand the impacts of open data.
  2. Capacity building – what’s yet to be done and were are the gaps.
  3. Data standards – how to cross-link between information silos to achieve greater impact.
  4. Developing and implementing stronger open data commitments – is there a need for a common set of principles?

There was also a formal launch in a public event as part of the really interesting OGP summit general agenda, which included several high-level participants from governments and civil society, such as Tim Berners-Lee (Founding Director of the Web Foundation; President and Co-Founder of the Open Data Institute) and Beth Noveck (Professor of The Gov Lab, New York University).

This panel explored the current reality of open data implementation, drawing upon early findings from the Open Data Barometer study, and how to move faster to close the gap between rhetoric and reality to unlock the real potential of open data.

The group is currently working on a more specific concept note that will drive the group work in the future on the basis of the feedback and input from the first meeting. Stay tuned for the next steps of the Group during the following months.

Building the foundation for an Open Data Directory

This post was first published at the ePSI Platform and the Open Knowledge Foundation blog.

Open (Government) Data as it is understood nowadays can still be considered a new concept. It started to gain traction worldwide since the Obama memo in early 2009 and the launch of data.gov a few months later. Following successful leading examples of the US and UK governments we have seen Open Data flourishing all over the world over the last three years. More than two hundred Open Data catalogs have been identified so far.

But still, it’s not always clear how to deliver good solutions and many questions remain unanswered. In order to build sustainable Open Data initiatives in a varied range of countries a broader view to address challenges is needed. New and existing initiatives willbenefit from shared knowledge and will also produce a range of resources that should be published in a freely and open way for others to reuse.

As the Open Data movement is growing worldwide; the number of available resources is also increasing. The scarcity of only 3-4 years ago is ending but the resources are appearing in disparate places and formats, sometimes difficult to find and share. There is a pressing need to compile and document existing resources that are verified, trustworthy, comparable, and searchable.

The Open Data Directory

Upon discussions with many in the Open Data community, an initial analysis of their own project needs and preliminary research on existing public resources, the Web Foundation believes that the community at large would benefit from a central entry point to Open Data related resources at a neutral source, the Open Data Directory (ODD).

This ODD will help to produce clear evidence base of the benefits of Open Data holding a wide range of resources types such as: use cases, case studies, stories and anecdotes, methodologies, strategies, business cases, papers, reports, articles, blog posts, training materials, slide sets, software tools, applications andvisualisations. The directory will not focus on compiling a vast number of references, instead it will give priority to high-quality references endorsed by the Open Data community.

As a first step towards the ODD, we are making public the Use Cases and Requirements Draft in order to get comments from the wide community, not only on the content of the document itself but also on the overall idea of the ODD. We’ve published it as a Google Document with comments turned on. This is a tool for you, the Open Data community, so suggestions, feedback and comments are very welcome. The extended deadline for submitting comments is: April 29th, 2013.

Cien años de evolución en la comunicación entre Gobierno y ciudadanos

Un 15 de marzo de 1913, hace ya 100 años, el presidente Woodrow Wilson celebró la primera rueda de prensa en la Casa Blanca, todo un hito en la historia de la democracia y de la comunicación entre el gobierno y los ciudadanos.

Presidentes de los Estados Unidos

Varias décadas después en 1955, Eisenhower permitió que las cámaras grabaran por primera vez una rueda de prensa presidencial.

Fue Kennedy en 1961 quien dio un nuevo paso adelante al ofrecer la primera rueda de prensa de un presidente en directo por la televisión, cambiando para siempre las reglas de la comunicación entre el Gobierno y los ciudadanos. El directo tuvo dos efectos inmediatos, los presidentes tenían que prepararse mucho más ante una rueda de prensa, pero también hizo posible que se pudieran comunicarse de una forma más directa con los ciudadanos.

Hoy en día las nuevas tecnologías están volviendo a revolucionar la forma en la que los políticos se comunican con los ciudadanos, lo que nos deja una pregunta muy interesante:

¿Cómo será la comunicación entre los gobiernos y los ciudadanos en el futuro?

Quizás llegue el día en el que la transparencia y la rendición de cuentas no se articulen a través de actos puntuales, sino que la apertura se convertiría en el estado natural de los gobiernos. Afortunadamente no habrá que esperar otros cien años para la próxima revolución en la comunicación entre gobierno y ciudadanos, esa revolución se llama Open Data, ya ha comenzado y nuevamente parte de los Estados Unidos.

El 21 de Enero de 2009, y en su primer día de mandato, el presidente Obama firmó un memorando sobre Transparencia y Gobierno Abierto, dando lugar a una nueva era de Gobierno Abierto y Responsable dirigido a acercar el Gobierno a los ciudadanos.

En Septiembre de 2011 se publica la declaración de Gobierno Abierto y queda formalmente constituido el Open Government Partnership, promovido por los Gobiernos de Estados Unidos y otros siete países, con el compromiso de aumentar la disponibilidad de información sobre las actividades gubernamentales, apoyar la participación ciudadana, aplicar los más altos grados de integridad profesional en los gobiernos y aumentar el acceso a las nuevas tecnologías para la apertura y la rendición de cuentas.

A día de hoy 58 países se han adherido ya a la sociedad por el Gobierno Abierto y sus principios, y ese número sigue aumentando día a día. Entre los compromisos adoptados por los países destaca uno mayoritariamente: el Open Data.

Continuará…

Cuando el diseño se encuentra con el Open Data

Los planteamientos de Daniel Torres Burriel sobre cómo ve él las iniciativas Open Data desde su perspectiva de un diseñador, que son de lectura obligada para comprender lo que viene a continuación, me dan pie a iniciar una conversación sobre un tema que ya me había planteado en varias ocasiones: la relación entre el Open Data y el mundo de los diseñadores, así como las oportunidades de interacción y colaboración entre ambos.

Open Data

Empiezo pues agradeciendo a Daniel el haber abierto el debate público sobre la materia y a continuación paso a expresar mis opiniones en cuanto a sus comentarios:

PDFs: El cementerio donde reposan los datos

Creo que nadie duda de ello, si bien es cierto que se sigue (y se seguirá) publicando información en PDF, mucha, claramente demasiada. El origen de este fenómeno suele ser que toda esa información normalmente ya estaba previamente en ese formato, ya que durante muchos años los PDFs fueron la forma cómoda (y pésima) de crear contenidos para las Webs de la Administración.

Pero, aunque siempre será algo mejor tener datos públicos en un mal formato que no tener ningún dato publicado, esto no debería ser tomado nunca como una solución definitiva, sino como una mera transición para publicar inmediatamente la información disponible a la vez que se trabaja en la mejora de esos formatos. El problema surge cuando lo que debería ser una solución (muy) temporal se convierte en el formato final y es entonces cuando los PDFs se convierten en el lugar a dónde van a morir los datos.

Modelos de representación de los datos

No tengo claro si he entendido bien el concepto de lo que propones como interfaz de consumo, por eso no estoy seguro de si es algo que realmente ya existe o algo que habría que hacer o si simplemente lo que pides es imposible.

Tal y como yo lo veo, cualquier dato que se exponga al final no es más que un dato, lo que al final sumará multitud de datos de las más variadas fuentes y dominios de información. Sí lo que pides es unas pautas generales de presentación de datos me atrevería a afirmar que eso es imposible más allá de todo el compendio que existe ya sobre el tratamiento general de la información y su visualización, pero eso también es una ciencia por sí misma que hay que saber aplicar en cada caso para saber sacarle partido a la información y aflorar las historias que esconde.

No hay más reglas ni puede haberlas. Si no lo he entendido bien por favor ayúdame a interpretarlo mejor, porque me encantaría poder buscarle una solución.

Los datos como entidades vivas

Sin lugar a dudas los datos son entidades vivas, y además existe cierta relación directa entre la frecuencia de actualización de los datos y su valor, es decir, generalmente los datos más vivos y que por su naturaleza se actualizan con mayor frecuencia son los que pueden aportar un mayor potencial en cuanto a beneficio social y económico.

Esa realidad se debe reflejar en los sistemas que gestionen los datos, pero el hecho de que un conjunto de datos se presente como fichero no quiere decir que ese datos estén condenados a la estaticidad de por vida. Al fin y al cabo un fichero tan solo refleja el estado de ese conjunto de datos en un momento determinado y por tanto podría ser también una solución válida aquella que aportase un fichero por cada versión de los datos, siempre que se combinase con un sistema adecuado de gestión de versiones, a través de una configuración apropiada de las URIs por ejemplo.

Cuestión aparte es que hay ciertos datos especialmente dinámicos a los que se les podría sacar mucho más partido a través de una API, e intuyo que por ahí van tus peticiones. En eso no puedo más que coincidir, con un algunos de matices:

  • Una API podría no ser siempre la mejor opción.
  • Para cumplir con los principios del Open Data esa API debería ser un complemento y nunca un sustituto del acceso completo a los datos en bruto.
  • Habrá que seleccionar cuidadosamente cuáles son los datos que se abren por este medio, ya que crear y mantener una infraestructura que de soporte a ciertos datos especialmente dinámicos puede resultar bastante caro, y por supuesto estaríamos hablando de dinero público.

Patrones de datos

Nuevamente no se si el concepto de patrón de diseño se podría aplicar a la explotación de los datos, está claro que sí debe aplicarse, y de hecho ya se hace, para el diseño de los modelos de datos, pero precisamente el potencial de la explotación de los datos se basa en que no hay patrones establecidos y la creatividad y la imaginación con los que somos capaces de combinarlos son los únicos elementos que definen los límites.

Evidentemente para poder sacar provecho de esos datos habrá que tener ciertos conocimientos que provienen de distintas disciplinas (cálculo, estadística, bases de datos, algoritmos, programación, visualización, etc.) que en conjunto se vienen denominando Data Science, y por supuesto contando siempre también con especialistas de la materia en cuestión que se esté tratando en cada momento (sanidad, educación, transportes, medio ambiente, etc.)

Lo que si que es cierto es que en general existe una ausencia muy preocupante de los famosos code books que deberían acompañar siempre a cualquier conjunto de datos para facilitar su explotación. Cuando tratamos con datos muy simples con estructuras mínimas es fácil que con poco esfuerzo cualquiera deduzca esas estructuras y pueda sacarles partido, pero en la mayoría de casos intentar hacer algo productivo con unos datos en crudo que no cuentan con ninguna documentación puede evolucionar fácilmente hacia una misión imposible, o cuando menos conllevará unos considerables esfuerzos superfluos que se podrían y deberían haberse evitado fácilmente.

La crítica final

Me alegra ver que todo el mundo esté últimamente ávido de datos, pero las iniciativas Open Data son carreras de fondo en la que hay que seguir una serie de pasos, entre los cuales se encuentra la necesidad de proporcionar un catálogo para que la información salga de los archivadores y los discos duros de la administración y se haga visible a todo el mundo.

Por muy poco acertada que pueda acabar siendo una iniciativa Open Data en su ejecución, que las hay, creo que llegar a compararlo con el despotismo ilustrado podría ser cuando menos un poco exagerado. Sobre todo si tenemos en cuenta que en este caso el Gobierno de Aragón lleva ya bastante tiempo trabajando tanto internamente, impartiendo formación a sus servidores públicos, como externamente llamando a la participación de todo el mundo, además de haber mostrado en repetidas ocasiones su voluntad de seguir haciéndolo en el futuro próximo.

Está claro que la colaboración entre todos los agentes implicados (Gobierno, Ciudadanos, Empresas, Profesionales, Universidad, etc.), incluyendo por supuesto a los diseñadores, es una herramienta fundamental para el éxito del Open Data, y por eso sería estupendo que el evento UX de referencia en España, al que acudirán muchos de esos diseñadores, adoptase un modelo más flexible, participativo e inclusivo,que las tradicionales conferencias y mesas redondas para abrirse más a la colaboración e intercambio de ideas con otros profesionales, como por ejemplo los del mundo del Open Data.

Personalmente me gustaría saber más sobre las inquietudes de diseñadores y profesionales de la UX acerca del Open Data, puesto que además ya forman parte de él cuando aplican RDFa, schema o microdatos a los diseños Web por ejemplo, pero es que si nunca hablamos, y cuando lo hacemos no es de forma constructiva, difícilmente nos vamos a poder entender.

Fomento de la reutilización de los datos en iniciativas Open Data

Durante el repaso realizado a las Pautas para el desarrollo de políticas Open Data de la Sunlight Foundation ya hemos revisado los aspectos relacionados con la planificación de la iniciativa,  aquellos relativos a la preparación de los datos, las implicaciones técnicas y los aspectos políticos y legales. Hoy para finalizar analizaremos aquellos aspectos que tienen que ver con las actividades cuyo objetivo es fomentar la reutilización de los datos.

Fomento de la reutilización

Otros de los aspectos importantes, y probablemente el que puede marcar la diferencia entre el éxito y el fracaso a la hora de llevar a cabo una iniciativa Open Data, es la realización de una campaña de promoción activa para fomentar la reutilización de los datos publicados.

Este es uno de los aspectos aún en fase de exploración para la mayoría de las iniciativas, y en los que menos se incide también por parte de la Sunlight Foundation, pero aún así nos dedican también algunas pautas básicas que se deberían tomar como objetivos mínimos al respecto.

Explorar y utilizar mecanismos de colaboración público-privada

El hecho de potenciar sinergias entre la Administración y otros entes externos como organizaciones no gubernamentales, instituciones academicas o grupos de expertos, permitirá un mejor desarrollo de la iniciativa al incluir otros elementos que pueden ayudar a fomentar la participación pública y mejorar y completar algunos aspectos débiles de las políticas.

Esta es una herramienta que deberá utilizarse con cuidado para tratar de evitar que dichos mecanismos de colaboración acaben degenerando en alianzas exclusivas que centralicen la explotación de los datos a través de un único proveedor o den lugar a cualquier otro tipo de ventaja competitiva para un agente específico del mercado.

LLAMAR A LA PARTICIPACIÓN PÚBLICA

Las políticas de Apertura de Datos tendrán repercusiones que afecten a toda la sociedad y por tanto podrían beneficiarse enormemente de la participación pública. Establecer distintos mecanismos de escucha y participación, ya sean formales o informales, ayudará sin duda alguna a mejorar sustancialmente la política de apertura de datos que se desarrolle.

Promocionar concursos y otros eventos de reutilización

Los concursos y otros eventos de reutilización similares han demostrado ser un medio efectivo para llamar la atención sobre los datos, generar interés y demostrar el potencial de los mismos, contribuyendo además a la generación de una comunidad activa en torno a los datos.

No obstante es necesario complementar estos eventos con otro tipo de actuaciones en las que se de cabida también a la participación de otros sectores menos técnicos y que permitan desarrollar productos y servicios más maduros que vayan más allá de una mera prueba de concepto.

Publicar datos y estadísticas de uso

Hacer públicas estadísticas detalladas de explotación y utilización debería ser obligatorio en cualquier iniciativa Open Data, tanto por la transparencia de la propia iniciativa como para facilitar una herramienta de análisis que permita optimizar la efectividad y realizar los ajustes necesarios.

Aspectos legales y políticos de las iniciativas Open Data

Seguimos con el análisis de las Pautas para el desarrollo de políticas Open Data de la Sunlight Foundation, y después de ver los aspectos relacionados con la planificación de la iniciativa,  los relativos a la preparación de los datos y las implicaciones técnicas, nos centramos ahora las pautas que repasan los aspectos legales y políticos.

Retos legales y políticos

Mediante esta serie de Pautas se pretenden abordar los complejos aspectos políticos y retos legales asociados a la publicación de los datos provenientes de la Administración Pública.

El especial énfasis que se pone en este apartado viene dado por la propia naturaleza de la Sunlight Foundation y su especialización en la materia, así como por ser un aspecto clave en cuanto a la capacidad de éxito y sostenibilidad de la iniciativa a largo plazo.

Eliminar restricciones de acceso a la información

Debe evitarse cualquier tipo de restricción en el acceso a la información, ya sea esta mediante el requerimiento de registro de usuarios para el acceso, el establecimiento de tasas por uso o cualquier otra limitación técnica. El acceso debería ser gratuito, ilimitado y sin necesidad de justificación o identificación.

Algunas de las restricciones existentes en la actualidad son resultado de no adoptar medidas adecuadas en los aspectos técnicos, como los formatos de acceso o la capacidad y características del software utilizado, por lo que dichas deficiencias deberían ser también subsanadas.

Eliminar restricciones para la reutilización de la información

Si queremos que los datos sean realmente públicos y abiertos entonces no debería existir ningún tipo de restricción en cuanto al acceso o el uso que se vaya a hacer de esa información.

Cuantas menos restricciones mejor, pero al menos debería garantizarse el derecho de uso y reproducción, contando siempre con las limitaciones lógicas impuestas por los requisitos de seguridad y privacidad de la información.

Además, debemos ser siempre totalmente claros en cuanto a las licencias aplicables en cada caso, de forma que dichas licencias sean fáciles de identificar, incluso en el caso de que no existan y se aplique el dominio público.

Salvaguardar adecuadamente la información sensible

Para evitar posteriores incompatibilidades las políticas Open Data deben construirse sobre la base de cualquier otra legislación o directiva preexistente en materia de seguridad y privacidad de la información.

Un aspecto específico a tener en cuenta debido a las especiales características de los Datos Abiertos es la potencial información sensible que podría exponerse de forma indirecta debido a la combinación masiva de datos procedentes de diversas fuentes.

Contrastar las restricciones de publicación frente al potencial interés público

Ciertas restricciones de publicación que afecten a cuestiones de seguridad y privacidad siempre estarán presentes, sin embargo, se debe realizar también un ejercicio de reflexión acerca de dichas restricciones frente al potencial interés general para el bien público que pueda tener cierta información cuando lo que se desea es fomentar la transparencia.

CONSTRUIR SOBRE LA LEGISLACIÓN DE TRANSPARENCIA YA EXISTENTE

En lugar de tratar de reinventar la rueda, siempre que sea posible las iniciativas Open Data deben aprovechar y explotar los recursos ya existentes gracias a leyes y políticas previas en materia de acceso a la información, estándares, calidad de los datos y publicación de información, construyendo, ampliando y matizando cuando sea necesario sobre esas bases previamente definidas.

Añadir nuevas leyes que creen conexiones con el Open Data

Las políticas Open Data deben convertirse en un elemento transversal dentro de cualquier Administración, de modo que afectarán de forma sensible a otras políticas relacionadas (reutilización, interoperabilidad, estándares en formatos de datos, etc.) que a partir de ese momento tendrán siempre en consideración este nuevo escenario.

Incluir requisitos Open Data en las nuevas contrataciones

Otro elemento fundamental para la sostenibilidad de la iniciativa a largo plazo es incluir el Open Data dentro del ciclo de contratación de la Administración, añadiendo requisitos de apertura y reutilización por defecto para cualquier nuevo sistema contratado cuyo destino sea la gestión de algún tipo de datos.

Aplicar la misma regulación a los proveedores y subcontratos

En muchas ocasiones la Administración delega en terceras partes el desarrollo o gestión de sus sistemas de información a través de subcontratas y proveedores. En estos casos es importante extender los mismos requisitos previstos en la política Open Data propia como requisitos aplicados a los proveedores.

OGP Member Countries are betting on Open Data

Open Data enables Transparency and Accountability and this is why it is an important component of every Open Government. As a sign of the aforementioned, if we do a review on each of the country commitments at the Open Government Partnership we discover that 28 of the total 55 country members have explicitly included Open Data as part of them.

Open Data Government Commitments

Here we have an overview of what each country commitments include according to the OGP website as per today:

Albania

The National Agency for Information Society is establishing a governmental portal in the open data format. This portal will initially include data for daily expenses by all central institutions and agencies and the National Postal and Electronic Communications Authority database.

The National Statistics Institute (INSTAT) will also implement on its long term strategy the Open Data format for its database and standardize the entire process of publishing the public sector’s statistical data.

Brazil

Catalogue of Public Data and Information provided on the Internet by agencies and entities of the Federal Public Administration. The catalogue will identify and compile in one document all public information available on selected agencies.

In adittion, a new Government partnership with W3C Brazil was born to stimulate and build capacity of the national and sub national governments to publish Open Data.

Bulgaria

Bulgaria’s strategy is currently focused on several actions related to economical data:

  • The web site of the Council of Ministers provides public access to the database with all concession contracts granted in Bulgaria both at national and local levels.
  • Enhance the public use of the information system for management and monitoring of the Structural Funds and the Cohesion Funds.
  • Publish data on Government spending on a daily basis.

Canada

Their Open Government Strategy has three main streams: Open Information, Open Data, and Open Dialogue.

The country has launched an Open Data Portal pilot project in 2011 which now has more than 272,000 datasets from 20 departments and which has already resulted in over 100,000 dataset downloads since its launch.

Their future commitments include:

Chile

They will develop an Open Government Portal by the end of 2012 that will centralize several initiatives – Transparency, Participation and Public Data – on a unified platform to facilitate their understanding and use by citizens.

Public Servants will also be instructed on Open Government standards and how to promote data availability.

Colombia

The Open Data portal is a pilot project in which four Government agencies participate providing unified and open access to all data published by them for access by citizens, educational institutions and businesses.

The final objective is to work on Guidelines so that all Government agencies will publish and disseminate data on their various individual web pages. The Open Data site will become a mechanism for coordination and instruction on the access and use of data.

Croatia

The accessibility of local budget contents will be increased by giving recommendations and instructions to local and regional self-government units on publishing key budgetary documents on their websites and publishing guidebooks for citizens.

Access to information on expending public resources and contents of relevant registers will be improved in the field of political activity and electoral campaign financing, public procurement, television and media services, state property management, payments executed through Treasury Single Account, NGO financial statements and timely publishing of regional and local representative bodies’ sessions’ agendas and materials.

Denmark

Open public data is an important digital resource which can be used in the development of commercial products, to create better and smarter public sector information and services, to disseminate knowledge and insight, and to enhance transparency and democracy. This is why Denmark has renewed their efforts to Open Government Data.
It is also important to rethink the way key data is distributed across the public sector in order to ensure that data can be accessed in one place and is easily and consistently available for re-use by all public authorities.

Estonia

Make maximum use of Open Data opportunities is one of the main challenges for the country along with public services integration and providing new communication channels.

The development of public services to grant access to public sector data in a form that can be machine-readable is one of the main goals of the Action Plan.

Greece

Open government data is a tremendous resource that is as yet untapped and the Government is committed to open up this data.

Informal partnerships will be fostered among the actual stakeholders of Open Data with the purpose to provide applications and services that have measurable positive effects on people’s lives, inspire innovation and stimulate financial growth.

A couple of real examples are:

  • Operating for less than 20 months, geodata.gov.gr has succeeded in providing savings of more than 20M Euros for the public administration (data re-use), and has aided hundreds of SMEs, engineers, and researchers in their work.
  • The Open Taxation Data initiative aims to improve the accountability and have published extensive statistical data from the year 2000 onward. In addition, they has made available on a daily basis each regional tax office’s outstanding and has handled cross-checking cases.

Indonesia

The efforts towards poverty reduction and the prison system have been constantly receiving allegations for mis-targetting and data rigging. Two key Open Data actions were taken to improve transparency:

  • Bringing more transparency and accountability to poverty reduction interventions was aimed to ensure that beneficiaries receive what they are entitled to by involving public participation in the process.
  • An initiative has been launched to make prisons information widely available to public. Such information will help the public to scrutinize prison system’s conducts by comparing data provided by other institutions.

Israel

The Government of Israel is committed to freedom of information, and to promoting transparency and accessibility to data and information produced in the public sector.

Since December 2011, they worked in cooperation with the Partnership’s Networking Mechanism to obtain comments from international organizations, as well as experts from the academic world, Open Data entrepreneurs and the Government of Croatia.

Italy

The first national Open Government Strategy was centred on three main axes:

  • Open Data and applications.
  • Public Administration 2.0.
  • Government Cloud.

Government launched the National Open Data Portal, which publishes the dataset catalogue and the smartphone app catalogue. The opening up of data is also being supported through several other initiatives:

  • The open data guidelines, which provide guidance on legislative issues, how to open a dataset, technical aspects and useful descriptions of the national catalogue.
  • Weekly online seminars (webinars) to introduce, analyse and present relevant experiences.
  • Definition of and support for the adoption of the Italian Open Data License (IODL).
  • Apps4Italy, a challenge to promote Open Data reuse through applications and creative data processing.

Their future commitments include a strategy for Open Data enhancement and a new Transparency Portal.

Kenya

Kenya was the first country in sub-Saharan Africa to have an Open Data portal. This initiative, supported by the World Bank and other partners, makes key government data freely available to the public through a single endpoint.

Latvia

Freedom of information has been ensured to provide access to information from Public Administration and initial prerequisites have been created for data re-use in the meaning of the open data system.

México

Through the interoperable open data mechanism, the Government will strive to promote the integration of processes related to digital services and the use of common platforms and information systems in order to foster the use of raw databases by citizen.

Moldova

Open Data is one of the key pillars of the Governance e-Transformation agenda. The Open Government Data portal was launched in April 2011, and the Open Data Initiative was shortly institutionalized through the Prime Minister’s Directive. In February 2012, according to Prime Minister’s Indication, every central public institution assigned a person responsible for Open Data that form the Open Government Data Working Group.

Their commitments include the development of the Open Data portal into a single point to all government data and ensuring the re-use of public sector information.

Montenegro

The Ministry of Finance posts monthly and quarterly analytical data on generated revenues, expenditures, public debt and deposits on its website. All draft laws and strategies are also posted on the website.

Ministry of Finance publishes monthly Macroeconomic Review, a publication that keeps track of the trends of macroeconomic and fiscal indicators on monthly level. The idea originated from the need of users of data and analyses for brief and comprehensive reviews. Budget transparency remains a challenge for some spending units.

Netherlands

Their focus is on improving public service provision, strengthening citizenship, and using the opportunities that Open Data offers for service provision and economic growth and, at the same time, paying attention to the issue of transparency.

Their commitments include a programme to enhance accessibility and facilitating reuse of government information carrying out different actions like:

  • Maintenance and ongoing development of the Open Data portal.
  • Eliminating legal, technical and organisational obstacles for the reuse of Government information.
  • Establishing an Open Data knowledge network to develop best practices.

Philippines

Within the next year period the Government will craft a roadmap for the development of a Single Portal for Government Information, which complies with basic Open Data standards.

República Dominicana

Will make an inventory of governance indicators, which will be open to the public, and a query tool for them. The commitment links with the Action Plan in its compromise to increase the information on governmental activities and its contribution to citizen’s participation.

By the end of the project, the future Government website www.data.gov.do will be the most important source of public statistics and data.

Romania

The National Action Plan tackles the Open Government concept from the perspective of two pillars: public access to Open Data and the offering of public eGovernment services.

The country is committed to facilitate public access to open data through several actions that include: public CIOs, regulatory needs, inventory of datasets, pilot projects, uniform publishing formats, stimulate the markets, consult public information needs and monitor the initiative.

Slovack Republic

Their Open Data Portal is not only a standard website providing various data. It is a catalogue of available public administration data that will be accessible and provided in a standardized form to enabled further computer processing, either automated or through development of applications to be used directly by citizens.

Their commitments also include:

Spain

Has launched its Open Data website, singled out as the most user-friendly Open Data portal in the European Union, a prize awarded by LAPSI.

The goal is to stimulate access to the information in the hands of our public administrations and its re-use, in the conviction that these public data represent economic and social assets that should be made available to the private sector.

Sweden

They have currently ongoing work to define the next generation strategy for Open Data and public services in which Government innovation will be driven by external partners in combination with Open Data.

Full implementation of the IATI standard and engaging in the Open Aid Partnership are also included as specific commitments.

United KingdoM

One of the key reference initiatives in the Open Data World and also co-chair of the Open Government Partnership from next year.

The UK has one of the most ambitious Open Data Agendas and is committed not only to make data open, but to establish mechanisms to promote and collate feedback from those actually using the data.

Some of their key commitments include:

Uruguay

The site datos.gub.uy is a space that contains all data made public by every Government agency, making them accessible to everyone.

The goal is to have established an official data catalogue by November of 2012, along an Open Data community and manuals addressed to the different stakeholders: Civil Society Developers and the Citizenship in general.

United States

Other of the key reference initiatives worldwide has issued a memorandum requiring Federal enforcement agencies to make publicly-available compliance information easily accessible, downloadable, and searchable online.

As agencies developed their Open Government Plans, they made unprecedented amounts of information available and easily accessible to the public, in part through a centralized government platform. This platform, designed in large part to provide people with information that they can readily find and use, now gives the public access to over 390,000 high value agency data sets on such diverse subjects as auto safety, air travel, air quality, workplace safety, drug safety, nutrition, crime, obesity, employment, and health care.

Too few or a lot?

Given the results we can conclude that Open Data is without doubt an important topic in relation to Open Government but, how important?

Having 28 countries with Open Data commitments of the total of 55 could looks like a low percentage (about a 50%), but we may also have into consideration that 20 of the 55 country members are still working on their commitments and have not yet submitted them, so that leave us with a total of 28 countries that bet on Open Data among the total of 35 that have already submitted their commitments. That’s now an 80% that support Open Data, a number that indicates how important Open Data is becoming in the Open Government global agenda.

Let’s hope that the remaining countries will also incorporate Open Data to their respective Agendas soon.

Del eGovernment al Linked Government Data

Una visión histórica sobre la gestión de la información en el sector público.
Este artículo fue publicado primero en BOLETIC en colaboración con Jose Manuel Alonso.

A lo largo de los años, los organismos e instituciones públicas han ido produciendo, archivando y distribuyendo una gran cantidad y variedad de información en el transcurso diario de sus actividades. El reto permanente para las Administraciones consiste en aplicar planes de actuación que sigan los estándares y prácticas adecuadas para conseguir que toda esa información gubernamental sea fácil de encontrar, esté siempre a mano, y sea accesible, comprensible y usable, para así conseguir que las personas puedan interactuar con sus Administraciones de la forma más eficaz y eficiente posible.

En este artículo haremos un breve recorrido histórico sobre la gestión de la información en el sector público, desde los orígenes de la eAdministración hasta llegar a las tendencias actuales y futuras de la mano del Linked Government Data.

Unos inicios no muy lejanos.

Desde la aparición de las nuevas tecnologías de la información y la comunicación, la Administración ha estado esforzándose por utilizar estas herramientas para encontrar medios cada vez más eficaces a la hora de dar servicio a los ciudadanos. La idea de que la Administración hiciera uso de la Web y sus tecnologías asociadas nació a finales de la década de los 90 y se culminó a principios de la década siguiente como una extensión de la tendencias dominantes por aquella época (eComercio, eConocimiento, eServicio, etc.), lo que dio lugar a que se acuñase también el término de eAdministración (eGovernment o eGov en inglés).

En aquel momento, la Web era una tecnología incipiente que estaba dando sus primeros pasos y aún funcionaba de una forma bastante caótica. Se hablaba de estos términos y se divulgaban con la esperanza de crear interés y, a la larga, un negocio a través de este nuevo medio.

Fue durante ese mismo periodo cuando las Administraciones comenzaron a darse cuenta de las oportunidades que estas tecnologías podrían suponer también a nivel interno para mejorar su organización y sus actividades, buscando el mismo nivel de eficiencia y los mismos enfoques utilizados por otros sectores para mejorar y divulgar su información y servicios.

Situación actual

Las Administraciones se han esforzado durante esta última década en proporcionar más información y mejores servicios a sus usuarios finales, llevando a cabo grandes esfuerzos en los ámbitos de la política, los recursos, la tecnología y las capacidades.

La explosión y desarrollo de la Web, así como las tecnologías y prácticas asociadas a ella, han ofrecido a las Administraciones lo que quizás es su mejor oportunidad para hacer realidad el objetivo de ofrecer información y servicios a la vez que se satisface la demanda por parte de los ciudadanos de una contribución e interacción cada vez mayores.

Sin embargo, en general, las Administraciones todavía no han comprendido por completo el impacto y la oportunidad que supone la Web para ellas ni cómo incorporarla y adaptarla correctamente a sus sistemas de trabajo, por lo que los objetivos de mejora de servicio, eficiencia, transparencia y participación no se han visto todavía cumplidos en la medida de lo esperado.

Por otro lado, el cambio de paradigma y la descentralización aportada por la denominada Web 2.0 no ha hecho otra cosa que acrecentar y complicar los desafíos que deben superar las Administraciones, ya que en general se han visto sorprendidas y desconcertadas por este nuevo paradigma, con el problema añadido de la carencia general de estrategias claras para el tratamiento de la información por parte de las instituciones gubernamentales.

Nuevos tiempos, nuevos modelos

Hoy en día, inmersos como nos encontramos en plena transición hacía la economía del conocimiento, todo el mundo asume como natural que ciertos datos procedentes de las Administraciones deben ser compartidos, fáciles de localizar, accesibles y manipulables por todo aquel que lo desee.

Ahora también, y gracias a la tecnologías emergentes que ofrece la Web, como es el caso de la Web Semántica, las Administraciones tienen a su disposición nuevas formas de comunicación con los ciudadanos que les brindan la oportunidad de abrir sus puertas, ayudando a entender, explicar, informar y divulgar grandes cantidades y tipos de información para su uso, interés y comprensión.

Semantic Web at W3CPor tanto, en la actualidad existen todos los ingredientes necesarios para que la Administración electrónica consiga que los ciudadanos puedan acceder a la información y los servicios gubernamentales en sus propios términos. Además, compartir esos datos e información gubernamental con el público hace que se establezca una relación más abierta y transparente con los ciudadanos, dando lugar a un nuevo modelo de Administración, la Administración Abierta (Open Government en inglés).

Los pioneros del Open Government

Dos son las iniciativas que a nivel mundial, y en un ejercicio de transparencia sin precedentes, iniciaron el camino hacia modelos de Gobierno más abiertos en los que el objetivo es utilizar las ventajas que ofrecen las tecnologías de la Web para destronar el secretismo que se había instaurado por defecto, pasando la Administración a cumplir un papel de simple gestor de la información en lugar de considerarse el propietario de la misma como había sucedido hasta el momento.

Barack Obama y Gordon Brown

Estados Unidos

A través de la figura de Barack Obama, que impulsó mediante una directiva de Gobierno Abierto la creación de un sistema de transparencia, participación pública y colaboración, con el convencimiento de que dicha estrategia fortalecerá la democracia y promoverá la eficiencia y efectividad en el Gobierno.

Los pilares de la estrategia USA se basan en la publicación online de la Información Gubernamental, la mejora en la calidad de dicha información, la promoción e institucionalización de una cultura de Gobierno Abierto y la creación de un Framework común que le de soporte.

Reino Unido

Mediante la figura de Gordon Brown, y posteriormente David Cameron, ha iniciado también un proceso de apertura mediante la publicación de la información que obra en poder de la Administración, con el objetivo de ayudar a los ciudadanos a entender cómo funciona el gobierno y cómo se llevan a cabo las distintas políticas.

La principal motivación en el caso del Reino Unido es el convencimiento de que esta información pública de fácil acceso ayudará a que los ciudadanos puedan tomar mejores decisiones y realizar sugerencias sobre las políticas de Gobierno basadas en la información recibida.

El punto común: Open Goverment Data

Ambas iniciativas comparten el objetivo común de publicar los conjuntos de datos de los que dispone la Administración en un ejercicio de transparencia por el que esa información vuelve a sus verdaderos dueños – la ciudadanía – creando al mismo tiempo procesos más eficientes de funcionamiento interno y externo que mejoren las operaciones e intercambios dentro de la propia Administración.

Así pues, las iniciativas pioneras de Gobierno Abierto se basaron en un mismo concepto, el Open Government Data (OGD), o lo que es lo mismo, la publicación de la información que obra en poder de las distintas Agencias de la Administración, haciéndola accesible a todo el mundo. Si bien existen varias definiciones de OGD, la más ampliamente aceptada es la que sigue las siguientes premisas:

  1. La información tiene que ser completa.
  2. Los datos deben provenir directamente de la fuente, sin transformación alguna.
  3. La publicación debe realizarse a tiempo para preservar el valor de la información.
  4. La información tiene que estar disponible para el mayor número de usuarios posibles.
  5. Los datos deben presentar una estructura mínima que permita su tratamiento automatizado
  6. La publicación tiene que estar libre de discriminación y disponible para cualquiera.
  7. Los formatos de publicación deben ser no propietarios.
  8. La información debe estar libre de restricciones de copyright o patentes. [según una versión más reciente: o ser reutilizable mediante licencias de tipo “atribución” – n.b.]

Estrategias diferentes: Datos en crudo vs. Linked data

Si bien ambas iniciativas comparten el objetivo común de facilitar el acceso a la información, facilitar la interoperabilidad y permitir su reutilización, la estrategia a seguir difiere en un aspecto fundamental ya que, mientras la iniciativa USA bajo la dirección estratégica de Vivek Kundra se centró inicialmente en la publicación de la mayor cantidad de información en el menor plazo posible, volcando la información en crudo tal y como está disponible, en el caso de UK se realiza un tratamiento previo de los datos parar reducir los esfuerzos necesarios en su posterior reutilización.

Raw Data now! vs. Linked Government Data

Para ello, el Gobierno de UK, que cuenta con el asesoramiento del inventor de la Web – Tim Berners-Lee, apostó por las tecnologías de la Web Semántica para modelar la información y establecer relaciones explícitas entre los distintos conjuntos de datos siguiendo los principios de los Datos Enlazados (o Linked Data):

  • Utilizar URIs para la identificaciónde los distintos elementos de información.
  • Hacer que las URIs de identificación resuelvan a través del protocolo HTTP.
  • Proporcionar información útil cuando se resuelve una URI de identificación.
  • Añadir enlaces a otra información para que se puedan descubrir nuevos elementos.

Linked Data

Es sabido que, gracias a la integración de información que ofrecen los datos enlazados y en formatos abiertos, es posible explotar nuevas vías para encontrar datos relevantes y pertinentes para sus necesidades a través de búsquedas, consultas, interfaces o herramientas.

El futuro: Linked Government Data

Muchas son ya las iniciativas que a nivel mundial han seguido el ejemplo de las pioneras pero, todas ellas, incluido el caso de USA, tienden en la actualidad a converger hacia la aplicación de los conceptos del Linked Data al Open Government, en lo que ya se denomina Linked Government Data.

Public Dataset Catalogs Faceted BrowserGracias a la utilización de las tecnologías de la Web Semántica, los Datos enlazados y el seguimiento de los principios generales de la Arquitectura Web, las Administraciones pueden ahora publicar conjuntos de datos que utilizarán vocabularios y metadatos de dominio específicos y ofrecerán al mismo tiempo interfaces de consulta comunes y transparentes para el acceso a la información, sin necesidad de que dichos interfaces hayan sido predefinidos, pasando así de la información legible para las máquinas a información que puede ser relacionada por las máquinas.

Estas características son las que hacen del Linked Government Data una herramienta perfecta para favorecer enormemente la reutilización de información por parte de terceras personas de formas completamente nuevas e impredecibles, al proporcionarnos un modelo de datos flexible que permite integrar fácilmente la información proveniente de distintas fuentes.

Linked Open Data cloud

Objetivo cinco estrellas

En cualquier proyecto de apertura de información no deberíamos limitarnos a buscar soluciones para compartir datos, sino que debemos buscar soluciones eficaces y eficientes, soluciones robustas que tengan en cuenta los principios de modularidad, redundancia mínima, escalabilidad e interoperabilidad entre otras buenas prácticas.

Es por ello que debemos siempre debemos intentar seguir una estrategia gradual orientada a llegar al máximo nivel dentro de la clasificación de las cinco estrellas para la publicación de Linked Open Data:

★                     Publicar la información (en cualquier formato) utilizando licencias abiertas.

★★                  Utilizar formatos de datos estructurados para proporcionar la información.

★★★                Evitar formatos propietarios para la representación de los datos.

★★★★             Utilizar URIs como identificación para que los datos se puedan referenciar.

★★★★★          Enlazar los datos con otros para añadir contexto.

Siguiendo una estrategia de este tipo se conseguirán finalmente los mayores beneficios, tanto para los publicadores de la información como para los consumidores finales.

Los desafíos pendientes

Hasta el momento se han puesto sobre la mesa muchas preguntas y la mayoría de proyectos existentes sólo han ofrecido respuestas parciales a algunas de ellas.

¿Cómo se deben modificar y adaptar las políticas, los procedimientos y las leyes de forma que haya cabida para el Open Data?

¿Cómo pueden garantizar las Administraciones que la fidelidad y la esencia fundamental de la información se mantienen intactas?

¿Existe alguna forma de publicar los datos sacados de los sistemas e infraestructuras desfasadas a través de la Web?

Desde nuestra experiencia podemos afirmar sin lugar a dudas que hoy en día disponemos de las herramientas y tecnologías necesarias para llevar a cabo una estrategia Linked Government Data con éxito, sin embargo, no existen todavía respuestas únicas y concretas para muchas de estas preguntas, ya que el Linked Government Data es actualmente una ciencia joven y hay algunas lecciones que todavía están por aprender mientras que los proyectos maduran y se siguen desarrollando.

Arquitectura de un sistema Linked Government Data

No obstante, en todos ellos ha quedado demostrado que lograr una Administración Abierta no es una tarea fácil, debido principalmente a los desafíos a los que deben enfrentarse las Administraciones a la hora de recopilar, gestionar y compartir la información. Entre estos desafíos podemos encontrar:

  • Impulso de las estrategias a todos los niveles ya que, tal como afirma Tim Berners-Lee, para que tenga éxito es necesario que la iniciativa se desarrolle simultáneamente tanto al más alto nivel de Gobierno como en los mandos intermedios y en la sociedad civil.
  • Existencia de políticas desfasadas que no se corresponden con la realidad social y tecnológica actual, con los consiguientes desafíos legales que se plantean y las dificultades para proporcionar una atención adecuada a los ciudadanos.
  • Cultura burocrática muy lenta, siendo necesario realizar cambios en los procedimientos para que se ajusten a la nueva realidad.
  • Limitaciones presupuestarias y de personal, no pudiendo siempre responder a las inversiones necesarias para llevar a cabo los proyectos de apertura de información y la capacitación necesaria para el personal que los gestione.
  • Desafíos tecnológicos a la hora de compartir la información, debido al carácter innovador de los proyectos y la complejidad que aporta la amplitud del ámbito de actuación.
  • Sensación de pérdida de control de la información, que pueda dar lugar a problemas de autenticidad en la procedencia de los datos, privacidad o seguridad nacional debido a la exposición inoportuna de la información o la falta de calidad de la misma.

A pesar de todo lo anterior, los beneficios de la apertura de la información son siempre mayores que los problemas que se plantean, ya que la publicación de los datos provenientes del sector público en formatos abiertos fomentará el discurso civil, proporcionará un mayor bienestar social y conseguirá un uso más eficiente de los recursos públicos.

Iniciativas Open DataEs por ello que cada vez son también más las iniciativas que surgen a nivel de la Administración nacional, y con las que trabajamos mano a mano para ofrecer soluciones a los problemas y desafíos pendientes con el objetivo de seguir sumando éxitos del Open Data en la Administración Pública.

The next OGD frontier: Low and middle income countries

This post was first published at the OKFN blog in collaboration with Aman Grewal from the World Wide Web Foundation.

Last year we witnessed an impressive expansion of Open Government Data initiatives all around the world. We can assert without any doubt that it was clearly the year when Open Government spread throughout the world.

However, if we look at the map of the Open Government Data initiatives worldwide, we immediately detect than almost all of these initiatives incubated around Western Europe and North America. There is a big gap in the map, especially with reference to the developing countries.

The Challenge

Given the very apparent benefits of Open Government Data programmes, it is important to consider the development of similar programmes all over the world, and particularly in low and middle-income countries. But first, we need to go one step back and ask ourselves how we analyse whether a given country is ready to engage and sustain an OGD programme, and how much we know from existing initiatives.

The World Wide Web Foundation and CTIC Foundation took the first steps in this direction by conducting an assessment of the feasibility and potential of an OGD program in two countries – Chile and Ghana.

The key questions were:

  • Is the country ready to engage in an OGD initiative?
  • If so, what support might they need?
  • If not, why not, and what lesson can we take away from this assessment?

But while we were trying to give answers to these questions, new important questions arose:

  • What pre-conditions exist?
  • How much of what we know from existing initiatives is applicable?
  • What are the indicators that will enable the definition of OGD readiness in a given country?

We decided to start by developing a new methodology for OGD readiness assessment, based on our experience and a previous study commissioned by the Transparency and Accountability Initiative and written by Becky Hogge from early 2010. For the assessment completion, we developed a questionnaire and conducted desk research and country visits to interview people and organisations that may be key to any future success.

The findings from the studies have enabled us to start a global debate that we aim to carry forward.

Chile use case

Chile has always been a prosperous country and has long played a leadership role in Latin America. Now, more than ever, it has a government capable of decisively delivering on its vision and related governance schemes.

In the case of Chile, the political momentum is clearly present, and there are perceived interests and needs. Governmental willingness to adopt an OGD initiative is very clear at the executive layer and extends to the middle layer. In addition, the first strategic steps towards OGD are being taken, and pioneering pilot initiatives on information openness in Public Administration have been implemented. There are also several reuse initiatives being carried out by groups of civil hackers.

Nevertheless, Chile needs to establish an institutional roadmap related to OGD, putting in place all the regulations that are needed for implementation and developing a common methodology for Open Data, selecting and adopting open standard formats for data to facilitate reuse.

A good start is the recent incorporation of OGD as one of the key objectives of Chile’s digital agenda, but they still need to improve the means, processes and channels used to disseminate information and centralize access to a single common point or nodal agency. Finally, a dialogue on information sharing between the administration, civil society and the private sector should also be initiated with the objective of increasing awareness of reuse initiatives promoted by enthusiastic civil society groups.

We came to the conclusion that Open Government Data initiatives in Chile should rely on the transparency community, a very active group that would strongly support any initiative taken in favour of information openness.

Ghana use case

In terms of democracy, Ghana is one of the top few countries in Africa. For the common citizen, there is no apparent lack of respect for the democratic set-up, though there seems to be a trust deficit with respect to the politicians, either in power or in the opposition.

The required regulatory framework for an Open Data strategy is not currently present in the law, but is a work in progress. The RTI Act has been discussed since 2000 and its approval is imminent. However it has taken many years of study and the current draft has provisions for a number of exceptions. This has created friction in its smooth passage resulting in a number of revisions and subsequent delay. The RTI Act cannot exist in isolation and requires a supporting legal framework of data privacy and intellectual property. This work is still in its early stages and further advances can be expected in the short or medium term only if the RTI Act sees the light of day.

Civil society organizations in Ghana are very active in highlighting these issues and have become more vocal ever since oil reserves were found on a substantially large scale. They believe that this is the right opportunity for OGD initiatives that will not only improve the perception of a clean government in the minds of ordinary citizens, but would also strengthen the overall notion of a strong and transparent democracy. It would give them the right set of legal and technical knowledge to avoid the “oil curse”, which they are keen to avoid at any cost.

The opportunity here is two-fold. The RTI Act may give the much-needed legal framework for civil servants that would enable them to answer the data requests in a defined process. Simultaneously technology and implementation support with respect to the open interoperability framework would provide a much needed standardization platform to the apex IT agency of the country, a critical area where they are already soliciting support from external agencies. Civil society organizations like the Population Council are already running initiatives in few African countries related to data (demographic in this case) reuse by third parties that can act as examples and guideposts for OGD initiatives.

The case of Ghana has its own set of challenges and the situation may not be ideal. In such a scenario the groundwork to bootstrap OGD initiatives would be tougher, but at the same time the potential global impact would also be significant.

As Tim Berners-Lee observed, “It has to start at the top, it has to start in the middle and it has to start at the bottom.”

Make your contribution

We are publishing the draft versions of both the reports. Our objective is to gather comments from the OGD community. We invite you to read the reports for Chile and Ghana and send in your comments atogd-comments@webfoundation.org before the end of March 2011.

Your comments will assist the growing OGD community in the developing world by providing new tools, best practices and support.