la apertura de datos públicos en el ayuntamiento de lorca: aspectos prácticos
TRANSCRIPT
La apertura de datos públicos en el
Ayuntamiento de Lorca: aspectos prácticos
Antonio Galindo Galindo. Ayuntamiento de Lorcahttp://administracionbeta.blogspot.com
@antoniogalindog
Big Data es como el sexo adolescente: todos hablan sobre él, nadie sabe realmente cómo se hace
y todos piensan que los demás lo hacen, así que nosotros decimos que
también lo hacemos
Open data en la Administración LocalCentrando el tema
Open data en la Administración Local
Partiremos de una primera premisa:
Open data y administración local mantienen una relación algo confusa, no llega a ser transparencia ni llega a generar negocio
Partiendo de esa premisa nos encontramos con el primer interrogante: ¿por dónde empezamos?
Nos enfrentamos a retos organizativos, metodológicos y tecnológicos
Open data en la Administración Local
Barreras:
- Desconocimiento absoluto- Poca cultura del dato- Silos informativos- Escaso retorno- Mantener la tensión a lo largo del tiempo- En contra de la creencia común necesita presupuesto
No hay dos iniciativas iguales, ni todas surgen de la misma manera, tampoco tienen porqué plantearse los mismos objetivos.
La iniciativa de datos abiertos en Lorca surgió de un modo un tanto peculiar, además de ser una iniciativa de las llamadas bottom-up.
Open data en la Administración Local
¿Cómo surge la relación?
Tras el verano de 2013
OpenData
Casi por casualidad
Comenzamos reutilizando datos
La ley de transparencia
Aunque no es open data nos echó un cable
Todo este proceso cristalizó en un acuerdo de Junta de Gobierno Local de 4 de octubre de 2013 de creación del portal de datos abiertos del Ayuntamiento de Lorca, que difundiría el catálogo de datos, así como las aplicaciones y desarrollos creados a partir de él.
datos.lorca.es
21 conjuntos de datosFederado con el portal gubernamental datos.gob.esCon alguna visualización de ejemplo de uso de los datosCon nuestra aplicación turística para móviles
Esta fue nuestra versión alpha
¿Cómo llegamos hasta ella?
datos.lorca.es
Teníamos dos retos:
- El tecnológico- La metodología
Por el dinero no teníamos que preocuparnos, porque dinero no había. Tampoco lo necesitábamos.
datos.lorca.es
Los problemas de una entidad local de tamaño medio son distintos a los de una administración de gran tamaño.
Los ayuntamientos medianos como el nuestro cuentan con los escasos recursos como desventaja, pero con la manejabilidad organizativa como ventaja.
Con manejabilidad organizativa me refiero a que su tamaño ayuda en el proceso
La mejor manera de llevar a efecto una política integral de apertura de datos consiste en lanzar un primer servicio de datos lo antes posible, en versión beta. Una vez que existe algo tangible, hay que mantener una conversación permanente con los agentes internos y externos para avanzar iterativamente en ciclos de decisión-ejecución-evaluación.
Open Data Readiness Assessment "Estudio de Preparación para la Apertura de Datos", Banco Mundial (2013),Nagore de los Ríos y Alberto Ortiz de Zárate.
Pero los datos abiertos no son sólo tecnología.
Paralelamente hay que afrontan otros retos.
Tecnología
Metodología
Organización
Un programa completo de implantación de un servicio de datos abiertos y promoción de la reutilización consta de 6 grupos de tareas, algunas de las cuales son necesarias para la puesta en marcha del portal, mientras que otras contribuyen al ecosistema de reutilización. 1. Agenda 2. Preparación 3. Exposición
4. Promoción 5. Supervisión 6. Gestión del cambio
Open Data Readiness Assessment "Estudio de Preparación para la Apertura de Datos", Banco Mundial (2013),Nagore de los Ríos y Alberto Ortiz de Zárate.
Proyecto Open Data
Retos
MetodologíaVer que están haciendo los demás¿Cuántas iniciativas hay en España? No nos
planteamos mirar en el extranjero ya que nacemos de un modo humilde
¿En quién nos fijamos? En aquellos que mas ruido generan en redes sociales
Plantilla plan RISP datos.gob.es
1º Datasets relacionados con la transparencia: Presupuestos, contratación pública, subvenciones y convenios...
2º Datasets relacionados con la reutilización comercial: Turismo, movilidad...
3º Datasets relacionados con estadísticas y estudios en profundidad: Población, vivienda...
Tipos de datasets (conjuntos de datos)
Reglas clave para la apertura de datos
SimplicidadEmpieza con algo pequeño y sencillo. Es innovación, aprende de la experiencia.
RapidezMejor datos crudos ahora que información perfecta en seis meses
Abordar los miedos e incomprensionesEsto es fundamental dentro de la AAPP, es necesario identificar los más importantes y hacerlo lo antes posible
Open Data Handbook - OKFN
http://opendatahandbook.org/es/
Pasos para la apertura de datos
Identificación
Selección
Descripción
Formato
Condiciones de uso
Publicación
Fomentar el uso
Primeras decisiones
Identificación
Formato
Condiciones de uso
Identificación
Auditoria de datos¿Sabemos de qué datos disponemos en nuestra organización? ¿Donde están? ¿Cómo están?
Identificación
Auditoria de datos
¿Qué datos son críticos y queremos publicar?
¿Son gestionados directamente por el ayuntamiento o por una empresa?
¿Tenemos modo de acceder a ellos?
¿Están en servidores municipales o externos?
¿Están en bases de datos?
Formato
¿En qué formato publicaremos los datos?¿Los modelaremos de acuerdo a algún vocabulario adecuado?
Formatos estructurados, poco complejos: csv, xmlFormatos estructurados complejos: rdf
http://datos.gijon.es
Licencias
El problema de la inexistencia de una única licencia para los portales open data, genera confusión e inseguridad.
Deben permitir la reutilización con fines comerciales, así como su agregación, obras derivadas etc...
Licencia, términos de uso o aviso legal para el catálogo general, y específica para casos puntuales.
Selección
Selección de la información reutilizable NTI RISP
Se considera que un conjunto de datos es de relevancia cuando este puede ser explotado por un gran número de agentes reutilizadores o el beneficio potencial de su explotación es elevado, medido en términos de bienestar social o de impacto económico. Cada organismo, conocedor del tipo de información que posee y de su potencial audiencia, deberá realizar estas consideraciones y determinar qué información es más valiosa para su reutilización.
http://datos.gob.es/datos/?q=node/2676
Los documentos y recursos de información reutilizables serán primarios, evitando las modificaciones o alteraciones de la información existente en la fuente
El nivel granular será el más fino posible, evitando agregaciones adicionales, para posibilitar una reutilización adecuada a cualquier necesidad
Los documentos y recursos de información reutilizables tendrán asociada información estructurada que permita su procesamiento automatizado
Los documentos y recursos de información de elaboración o recogida periódica puestos a disposición para su reutilización estarán actualizados a sus últimas versiones y se indicará la fecha de última actualización, así como el periodo de la misma.
Bad Data Real-world examples of how not to do data
http://okfnlabs.org/bad-data
En este paso es cuando toca hablar con el servicio que tiene los datos que hay que publicar
El apoyo político es imprescindible y un acuerdo que lo sustente
En el momento actual la ley de transparencia y la publicación de los datos necesarios para el indice de transparencia España vuelve a cruzarse en nuestro camino para echarnos una mano.
Aprovechamos las reuniones para tratar las dos cosas.
Beneficios de una iniciativa open data
Mejora de los servicios públicos
Mejorar en la rendición de cuentas y transparencia
Económicos, crecimiento y creación de empleo
Transparencia y open data no son lo mismo
Se puede practicar open data sin ser transparente
Se puede ser transparente sin realizar open data
Ser una organización no muy grande nos ha ayudado en este caso.
- La comunicación es más fluida.
- Están plenamente identificados los servicios que poseen los datos y su estado.
- SEPADA nos facilita la labor cuando hay empresas externas gestionando datos y mantenimientos.
Descripción
Descripción de la información reutilizable:
Para la descripción de los documentos y recursos de información reutilizables puestos a disposición pública se asociarán los metadatos mínimos
En el anexo III de la NTI se describen el conjunto de metadatos de documentos y recursos de información del catálogo.
Ficha de cada conjunto de datos o dataset + Nombre + Descripción + Categoría + Etiquetas + Fecha de creación + Fecha de modificación + Frecuencia de actualización + Publicador + Condiciones de uso
Publicación
Puesta a disposición de los documentos y recursos de información .
Destinar un espacio para la publicación de información estructurada sobre el catálogo de recursos reutilizables que se ofrece.
¿Elegimos CKAN o nos quedamos con nuestro portal?
Fomento del uso
Publicitar el portal
Publicar en el portal los casos de reutilización
Reuniones con infomediarios
Concursos de datos
Federación con otros catálogos (datos.gob.es, datahub.io...)
Publicitar el portal
Sicarm Murcia Sicarm Lorca
Publicitar el portal
Open Data en la escuela
Barreras:
- Desconocimiento absoluto- Poca cultura del dato- Silos informativos- Escaso retorno- Mantener la tensión a lo largo del tiempo- En contra de la creencia común necesita presupuesto
OrganizaciónRecordar las barreras nos servirá para hablar de la organización.Somos una iniciativa pequeña, centralizada en la Concejalía de Sociedad de la Información. Surgen también preguntas ¿Quién va a realizar cada uno de los pasos especificados por la norma técnica? ¿Lo harán siempre las mismas personas?Identificación: Auditoría de datos. La sección de informática normalmente sabe dónde están los datos, pero no sabe cómo, su fiabilidad o utilidad.Selección: Los departamentos (Siempre deberá ser así, o por lo menos con su ayuda y consentimiento).Descripción: Habitualmente lo hace el servicio o departamento, aunque muchas veces lo hace también la sección de informática.
Organización
Formato: La elección del formato es clara, en un principio, y si es de una base de datos: csv, xml y json, por ser los formatos mas usados. Si no es de base de datos en el formato en que estuvieran nativamente.Licencia: SecretaríaPublicación: Sección de informática, aunque podría hacerlo cualquiera, no hay cultura, y la mayoría se hacen automáticamente.Fomento del uso: todos los departamentos, debería ser así, pero sólo nosotros lo hacemos, los demás de un modo residual.
Queríamos montar un portal ¿con qué contábamos?
Portal municipal
¿?
Sigamos con nuestra problemática:
Portal municipal
¿?
Teníamos varios problemas:- Múltiples tipos de bases de datos
- Múltiples formato de archivo para la publicación
- Elaboración del catalogo de datos en formato RDF-DCAT, para integración con otros portales (Ej. datos.gob.es)
- Publicación de los datos en el portal web.
- API para desarrolladores
Solución: Crear una aplicación que fuese capaz de:
- Gestionar diferentes tipos de bases de datos de una manera homogénea.
- Adaptación a diferentes roles (administrador base de datos, gestor de servicios y publicador.)
- Crear consultas sobre diferentes bases de datos
- Generar diferentes tipos de archivo para su publicación
- Generar el catálogo de datos RDF-DCAT de manera automatizada
- Automatizar la publicación de los datos
- Crear servicios para desarrolladores
Portal Web / CKAN
SEPADASoftware de extración y publicación
automatizada de datos abiertos
SEPADASoftware de extración y publicación automatizada de datos abiertos
Soporta distintas bases de datos
SQL SERVER ORACLE FIREBIRDMYSQLPOSTGRE
SQL ODBC OLDB
Gestionar conexión SEPADA
POSTGRESQL
SEPADASoftware de extración y publicación automatizada de datos abiertos
Genera los ficheros automáticamente mediante consultas Sql a las bases de datos
SEPADASoftware de extración y publicación automatizada de datos abiertos
Publica del mismo modo los archivos en un repositorio, a la vez que genera automáticamente el catálogo de datos en RDF-DCAT
SEPADASoftware de extración y publicación automatizada de datos abiertos
Incluye un API para desarrolladores, creando webservices para el consumo de datos en tiempo real
SEPADA_MVC
SEPADA
Tecnología empleada
Lenguajes de programación: .NET y JavaScriptBase de datos: POSTGRESQL
Requisitos:Windows XP o superiorMicrosoft .NET Framework 4Procesador 32 o 64 bitsIIS 7.0 o superior (SEPADA_MVC)
¿Qué haremos en el futuro?
Hacer que Sepada soporte distintos lenguajes RDF
Continuar con la promoción de la cultura open data y llevar los datos abiertos a la escuela
BibliografíaLey 37/2007, de 16 de noviembre, sobre reutilización de la información del sector público. http://www.boe.es/diario_boe/txt.php?id=BOE-A-2007-19814
Real Decreto 1495/2011, de 24 de octubre, por el que se desarrolla la Ley 37/2007, de 16 de noviembre, sobre reutilización de la información del sector público, para el ámbito del sector público estatal. http://www.boe.es/diario_boe/txt.php?id=BOE-A-2011-17560
Open Data Readiness Assessment "Estudio de Preparación para la Apertura de Datos", Banco Mundial (2013),Nagore de los Ríos y Alberto Ortiz de Zárate. http://data.worldbank.org/sites/default/files/1/odra-peru-final.pdf
Resolución de 19 de febrero de 2013, de la Secretaría de Estado de Administraciones Públicas, por la que se aprueba la Norma Técnica de Interoperabilidad de Reutilización de recursos de la información. https://www.boe.es/buscar/doc.php?id=BOE-A-2013-2380 Open Data Handbook – OKFN. http://opendatahandbook.org/guide/es/
Planes RISP de la administración pública. http://datos.gob.es/saber-mas/guias-normas?q=node/27728
Muchas gracias
Antonio Galindo Galindo. Ayuntamiento de Lorcahttp://administracionbeta.blogspot.com
@antoniogalindog