departamento nacional de planeación€¦ · política de explotación de datos: big data abril...
TRANSCRIPT
Departamento Nacional de Planeaciónwww.dnp.gov.co
Abril, 2018dnp.gov.co
Luis Fernando MejíaDirector General DNP
@LuisFerMejia
César Pabón CamachoCoordinador Mejora RegulatoriaDepartamento Nacional de Planeación
@LuisFerMejia
AGENDA - Abril, 2018
1. MARCO DE LA
POLÍTICA DE
EXPLOTACIÓN DE
DATOS
BIG-DATA
César Augusto PabonCoordinador Mejora Regulatoria
Departamento Nacional de
Planeación
Política de Explotación de Datos: Big DataAbril 2018
“Datificación”: transformación del mundo en datosprocesables y cuantificablesLa “datificación” representa una oportunidad para generar mayor información y conocimiento, que se traduce en mayor valor social y económico para el país.
Fuente: IBM, *OCDE 2015. Internet Live Stats
241 mil millonestweets
2,2 billonesvideos vistos
25 mil millonesfotos subidas
1,9 billonesbúsquedas
89 mil millonesllamadas
32,2 millonespáginas
hackeadas
84,4 billonescorreos enviados
2017
0
50100
150
200
2010
2011
2012
2013
2014
2015
2016
2017
2018
2019
2020
2021
2022
2023
2024
2025Billo
nes
de g
igab
ytes
Crecimiento de datos en el mundo
Otros no estructuradosProductividad(estructurados)Imágenes/videoEntretenimiento
Política de Explotación de Datos: Big DataAbril 2018
Política de explotación de datos: liderazgo regionalColombia será el primer país en América Latina y el octavo en el mundo en adoptar una política nacional de explotación de datos
* En otros países se hace referencia al uso de datos como parte de otras políticas, pero no son una política autónoma e integral.
Las políticas de explotación de datos buscan proveer condiciones habilitantes para lograr la generación de valor social y económico
2012 2013 2014 2015 2016 2017
La Comisión Europea emitió una comunicación al Parlamento Europeo para que sea adoptada por sus países miembros (COM 2014 442).
Política de Explotación de Datos: Big DataAbril 2018
Explotación de datos con Big Data tiene impactos económicos positivosEn 2020, Big Data representará el 2,5% del PIB de la Unión Europea
Fuente: Comisión Europea (2017). *2020 estimado
Aporte al PIB de la Unión Europea
2,5 %2020
1,6 %2016
Ingresos empresas que ofrecen bienes y servicios basados en datos
10,4 %Valor agregado
(investigación e innovación)
7,5 %
Empleos especializados en uso de datos
6 %Empresas intensivas
en uso de datos
2,4 %
Tasa de crecimiento anual constante (2016-2020)
Política de Explotación de Datos: Big DataAbril 2018
La explotación de datos es el aprovechamiento de los mismos para generar valor social y económicoLa política aborda cuatro ejes estructurales
I. Datos digitales(insumos) III. Capital humano para la
explotación de datos(oferta)
II. Cultura de datos(demanda)
Valor social y económico(producto)
IV. Marco jurídico, ético e institucional
@LuisFerMejia
AGENDA - Abril, 2018
2. APLICACIÓN DE LA
EXPLOTACIÓN DE
DATOS BIG-DATA EN LA
POLÍTICA DE MEJORA
REGULATORIA
César Augusto PabonCoordinador Mejora Regulatoria
Departamento Nacional de
Planeación
Política de Explotación de Datos: Big DataAbril 2018
Problema: Falta de información sobre el inventario regulatorio en Colombia
Se requiere un inventario normativo unificado y sistematizado para la identificación del riesgo de inflación regulatoria
“El Gobierno de Colombia no hace uso sistemático de revisiones del inventarioregulatorio. No hay una base de datos única que contenga todo el acervo regulatorio,información sobre el avance de iniciativas legislativas o regulatorias, y un listado de lasenmiendas propuestas….. Dado que no se ha puesto en marcha un sistema de evaluaciónregulatoria ex ante como requisito para toda la administración pública, existe el riesgo deque haya inflación regulatoria y la necesidad de sistematizar y simplificar el acervo deregulaciones”.
OECD (2014), OECD Study on Regulatory Policy in Colombia: Beyond Administrative Simplification, OECDPublishing.
Política de Explotación de Datos: Big DataAbril 2018
Fase 1: Big-data inventario normativo en ColombiaSe consolidó y estandarizó la información contenida en los resúmenes del Diario Oficial de la Imprenta Nacional de Colombia.
1.1 Recolección de la informaciónA través de un proceso
de Web-scraping se
extrajo la información
disponible de los
resúmenes de los Diarios
Oficiales de la Imprenta
Nacional
Política de Explotación de Datos: Big DataAbril 2018
Política de Explotación de Datos: Big DataAbril 2018
¿Qué conocemos de la Regulación en Colombia?Piloto de Big Data regulatorio con base en información publicada en el Diario Oficial
PROCESO
Recolección de información
A través de un proceso de Web-Scraping se extrajo la
información disponible de los Diarios Oficiales de la Imprenta
Nacional.
Identificación de patrones
A través de un proceso de Data-mining se permite
explorar la base de datos con el objetivo de encontrar
patrones repetitivos, tendencias o reglas.
EstandarizaciónSe asoció la información de los diarios con las instituciones del orden nacional disponibles en el Sistema de Información y Gestión del Empleo Público
(SIGEP).
Base de datosPermite realizar
diferentes categorizaciones de la
información para la Rama Ejecutiva del orden
Nacional.
RESULTADOOfrece:• Información disponible desde el 2000• Datos con diferentes frecuencias: anuales,
mensuales, semanales e incluso diarias.• Categorizarlos• Restringir los datos geográficamente• Actualización tiempo real
Base de datosRama Ejecutiva Nacional (2000-2016)
94.748 observaciones (actos administrativos)4 clasificaciones de la información
25 Sectores administrativos
Sustancial No
Sustancial
21 tipos de normatividad
emitida
23 clases de naturaleza jurídica para instituciones
Política de Explotación de Datos: Big DataAbril 2018
Tipo de normatividadEl 73% de la normatividad emitida los últimos años ha estado concentrado en resoluciones
Fuente: DNP con base en Diarios Oficiales de la Imprenta Nacional
Clasificación por tipo de normatividad 2000 - 2016
17.168
68.698
2.376 2.057 4.449 -
10.000
20.000
30.000
40.000
50.000
60.000
70.000
80.000
Decreto Resolución Circular Acuerdo Otros
Can
tidad
de
norm
ativ
idad
em
itida
Total Rama Ejecutiva: 94.748
Entre 2000 y 2016, los reguladores nacionales emitieron diariamente:
2,8 decretos11,2 resoluciones
0,3 circulares15,4 normatividades
Política de Explotación de Datos: Big DataAbril 2018
Fase 1: Big-data inventario normativo en Colombia1.4 Consolidación base de datos
Política de Explotación de Datos: Big DataAbril 2018
Fase 2: Big-data inventario normativo en Colombia
2.1 Recolección de la informaciónA través de un proceso de Web-scraping se extrajo la información disponible de los
PDF de los Diarios Oficiales de la Imprenta Nacional y se procesó el texto a través de un
Optical Character Recognition (OCR)
OCR
Política de Explotación de Datos: Big DataAbril 2018
Fase 2: Big-data inventario normativo en Colombia
2.2 Estandarización de la informaciónDentro de cada PDF se identificó y se separó la información por cada acto
administrativo en particular. Con más información disponible, el proceso de
estandarización de la información con las entidades del SIGEP se refuerza
2.3 Herramienta de análisis y consulta
El análisis ex-ante del acervonormativo es la principal basepara el desarrollo de la MejoraRegulatoria como una políticabasada en evidencia.
Análisis Consulta
La herramienta garantizará la
transparencia y libre acceso a la
información a toda la población.
Política de Explotación de Datos: Big DataAbril 2018
Fase 2: Big-data inventario normativo en Colombia2.3 Herramienta de análisis y consulta
BuscadorSe puede acceder a la página del Diario Oficial o consultar el texto procesado
Política de Explotación de Datos: Big DataAbril 2018
Fase 2: Big-data inventario normativo en Colombia2.3 Herramienta de análisis y consultaEstadísticasSe cuenta con información disponible de resúmenes desde 1936 y de PDFs desde el
año 2000. Se presentan las estadísticas totales o relacionadas a búsquedas particulares
que el usuario puede realizar
-
2.000
4.000
6.000
8.000
10.000
12.000
14.000
16.000
18.000
20.000
193
9
194
1
194
3
194
5
194
7
194
9
195
1
195
3
195
5
195
7
195
9
196
1
196
3
196
5
196
7
196
9
197
1
197
3
197
5
197
7
197
9
198
1
198
3
198
6
199
7
200
0
200
2
200
4
200
6
200
8
201
0
201
2
201
4
201
6
201
8
Resolución Decreto Aviso Edicto
Auto Acuerdo Circular Otros
Fuente: Diario Oficial
@LuisFerMejia
AGENDA - Abril, 2018
3. RETOS EN LA
APLICACIÓN DE
BIG-DATA EN LA
POLÍTICA DE
MEJORA
REGULATORIA César Augusto PabonCoordinador Mejora Regulatoria
Departamento Nacional de
Planeación
Política de Explotación de Datos: Big DataAbril 2018
Proyecto Big-data: Inventario normativo en ColombiaA través de metodologías de big-data y desarrollos de web, se ha desarrollado una herramienta para la sistematización, análisis y consulta del inventario normativo en Colombia.
DNP Diario Oficial
Actos administrativos
Tablero interactivo
transparencia y libre acceso a la
información a toda la
población
Diagnósticos sectorialesBuscadorPalabras claves
Filtros+25
799.29
Orden nacional y
territorial
Datos desde
1939-2018
Política de Explotación de Datos: Big DataAbril 2018
SUCOP: sistema de actores, lineamientos y herramientas
1
2
3
4
5
6
Respaldo jurídico: el decreto de obligatoriedad de uso del AIN y del SUCOP esta en desarrollo de nuevas normas
Cultura: de participación y colaboración entre los funcionarios públicos, las entidades, y los ciudadanos
Aprendizaje: creación de curso virtual y materiales para capacitación en el AIN y la plataforma.
Infraestructura tecnológica:además del soporte y
mantenimiento, apoyar la interoperabilidad con otros
sistemas
Datos abiertos que alienten nuevos desarrollos públicos y
privados: i.e. dashboard de datos de regulación
Innovación: se debe tener una mejora continua de la
experiencia del ciudadano.
Sistema Único de Consulta
Pública.
Política de Explotación de Datos: Big DataAbril 2018
Información a nivelsubnacional
Consolidar un tablerovirtual abierto a toda la
ciudadanía
Expandir el análisisa contenidos
específicos de la normatividad
Replicar el Proyecto a otras fuentes de
información disponibles
• Fácil visualización• Abierto al público
• SUIN
• Alcaldías• Gobernaciones• Secretarías
¿En qué más debemos avanzar?¿Que viene luego del 2018?