Herramientas PRISM para la evaluación del Sistema de
Información en Salud
E va lu a tio n
Marco de Trabajo del PRISM,
• Perspectiva de sistemas,• Orientado a resultados, • Solución de problemas, • Auto-regulación, • Mejoramiento continúo y• Cultura de información. ( capacidad y control para promover
valores y creencias entre miembros de una organización, para la recolección, análisis y uso de información, con el fin de alcanzar las metas y la misión de la organización.
•
Momento 3Indicadores de gestión y rendimiento del
sistema de información y estadística
Objetivo
Establecer un diagnóstico a profundidad de los recursos y capacidades de los sistemas de información a nivel de microrredes en los ámbitos regionales.
Determinar el estado de los indicadores de rendimiento y gestión de los sistemas de información, a nivel de microrredes, en los ámbitos regionales.
Metodología: Estudio en una muestra representativa de registros, establecimientos y personas.
Instrumento: Herramientas PRISM de Evaluación de Sistema de Información en Salud (MEASURE)
Ámbito: Local, con inferencia regional.
HerramientasHerramientas PRISM PRISM parapara evaluaciónevaluación del del SistemaSistema de de InformaciónInformación
A) Herramienta de diagnóstico
Calidad de los datos Uso de la información
C) Cuestionario organizacional y de comportamiento (OBAT)
D) Herramienta de evaluación de la administración de
Sistema Información Rutinario en Salud (MAT)
B) Panorama del SIRSLista de chequeo de los
establecimientos / oficinas
Herramientas PRISM
A) Herramienta de diagnóstico
B) Revisión de SIRSLista de control de las instalaciones / oficinas
Calidad de los datos Uso de la información
C) Cuestionario organizacional y de comportamiento (OBAT)
D) herramienta de evaluación de la administración de
Sistema Información Rutinario en Salud (MAT)
Medición de las capacidades, desempeño y necesidades de los Sistemas de Información
Evaluación del Sistema de Información en Salud Regional (HMN) Estadísticas de Hechos vitales (Herramientas 8 y 9)
Evaluación del sistema de información rutinaria en salud MINSA
Listado de verificación
(Herramienta 1)-
Administración
(Herramienta 3)
DIRESAVista Panorámica y Perfil del Sistema (Herramienta
10)Organización
y comportamient
o (OBAT) (Herramienta
2)
REDDifusión y uso (Herramienta 7)
Transmisión de datos (Herramienta 5)
MICROREDDifusión y uso (Herramienta 7)
Transmisión de datos (Herramienta 5)
CENTRO DE SALUDDifusión y uso (Herramienta 6)
Transmisión de datos (Herramienta 5)Calidad de datos (Herramienta 4)
Herramienta: Calidad de los datos
Herramienta: uso de información
Herramienta : Lista panorámica del Sistema de Información Rutinaria en Salud (SIRS) – Perfil del sistema
Herramienta : Lista de chequeo de los establecimiento
Herramienta : Cuestionario de evaluación organizacional y del comportamiento (OBAT)
Herramienta : Evaluación de la administración del sistema
Úsese para:• Determinar el nivel actual del desempeño de SIRS.• Hacer una revisión regular del desempeño de
SIRS.
A) Herramienta de diagnóstico
Calidad de los datos Uso de la información
HerramientasHerramientas PRISM PRISM parapara evaluaciónevaluación del del SistemaSistema de de InformaciónInformación
A) Herramienta de diagnóstico
Calidad de los datos Uso de la información
C) Cuestionario organizacional y de comportamiento (OBAT)
D) Herramienta de evaluación de la administración de
Sistema Información Rutinario en Salud (MAT)
B) Panorama del SIRSLista de chequeo de los
establecimientos / oficinas
Medición de la calidad de los datos
• ¿Qué es la “calidad” de los datos?– Precisión – Oportunidad o Puntualidad en tiempo– Integridad o compleción
– + Cumplimiento de Estándares de prestación
Indicadores de Gestión y rendimiento estadístico
Indicadores del Sistema de información rutinaria de atención ambulatoria (HIS)
Dimensión Indicador
Porcentaje de Omisión de datos
Porcentaje de Consistencia de los datos Recolección de datos
Porcentaje de Concordancia de datos
Porcentaje de Omisión de la codificación
Porcentaje de error en la codificación Codificación
Porcentaje de ajuste con la codificación Índice de oportunidad de entrega al punto de digitación
Porcentaje de Omisión en la digitación
Cobertura de digitación por el Punto de Digitación Razón de continuidad de la información
Transmisión de datos
Cobertura ponderada de digitación
Índice de Análisis estadístico Análisis estadístico de la data
Porcentaje de EE.SS con personal con capacidad de generar información especifica
Difusión de la Información
Porcentaje de Regiones que difunden información mensual Porcentaje de uso de información en la planificación Porcentaje de uso de información en Programas de Intervención
Uso de la información
Porcentaje de uso de información en las definiciones de políticas en salud
Resultado nacional: 5.0Valor mínimo de referencia: ?3 días de desfase
Número de días de desfase acumulados octubre -diciembre 2005
Número de días dediferimiento octubre –diciembre 2005
PROMEDIO DE OPORTUNIDAD EN LA INFORMACIÓN (DÍAS DE DESFASE)
0 días de desfase
8
17
11
13
3
4
6
4
3
7
5
3
0 5 10 15 20
Enero
Febrero
Marzo
Abril
Mayo
Junio
Julio
Agosto
Septiembre
Octubre
Noviembre
Diciembre
Días
Valor Máximo 14.00Valor Mínimo 0.00
Mediana 2.00Media 3.09Desviación Estandar 3.79
Intervalo con 1 de -0.71 6.88Intervalo con 2 de -4.50 10.67
Aguascalientes
Baja Calif. Sur
Campeche
Coahuila
Colima
D.F. Norte
Hidalgo
Jalisco
México Oriente
Querétaro
Quintana Roo
Tabasco
Tlaxcala
Veracruz NorteBaja California
Nuevo LeónOaxaca
Chihuahua
D.F. Sur
San Luis Potosí
Michoacán
Nayarit
Sonora
Chiapas
Guanajuato
Zacatecas
México PonienteSinaloa
Guerrero
Morelos
Durango
Puebla
Tamaulipas
Veracruz Sur
Yucatán0
2
4
6
8
10
12
14
Yucatán
Veracruz Sur
Tamaulipas
Puebla
Durango
Morelos
GuerreroSinaloa
México Poniente
Zacatecas
Guanajuato
Chiapas
Sonora
Nayarit
Michoacán
San Luis Potosí
D.F. Sur
Chihuahua
Oaxaca
Nuevo León
Baja California
Veracruz Norte
Tlaxcala
Tabasco
Quintana Roo
Querétaro
México Oriente
Jalisco
Hidalgo
D.F. Norte
Colima
Coahuila
Campeche
Baja Calif. Sur
Aguascalientes
0
2
4
6
8
10
12
14
0 14
1 a 3 7
4 a 5 8
6 y más 6
Desfase en días No. Delegaciones
X1
12 Atc. Integ. Adolescente
Lic. Rocío Marín Bolaños
C.S. Los Olivos de Pro
Febrero
1043127
10070662
2 80Los
Olivos
150127
16A
XX X
Exam. Desarrollo Adolescente X 1 Z003
Determinac de Agudeza Visual X N 99173 Normal X IMC Z006
Nuevo Formulario de Registro
DOCUMENTO DE IDENTIDAD
RENAESIEDS
PRESTADORIEDS UPS
Si no tiene DNIDejar en BLANCO
Cumplimiento de estándares en la prestación de programas estratégicos de salud
Programa estratégico
N° Estándar de prestación
1
Todos los niños y niñas atendidos se les pesa, talla y clasifica el estado nutricional según corresponda (P/T, T/E, P/E)
2 Todos los niños y niñas atendidos cuentan con datos del tipo de alimentación (ejm. menores de 6 meses lactancia materna exclusiva, ablactancia, ...)
3 Todos los niños de 6 a 23 meses tiene una evaluación de hemoglobina o hematocrito
CRED
4 Todos los niños tienen registrado en la HC la evaluación de desarrollo
1 100 % de las mujeres que acuden a un servicio de PF reciben consejería
PF 2 100 % de las mujeres que acuden a solicitar un método anticonceptivo lo obtienen
1
Todas las gestantes atendidas tienen peso inicial, talla, ganancia de peso, altura uterina y se clasifica su estado nutricional
2 Todas las gestantes tiene una evaluación de hematocrito y/o hemoglobina, grupo y factor RH
CPN
3 Todas las gestantes atendidas tienen tamizaje de VIH (ELISA o prueba rápida) y Sífilis (RPR, VDRL)
Herramienta de diagnóstico
CALIDAD DE LOS DATOS Débil Mejorando
Déb
il
El sistema no produce datos de calidad y los administradores utilizan poco el SIRS
El SIRS produce datos de aceptable calidad pero no son utilizados por los administradores.
Uso
de
info
rmac
ión
Mej
oran
do
El sistema no produce datos de calidad pero los administradores si utilizan la información. La calidad de los datos disminuye la calidad de las decisiones que se toman.
El SIRS produce datos de calidad aceptable y la información sí se usa por los administradores. Esto contribuye a una mejor administración de los servicios de salud.
Demanda y uso de datos
DESARROLLO DE CAPACIDADES
CO
LAB
OR
AC
IÓN
CO
OR
DIN
AC
IÓN
UtilizaciónRecolección
Demanda
Disponibilidad
Sistemas de salud
mejorados
HerramientasHerramientas PRISM PRISM parapara evaluaciónevaluación del del SistemaSistema de de InformaciónInformación
A) Herramienta de diagnóstico
Calidad de los datos Uso de la información
C) Cuestionario organizacional y de comportamiento (OBAT)
D) Herramienta de evaluación de la administración de
Sistema Información Rutinario en Salud (MAT)
B) Panorama del SIRSLista de chequeo de los
establecimientos / oficinas
Utilícese para comprender la estructura de:– Sistemas de información existentes.– Flujos de información.– Interacción entre distintos SIS.
B) Revisión general de SIRS
HerramientasHerramientas PRISM PRISM parapara evaluaciónevaluación del del SistemaSistema de de InformaciónInformación
A) Herramienta de diagnóstico
Calidad de los datos Uso de la información
C) Cuestionario organizacional y de comportamiento (OBAT)
D) Herramienta de evaluación de la administración de
Sistema Información Rutinario en Salud (MAT)
B) Panorama del SIRSLista de chequeo de los
establecimientos / oficinas
Herramienta de Revisión General de SIRS
Úsela para:• Documentar la estructura y el diseño de un
SIS existente.• Entender el flujo de datos entre un sistema y
otro.• Identificar áreas problemáticas.• Revisar los recursos disponibles.
Úsela para:• Comprender la
disponibilidad de los recursos y las condiciones de los SIS y SIRS en instalaciones de salud y en unidades.
B) Lista de control de las instalaciones / unidades
HerramientasHerramientas PRISM PRISM parapara evaluaciónevaluación del del SistemaSistema de de InformaciónInformación
A) Herramienta de diagnóstico
Calidad de los datos Uso de la información
C) Cuestionario organizacional y de comportamiento (OBAT)
D) Herramienta de evaluación de la administración de
Sistema Información Rutinario en Salud (MAT)
B) Panorama del SIRSLista de chequeo de los
establecimientos / oficinas
Utilícelo para:• Analizar factores de
comportamiento.– Conocimientos,
habilidades, resolución de problemas, grado de seguridad, motivación.
• Factores organizacionales:– Promover la cultura de
la información.
C) Cuestionario organizacional y de comportamiento
HerramientasHerramientas PRISM PRISM parapara evaluaciónevaluación del del SistemaSistema de de InformaciónInformación
A) Herramienta de diagnóstico
Calidad de los datos Uso de la información
C) Cuestionario organizacional y de comportamiento (OBAT)
D) Herramienta de evaluación de la administración de
Sistema Información Rutinario en Salud (MAT)
B) Panorama del SIRSLista de chequeo de los
establecimientos / oficinas
Úsela para:• Combinar los hallazgos
de otras herramientas con la información de los beneficiarios clave.
• Medir el nivel de desarrollo de SIRS.
• Identificar las áreas donde haga falta mejorar.
D) herramienta de evaluación de la administración de SIRS
HerramientasHerramientas PRISM PRISM parapara evaluaciónevaluación del del SistemaSistema de de InformaciónInformación
A) Herramienta de diagnóstico
Calidad de los datos Uso de la información
C) Cuestionario organizacional y de comportamiento (OBAT)
D) Herramienta de evaluación de la administración de
Sistema Información Rutinario en Salud (MAT)
B) Panorama del SIRSLista de chequeo de los
establecimientos / oficinas
Productos de la evaluación
• Registro de personal de los sistemas de estadistica e informacion,
• Inventario de recursos del sistema de informacion,
• Evaluacion del sistema de estadistica e informacion:– Percepcion de usuarios (nivel nacional/regional)– Capacidades de recursos humanos (nivel
microredes)– Indicadores de rendimiento del sistema (nivel
microredes)
Marco de Trabajo del PRISM,
• Perspectiva de sistemas,• Orientado a resultados, • Solución de problemas, • Auto-regulación, • Mejoramiento continúo y• Cultura de información. ( capacidad y control para promover
valores y creencias entre miembros de una organización, para la recolección, análisis y uso de información, con el fin de alcanzar las metas y la misión de la organización.
•
1. Lista de verificación: Documenta las condiciones relacionadas con el
SIRS se mide además, el abastecimiento que es una función de la administración. Información sobre los equipos, los servicios básicos del establecimiento, el archivo de la información, la tecnología de la comunicación con la que cuentan, los insumos en calidad y cantidad, las normas que han recibido para el funcionamiento del sistema y el tiempo que destinan para la elaboración de reportes.
18 indicadores en esta encuesta, • Equipos: % de computadoras operativas• Servicios: % de EE. SS con servicio
eléctrico continúo.• % de EE. SS con respaldo de información• % de establecimiento con sistemas de
comunicación• % de EE.SS que tuvieron desabastecimiento
de insumos.• % de EE.SS con recursos humanos
dedicados a estadísticas
OBAT: “Evaluación de la organización y el comportamiento del Sistema de información en
Salud”
• Factores organizacionales: evalua las percepciones de si la organización promueve la cultura de la información. Al comparar estos factores con el desempeño de SIRS, permite identificar las deficiencias y las fortalezas.
• Entre los factores de comportamiento: conocimiento, las habilidades, la resolución de problemas, la confianza para realizar tareas de SIRS, y la motivación.
Evaluación de la administración de sistema rutinario de información
• Se combina los hallazgos de la herramienta de observación con los conocimientos y experiencias de los beneficiarios principales del SIRS. Sirve para medir el nivel de madurez de la estructura del SIRS y además ayuda a identificar las áreas donde hace falta mejorar. Administrar un sistema quiere decir, administrar recursos y funciones con el fin de producir mejores resultados; bajo este concepto se define la Administración de SIRS como “la presencia de mecanismos para administrar las funciones y recursos de SIRS hacia un mejor desempeño
de los mismos”.
• Herramienta nos permite medir porcentualmente el desempeño de la Gerencia, la planificación, la capacitación, la supervisión, las finanzas y el uso de herramientas para el mejoramiento del desempeño.
Calidad técnica: HIS
• Se evaluara la calidad del dato en las hojas de registro de atención diaria (HIS), solo los campos que están ligados directamente a la atención de la persona.
• omisión de la data, la inconsistencia de la data, los errores en la codificación, la concordancia de los datos con la historia clínica, los ajustes de la codificación por los estadísticos
Cumplimiento de los estándares básicos de atención en el control de crecimiento y
desarrollo, en la planificación, en el control de la gestante y en la evaluación de la
transmisión vertical de Sífilis y VIH.
5. Transmisión de dato En el país no todos los establecimientos
tienen la capacidad de acopiar los datos electrónicamente, por lo que las hojas HIS son enviadas a los puntos de digitación para que pueda ser introducidas al sistema, con este instrumento se evaluara la oportunidad de entrega de la data al punto de digitación, el porcentaje de omisión de la digitación
6. Uso de la Información en establecimiento de salud:
El proceso mediante la emisión de reportes por los estadísticos, la regularidad de los mismos y la existencia de retroalimentación por parte de los que analizan la información, los indicadores que utilizan para el análisis de la información y los resultados generados por estas evidencias, es decir los planes de acción que se toman en el establecimiento de salud, tanto para la información como para la mejora del estado de salud de la población.
• % del establecimientos de salud que emiten reportes regularmente
• % del establecimiento que recibieron retroalimentación• % del establecimiento de salud que muestran sus datos• % de establecimientos con mapas de sus jurisdicciones • % de establecimientos que realizaron más de dos tipos
de análisis• % de establecimientos que recibieron visitas de
supervisión en los últimos tres meses• % de jefes de establecimientos de salud que participaron
en la discusión del desempeño del establecimiento de salud
7.
1. Lista de verificación: Documenta las condiciones relacionadas con el
SIRS se mide además, el abastecimiento que es una función de la administración. Información sobre los equipos, los servicios básicos del establecimiento, el archivo de la información, la tecnología de la comunicación con la que cuentan, los insumos en calidad y cantidad, las normas que han recibido para el funcionamiento del sistema y el tiempo que destinan para la elaboración de reportes.