15 07-2014. indicadores y umbrales (1)

Indicadores y umbrales

Mariana Santander M.

Unidad Calidad y Seguridad

Instituto Traumatológico

Fundación Avedis donavedian

• Los indicadores son instrumentos de medida que nos permiten expresar cuantitativamente aspectos de la asistencia, la organización o la gestión, sirviendo como guía para evaluar la calidad o la adecuación de la actividad realizada.

• La existencia de un conjunto de indicadores unificados y metodológicamente robustos permite conocer de forma objetiva el funcionamiento de los centros y servicios, además de facilitar la comparación de resultados. Esta información supone la base para que cada servicio, centro o profesional pueda detectar los aspectos de la práctica asistencial susceptibles de mejora y desarrollar su propio plan de mejora de calidad.

• El propio proceso de elaboración de los indicadores, que requiere la definición de criterios de calidad comunes, promueve la estandarización de la práctica asistencial, reduciendo la variabilidad no deseada entre centros, servicios e incluso profesionales.

“Duda siempre de ti mismo, hasta que los datos no te dejen lugar a dudas”

Louis Pasteur

Estándar de Atención Abierta y de Atención Cerrada Estándar de mínimos

Criterios de definición de umbrales

Cuáles deben ser los criterios

para la fijación de estos

umbrales?

Cuánto es un nivel de

cumplimiento apropiado o

aceptable?

Qué son los Umbrales

Son puntos de referencia respecto de los cuales se puede

comparar una medición.

La Real Academia Española lo define como el “Valor mínimo de

una magnitud a partir del cual se produce un efecto

determinado”.

Desde el punto de vista de la gestión de calidad, se conoce como

umbral del indicador el nivel de cumplimiento que separa la

existencia o no de un problema de calidad.

Contexto indicadores de calidad

� Implican un punto de corte que debiera gatillar una evaluación

más profunda del resultado de la medición, y eventualmente una

intervención de mejoría.

� Tienen implícito un objetivo o meta a cumplir.

� Se utilizan términos como estándar, objetivos o metas.

� Término Estándar se asocia preferentemente a la definición de

niveles óptimos de cumplimiento de ciertos criterios de calidad.

Quién define los umbrales?

� La propia organización que definió el indicador, porque el umbral

dependerá de las especificaciones que éste tenga.

� Es importante la participación de los profesionales que están

directamente relacionados con el cumplimiento del criterio de

evaluación definido.

� Consensuar el nivel deseado de mejora al que se aspira, y

evaluar los plazos para alcanzar dichos niveles en el tiempo.

Qué tipo de umbrales existen?

a) Según el tipo de datos y su medida resumen

� Porcentajes: Son los más comunes, especialmente en

indicadores que miden proporciones de cumplimiento de algún

proceso.

� Tasas: Reflejan la frecuencia de ocurrencia de un evento.

Qué tipo de umbrales existen?

� Indicadores que miden datos continuos: El umbral se

expresa en la misma unidad de medida.

Qué tipo de umbrales existen?

b) Según la forma de definir el valor umbral

�Varían según el indicador, se encuentre definido en términos

positivos, cuando se mide el cumplimiento de un proceso o la

ocurrencia de cierto evento, o negativos, si lo que se mide es el

incumplimiento.

�Algunos umbrales se aproximarán al 100% y otros al 0%

Cómo conjugar los umbrales definidos y el margen de error de nuestras mediciones (indicadores)?

� Asegurarse de la precisión de las mediciones, realizándolas sobre

una muestra suficientemente grande para que el margen de error

no sea demasiado amplio.

� Errores muestrales no superiores al 10%.

� Incorporar el error en la definición del umbral, considerando para

ello el intervalo de confianza (IC95%) de las mediciones.

Atributos de un buen umbral

� Basado en la evidencia y en los datos: Apoyo en datos válidos

derivados de literatura científica.

� Orientado a la mejor práctica: Deben reflejar el desempeño

óptimo hacia el cual la institución debe aspirar.

� Flexible a través del tiempo: los umbrales son dinámicos,

deben ser objeto de revisión periódica, y acompañar la evolución

de los niveles de desempeño de la institución a lo largo del

tiempo.

� Claramente definido, medible y alcanzable: los umbrales no

deben ser ambiguos, sino alcanzables de manera objetiva.

Indicadores, muestreo para prestadores

Cuántos registros o fichas deben

ser revisados para obtener una

muestra adecuada en tamaño, y

cómo seleccionarlos?

Para qué usar indicadores?

Los indicadores tienen una función creciente y fundamental en monitorear

nuestro rendimiento, pero ellos sólo indican y resumen los complejos

sistemas en los cuales se emplean.

Los indicadores tienen una función creciente y fundamental en monitorear

nuestro rendimiento, pero ellos sólo indican y resumen los complejos

sistemas en los cuales se emplean.

Los indicadores de calidad son “parámetros medibles, definidos en forma explícita, que se refieren a las

estructuras, procesos o resultados de la atención, y que se juzgan vinculados a la calidad de la misma”.

Sus objetivos principales son:

� Documentar calidad de los procesos, y evaluar su tendencia

� Documentar resultados, y compararlos con patrones de referencia o evaluar su tendencia

Los indicadores de calidad son “parámetros medibles, definidos en forma explícita, que se refieren a las

estructuras, procesos o resultados de la atención, y que se juzgan vinculados a la calidad de la misma”.

Sus objetivos principales son:

� Documentar calidad de los procesos, y evaluar su tendencia

� Documentar resultados, y compararlos con patrones de referencia o evaluar su tendencia

Atributos que deben tener los indicadores

Por qué utilizar una muestra y no el total de casos?

� Un subgrupo representativo de la población.

� Población o universo (conjunto de todos los casos que concuerdan con determinadas especificaciones.

�Población: Todo

�Muestra: Parte

Limites de la población

� Delimitar la población de acuerdo a lo que se desea investigar

(esto es la unidad de análisis).

� Unidad de análisis: Se denomina también casos o elementos.

� Se centra en qué o quiénes son los participantes bajo estudio,

individuos, organizaciones, situaciones, comunidades, etc.

Ejemplo:

� Usos de la televisión por los niños.

� Unidad de análisis: Los niños.

� ¿De dónde? ¿edades? ¿género?

� Delimitado: Todos los niños de la Región de Metropolitana que cursan 4to, 5to y 6to. Básico

en establecimientos públicos.

Cuándo podría ser razonable medir el total de casos?

� Cuando los datos son fácilmente

accesibles y se pueden procesar sin

necesidad de digitarlos o codificarlos.

Es decir, cuando están allí, “listos

para ser usados”.

� También cuando los casos

(denominador) son pocos. Un

muestreo en tales condiciones podría

resultar en un indicador poco fiable.

Atributos de una muestra.

Representatividad

� La muestra debe reflejar lo acontecido a lo largo de todo el

período que se pretende evaluar.

� Por lo tanto, si el indicador es semestral, la muestra debe

extraerse de entre el total de casos ocurridos en el semestre.

� Lograr esto es utilizar un método de muestreo probabilístico,

aleatorio o sistemático:

Atributos de una muestra.

a. Muestreo aleatorio

http://stattrek.com/Tables/Random.aspx

Seleccionar aleatoriamente 5 fichas de 10.

Atributos de una muestra.

a. Muestreo aleatorio

El sitio Research Randomizer provee

también una funcionalidad similar en

http://www.randomizer.org/form.htm

Seleccionar una muestra aleatoria de 4

fichas de entre las 10.

Cada semestre tiene en total 26 semanas, necesitamos entonces 26

“sets” de números aleatorios. Como seleccionaremos un día de cada

semana, cada set será un solo número, entre 1 y 7, que

corresponderá a uno de los 7 días de la semana.

Los pacientes a los que se aplicará la pauta de supervisión. Se analizarán 5 pacientes cada vez. Si el servicio posee 40 camas, necesitamos seleccionar, para cada una de las 26 semanas, 5 camas en forma aleatoria

Cómo calcular el tamaño de muestra en la práctica?

� Obtención de resultados “favorables”, y al menor gasto de

energía en el proceso. Como la construcción de los indicadores

en los servicios clínicos es realizada en general por personal del

propio servicio.

� Examinar los casos más fácilmente accesibles (por ejemplo, los

más y en los días en que resulte más cómodo hacerlo.

� Para proporciones

http://www.dimensionresearch.com/resources/calculators/sample_size.html

http://department.obg.cuhk.edu.hk/ResearchSupport/Sample_Size_EstPrev.asp

http://www.raosoft.com/samplesize.html

http://www.openepi.com/SampleSize/SSPropor.htm

http://www.macorr.com/ss_calculator.htm

� Para promedios:

http://department.obg.cuhk.edu.hk/researchsupport/Sample_size_EstMean.asp

http://www.aboriginemundi.com/index.php/2010/04/sample-size-calculator/

Calculadora Superintendencia

Ficha Indicador Clínico SIS

Formulación del indicador Avedis Donavedian

Ejemplos

“Acreditación: Un compromiso de todos”