validacion escalas

of 30 /30
Gerardo Antonio Muñeton López X Semestre Medicina Universidad Nacional de Colombia VALIDACION DE ESCALAS DE MEDICION EN SALUD

Author: miguel-alejandro-tentor

Post on 02-Jan-2016

53 views

Category:

Documents


0 download

Embed Size (px)

TRANSCRIPT

Diapositiva 1

Gerardo Antonio Mueton LpezX Semestre MedicinaUniversidad Nacional de ColombiaVALIDACION DE ESCALAS DE MEDICION EN SALUDCuantos se necesitan para sensibilidad al cambioCuantos se necesitan para el analisis factorialCuantos se necesitan para tesre test 15 pacientesCuantos se necesitan para interevaluador 15 pacientes

Cuantos se necesitan para comprobar que por telefono y por personas es igualComo hicieron esto en el SF 36. test retest. Reliability confiabilidad test re test.

cuantos se necesitan para validez de criterio

Ware JE Jr, Snow KK, Kosinski M, Gandek B. SF-36 HealthSurvey: manual and interpretation guide. Boston: NewEngland Medical Center; 1993.

Usado por R Sanchez en varios estudios para calcular las muestras de todo. A Donner,M Eliasziw Sample size requirements for reliability studiesStatistics in Medicine(1987)Volume:6,Issue:4,Pages:441-448

Recomendado por ricardo sanchez Sample size tablets for clinical studies. Second edition. Oxford blackweld science 1997.

Obtencion muestra para validez de criterio.STREINER DL, NORMAN GR. Streiner DL (Ed). Validity inHealth measurement scales. A practical guide to their development and use. New York: Oxford University Press, 1995; 144-62.14. STREINER DL, NORMEN GR. Reliability. In Streiner DL (Ed).Health measurement scales. A practical guide to their development and use. New York: Oxford University Press 1995: 104-27.

Para el analisis factorial solo 5 pacientes se pueden. Norman GR, Streiner DL. bioestadistica barcelona 1996 mosby

Recomenaciones sobre lo que se debe escribir en un estudio de validacion.http://books.google.com.co/books?id=Py2-r7dI_F8C&pg=PA46&lpg=PA46&dq=muestra+para+realizar+validez+de+criterio+concurrente&source=bl&ots=j_mc_Am6dh&sig=MROMU-XaXXNDx-1Wt293BNhcl2s&hl=es&ei=9vzeTuzwHsWWtwfHnYXdBQ&sa=X&oi=book_result&ct=result&resnum=8&ved=0CFQQ6AEwBw#v=onepage&q=muestra%20para%20realizar%20validez%20de%20criterio%20concurrente&f=false

En los estudios de via de administracion del SF 36 dividieron los pacientes con cancer en dos grupos, uno para hacerlo via telefonica, otro para hacerlo via mail. Y luego compararon los resultados. En ningun momento se hizo de las dos formas a algun paciente. Por que?

Los estudios para garantizar que esto si sirve incluyen todo el analisis de confiabilidad y validez. Han encontrado que si varian.Evaluan detalladamente la consistencia interna y encuentran diferencias muy pequeas. Al parecer es necesario evaluar este alfa decronbachY no solo el coeficiente de correlaicon intraclase para test- retest.

Un articulo espaol muy bueno realizo el estudio con coeficiente de corrlacion intraclase entre las dos formas de administracion para un mismo paciente, y con el alfa de cronbach para consistencia interna para cada metodo.Este articulo mostro que los coeficientes de correlacion CCI variaban de 0.5 a 0.7 moderado a alto. Y que los cornbach fueron todods mayores a 7. en conclusion si hay diferencia si es autoadministrado, o realizado por telefono.Ellos en la discusion dicen que lo pueden usar, y que es tan valido como el realizado por autodiligenciado.En este estudio presentan en la introduccion referencias importantes del SF36 autodiligenciado vs telefono.

En otro estudio de otros cuestionarios se demostro tambien que cambiaban.

En este estudio en usa muestran que se puede usar el sf36 de varias formas. Brazier JE, Harper R, Jones NMB, OCathain A, Thomas KJ,Usherwood T. Validating the SF-36 health survey questionnaire:new outcome measure for primary care. BMJ.1992;305:160-4.

El SLEDAI no esta en la mayor parte de los cuestionarios, el tiempode evolucion si.Despues de validar la escala de estas mismas encuestas se obtienen los datos Para estos estudios.

1Validacin escalas de medicin en saludEn salud se presenta la necesidad de realizar mediciones objetivas sobre algn fenmeno para poder estudiar las variaciones que este presenta frente a situaciones que puedan modificarlo.

En numerosas ocasiones esto se realiza mediante la medicin de una sola variable.

Existen fenmenos que no puede medirse directamente.

Dependen de varios componentes, y su medicin deber realizarse evaluando diferentes variables que los representen. Calidad de vida.. inteligenciaPor ejemplo sodio en sangre. Se realiza con la medicion de un sodio serico,Sodio en orina.2Validacin de escalas de medicin en saludPara garantizar que estas variables representen lo que se plantea medir, deben ser seleccionadas cuidadosamente, y sometidas a un riguroso proceso de validacin.ErroresCambio de evaluadorDificultades comprensinDiferencias interpretacinotrosMedicin no representa el fenmeno a medirResultados debido a erroresLa validacin buscara llevar estos errores al mnimo, garantizando que todos los resultados de la medicin sean reflejo de la realidad del fenmeno sin importar quien lo realice o donde.

3Proceso de la validacin Para que una escala este validada para realizar mediciones en salud debe cumplir con los siguientes requisitos o seguir los siguientes pasos.

Eleccin o creacin de la escalaTraduccin adecuadaPruebas preliminaresPruebas de ValidezPruebas de confiabilidadDemostrar utilidad.

4Seleccin de la escalaEleccin de la escala

La mejor escala disponible en evaluacin del tema

Amplio uso5Traduccin de la escalaConformar comit de revisinDos personas expertas en el tema sobre el que se va a trabajarDos personas con dominio del idioma original de la escalaDos personas que presenten o hayan presentado el fenmeno que desea ser medido

Prever dificultades debido a diferencias culturales o geogrficas.Jugar hockey sobre hieloMetroRealizar sugerencias y buscar traduccion.6TraductoresDominar ambos idiomasEstar inmersos en la cultura en la cual va a ser validada la escalaDos con idioma primario del lugar donde se pretende validar la escalaMnimo uno cuyo idioma primario sea el original de la escala a validarConocimientos bsicos sobre medicin en saludEntrenamiento en construccin de medicin.Traduccin de la escala7Traduccin directa

Realiza dos traducciones por traductores diferentes Consensuar una versinTraduccin inversaRealizarse por traductor con idioma primario igual al de la escalaRevisinComit de revisin determinara si hay diferencias entre las dos versionesRealizara una versin para iniciar las pruebas preliminares.Traduccin de la escala8Creacin de la escalaEstamos ante algo que creemos que realmente existe y que queremos medir. Lo que queremos medir es un fenmeno complejo, que no es observable directamente y que esta compuesto por diferentes conceptos.Se descompone lo que queremos medir en grupos de sntomas o manifestaciones que siempre estn presentes. Esos grupos se llaman Factores o DominiosSe desarrolla una estrategia para medir los Factores o Dominios, usualmente mediante la construccin de tem9La versin definida se aplicara a un grupo de 10 a 15 personas por parte de 2 a 3 evaluadores Evaluacin preliminar referente a items

Evaluacion preeliminar de la utilidad

Pruebas preliminares10Evaluacin referente a items

Grado de comprensin

Ambigedad

Frecuencia de respuesta.. Exclusin de variables

Restriccin de rango de respuesta exclusin de opcin

Pruebas preliminaresCorreccin11Pruebas preliminares en relacin con utilidad

Tiempo de diligenciamiento requerido

Necesidad de entrenamiento

Caractersticas de la forma.

Facilidad para calificar escalaPruebas preliminares12Pruebas de validezLa realidad existente est adecuadamente representada por la escala. En otras palabras, la escala parece medir lo que debe medir. La escala refleja la estructura de Dominios o de Factores en los cuales fue dividida la realidad que se va a medir. En otras palabras, la escala no deja Factores sin medir, ni mide factores que no corresponden a la realidad.La escala funciona de manera parecida a otros instrumentos para medir esa realidad que ya han sido certificados.Validez de apariencia o contenidoValidez de constructoValidez de criterio13Pruebas de validezValidez de apariencia o contenidoSe conforman dos grupos uno de expertos, y otro de personas a ser evaluadas.

Se llega a un consenso sobre si la escala parece medir lo que se desea medir, y si los items usados son pertinentes.14Pruebas de validezValidez de constructoSe realiza mediante anlisis factorialEste proporcionara los datos necesarios para determinar cuantos y cuales factores son los que de verdad contribuyen a la medicin, y cuales items contribuyen a cada factor y a la escala.

Disminuye el numero de factores y el numero de items para realizar la medicin. Aquellos que no demuestren ser tiles son excluidos.

Cumple con el objetivo de la validez de constructo que es no dejar Factores sin medir, ni medir factores que no correspondan a la realidad.Anlisis Factorial15Pruebas de validezAnlisis FactorialCreacin de una matriz capaz de explicar la variabilidad conjunta de todas las variables ExtraccinRotacinEstimacin de las puntuacionesSaturacin Comunalidad# de factoresEliminar ItemsDeterminar factores16

Pruebas de validezAnlisis FactorialCOMUNALIDAD resultado es la proporcin de la variancia de un item que puede sr explicado por el modelo factorial obtenido

AUTOVALOREScantidad de la varianza total que esta explicada por cada factor.SATURACIONEs la correlacin entre cada uno de las variables y los factores

ROTACION17Pruebas de validezValidez de criterioLa escala funciona de manera similar a otras escalas o estrategias que midan el mismo fenmeno.Si existe alguna escala ya validada debe demostrarse relacin del nuevo instrumento con el ya validado mediante correlacin de pearson. El resultado debe aproximarse a 1.Si no existe otro instrumento ya validado, se puede realizar comparacin con mtodos de apreciacin clnica subjetiva, como impresin general de salud segn expertosOtra estrategia es validar dos escalas de manera paralela y realizar el anlisis de correlaciones.18Cuando la realidad que se est midiendo cambia, la escala puede detectar ese cambio?Sensibilidad al cambioPruebas de validezSe evala tomando una medicin inicial y comparndola con el resultado de otra medido en una circunstancia en la que se supone que ha cambiadoMedir calidad de vida en personas enfermas, y en personas que sanaron.Se mide con un mtodo llamado effect sizeMayor a 0.8, no menor a 0.519Pruebas de confiabilidadLa escala funciona bien bajo diferentes condiciones?cuando es aplicada por distintas personas.cuando se aplica en diferentes oportunidades mismo evaluadorConfiabilidad test-re testConfiabilidad interobservadorLos items de la escala se correlacionan entre ellos, con sus factores y con los resultados de la escala.Consistencia Interna20Pruebas de confiabilidadConsistencia InternaCuando los items de una escala se correlacionan entre ellos, con sus factores y con los resultados de la escala se dice que hay consistencia interna, esto sirve para darle estabilidad a la escala y evitar que cambie con el numero de mediciones y no por verdaderas modificaciones del fenomeno a estudioSe demuestra mediante el coeficiente de cronbachSe recomiendan valores entre 0.7 y 0.9.Valores mas bajos demuestran que los items miden fenmenos diferentes y no uno definidoValores mayores a 0.9 se generan cuando la escala es muy homognea- pueden existir factores o items redundantes21Pruebas de confiabilidadConfiabilidad test-re testSe realiza con el fin de garantizar que cuando el fenmeno se ha mantenido estable los resultados de la escala no varan.Deben realizarse varias mediciones en condiciones donde creamos que no ha variado el fenmeno. Por ejemplo calidad de vida hoy y maana.El anlisis se realiza mediante el coeficiente de correlacin intraclase CCIArroja un valor que significa el porcentaje de la varianza de los resultados que es explicado solo por la diferencia entre los sujetos. Si es 0.9 ,el 90% de los cambios fue debido a variabilidad entre los sujetos evaluados, y no por otros factores como azar, o cambio de tiempoSe interpreta como adecuado valor de CCI mayor a 0.822Pruebas de confiabilidadConfiabilidad interobservadorSe evala realizando la medicin en la misma persona por observadores diferentes, cuando se garantiza que el fenmeno no ha cambiado, por ejemplo el mismo da. Esto debe hacerse en mnimo 15 pacientes.Se estudia el porcentaje de concordancia entre los observadoresCoeficiente de kappaSe considera muy bueno a partir de 0.823Determinacin de su utilidadDebe informarse tiempo de aplicacinEntrenamiento del personal que la desarrollaraCondiciones previas en los pacientes Entrenamiento para interpretar y calcular resultados finales24Lectura critica estudios de validacinItem De dnde vienen?: De escalas previas. De observacin clnica. De opinin de expertos. De reporte de pacientes. De hallazgos de investigacin. De supuestos tericos. 25Se midi en ellos: Frecuencia de respuesta Restriccin en el rango Comprensin Ambigedad Carga afectiva Lectura critica estudios de validacin26Validez: - Tiene validez de apariencia? - Hay evidencia de la validez de contenido? - Hay evidencia de la validez de constructo? - Se evalu validez de criterio? De manera concurrente? De manera pre-dictiva? - En qu grupos se evalu la validez?

Lectura critica estudios de validacin27Confiabilidad: Se evalu consistencia interna? si Tiene buena confiabilidad test-retest? Y confiabilidad interevaluador? En qu grupos se midi confiabilidad? Cmo se calcul la confiabilidad?

Lectura critica estudios de validacin28Utilidad: Se puede aplicar en un tiempo razonable? Qu tanto entrenamiento se requiere? Es fcil de calificar?

Lectura critica estudios de validacin29ReferenciasValidacin escala medicin en salud. Ricardo Snchez, Jairo Echeverry Rev. Salud pblica. 6 (3): 302-318, 2004

Medicin en salud: Algunasconsideraciones metodolgicasAna m. Alarcn ma, Sergio muoz Nb.Rev Md Chile 2008; 136: 125-130

30