tema 8 pruebas criteriales 11 de diciembre de 2014

TEMA 8 PRUEBAS CRITERIALES

11 de diciembre de 2014

ESTADÍSTICAS OFICIALES

- Estadística oficial = dato vs Cª (demografía, judicial, sanitaria, educativa), públicas

– Origen: censos – Actividad administrativa normal (actos admvos) vs

finalidad determinada• Recogida indirecta vs muestreo ad hoc• Actividad admva vs encuestas• Individuo … agrupación (dato agregado)

territorio vs análisis fenómeno• Registro hechos … cuestionario



– Censo … barómetro de opinión– Paro registrado – EPA– Ventaja muestreo (recoge costes y permite

profundizar)– INE agencia pública Ley datos 1987, series datos– CIS– BdE– MEC



– Ministerio Trabajo– CC.AA.– Eurostat– Corporaciones locales– www.fuentestadisticas.com– INE

• Boletín mensual, Anuario, Cifras, Revista estadística



– Anuarios prensa (El País, El Mundo)– CEPAL Comisión Económica NU América y Caribe


- Metadatos: explicaciones sobre datos, características técnicas

- Áreas geográficas: secciones tamaño muestral (INE)- Normas y clasificaciones (Gescla 97 INE): mismo criterio

medición (déficit público)- Datos agregados y microdatos, disponibles para

investigadores y usuarios- Canales distribución: instituciones, webs, archivos datos

ICPSR Michigan ESRC Essex


- Estudio estructuras sociales– Análisis y descripción estructura sociedad

(demografía, migración, mercado laboral, comercio)– Estudio demarcación territorial– Estudios comparados entre países– Estudios longitudinales (series datos)

PRUEBAS CRITERIALES

- Test de referencia criterial (evaluación criterio o dominio interés)

– Evaluación conductual– Muestreo exhaustivo objetivos– Potenciación evaluación fiabilidad y validez

(coeficiente de Kappa)– Puntos de corte que establezcan quién pasa o no pasa– Centro en objetivos específicos (evaluación

deficiencias– Mejorar dominio evaluación docentes

PRUEBAS CRITERIALES

- Clasificación en función dominio instruccional– Tests certificación o admisión– Tests nivel o dominio (promoción de un curso a otro)– Tests de aula– Tests diagnóstico– Tests individualizado (información proceso y

rendimiento)

PRUEBAS CRITERIALES

- Elaboración pruebas criteriales … especificación dominio educativo

– Formatos ítems (análisis tareas)– Transformación lingüística

• Búsqueda frases relevantes• Selección frases destacadas• Transformación frase (taxonomía Bloom)

– Reconocimiento, comprensión, aplicación, análisis

• Construcción distractores

PRUEBAS CRITERIALES

- Elaboración pruebas criteriales … especificación dominio educativo

– Diseño de facetas: parte fija + variable– Aproximación Markle y Tieman: ejemplos y

contraejemplos– Algoritmo Scandura: diagrama flujo procesos

resolución problemas experto

PRUEBAS CRITERIALES

- Análisis de ítems– Revisión lógica (juicio expertos)

• Congruencia representatividad ítem – objetivo• Calidad especificaciones técnicas• Sesgo (neutralidad vs tendencia) en fción

grupos– Revisión empírica

• Grado dificultad y poder discriminatorio• Aplicación piloto• Análisis resultados (dificultad, discriminac, vdez

PRUEBAS CRITERIALES

- Análisis empírico– Índice dificultad: proporción personas que aciertan– Índice homogeneidad

• Correlación ítem - test– Índice discriminación o índices sensibilidad

• Ganancia neta respta incorrecta pretest y correcta postest – respta incorrecta pretest y postest (-1 … 1)

• Diferencia grupos acierto ítem con instrucción – acierto ítem sin instrucción

PRUEBAS CRITERIALES

- Determinación estándares: juicio expertos (los mismos que revisión lógica): niveles de importancia o dificultad en función logro objetivos por individuos y relevancia para otras tareas

– Juicios ítems– Juicios sujetos– Juicio grupo referencia– Punto corte: modelos estado, continuos TD,

compromiso

PRUEBAS CRITERIALES

- Características técnicas– Fiabilidad

• Índice Kappa consistencia distribuciones– Validez

• Contenido• Constructo• Criterio

EJEMPLO LIBRO

Item 1 Ítem 2 Ítem 1 Ítem 2 Pre - postest Sin instr – Con inst Sj 1 0 1 0 1 Sj 2 0 0 1 1 Sj 3 1 0 1 1 Sj 4 0 0 1 1 Sj 5 1 0 1 1 GN I..C-I..I Sj 6 0 0 0 0 (2,4,7) – (6,9,10) Sj 7 0 1 1 1 (2,3,4,5,9,10) – 6,8 Sj 8 1 0 1 0 SI/CI %CI-%SI (1) Sj 9 0 0 0 1 Sj 10 0 0 0 1

Dif 0,4 0,2 0,7 0,8GN 3/10-3/10 6/10-2/10DISci 7/10-4/10 8/10-2/10

tema 8 pruebas criteriales 11 de diciembre de 2014

Documents