tema 8 pruebas criteriales 11 de diciembre de 2014

TEMA 8 PRUEBAS CRITERIALES

11 de diciembre de 2014

ESTADÍSTICAS OFICIALES

- Estadística oficial = dato vs Cª (demografía, judicial, sanitaria, educativa), públicas

– Origen: censos – Actividad administrativa normal (actos admvos) vs

finalidad determinada• Recogida indirecta vs muestreo ad hoc• Actividad admva vs encuestas• Individuo … agrupación (dato agregado)

territorio vs análisis fenómeno• Registro hechos … cuestionario

ESTADÍSTICAS OFICIALES

- Estadística oficial = dato vs Cª (demografía, judicial, sanitaria, educativa), públicas

– Censo … barómetro de opinión– Paro registrado – EPA– Ventaja muestreo (recoge costes y permite

profundizar)– INE agencia pública Ley datos 1987, series datos– CIS– BdE– MEC

ESTADÍSTICAS OFICIALES

- Estadística oficial = dato vs Cª (demografía, judicial, sanitaria, educativa), públicas

– Ministerio Trabajo– CC.AA.– Eurostat– Corporaciones locales– www.fuentestadisticas.com– INE

• Boletín mensual, Anuario, Cifras, Revista estadística

ESTADÍSTICAS OFICIALES

- Estadística oficial = dato vs Cª (demografía, judicial, sanitaria, educativa), públicas

– Anuarios prensa (El País, El Mundo)– CEPAL Comisión Económica NU América y Caribe

ESTADÍSTICAS OFICIALES

- Metadatos: explicaciones sobre datos, características técnicas

- Áreas geográficas: secciones tamaño muestral (INE)- Normas y clasificaciones (Gescla 97 INE): mismo criterio

medición (déficit público)- Datos agregados y microdatos, disponibles para

investigadores y usuarios- Canales distribución: instituciones, webs, archivos datos

ICPSR Michigan ESRC Essex

ESTADÍSTICAS OFICIALES

- Estudio estructuras sociales– Análisis y descripción estructura sociedad

(demografía, migración, mercado laboral, comercio)– Estudio demarcación territorial– Estudios comparados entre países– Estudios longitudinales (series datos)

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

PRUEBAS CRITERIALES

- Test de referencia criterial (evaluación criterio o dominio interés)

– Evaluación conductual– Muestreo exhaustivo objetivos– Potenciación evaluación fiabilidad y validez

(coeficiente de Kappa)– Puntos de corte que establezcan quién pasa o no pasa– Centro en objetivos específicos (evaluación

deficiencias– Mejorar dominio evaluación docentes

PRUEBAS CRITERIALES

- Clasificación en función dominio instruccional– Tests certificación o admisión– Tests nivel o dominio (promoción de un curso a otro)– Tests de aula– Tests diagnóstico– Tests individualizado (información proceso y

rendimiento)

PRUEBAS CRITERIALES

- Elaboración pruebas criteriales … especificación dominio educativo

– Formatos ítems (análisis tareas)– Transformación lingüística

• Búsqueda frases relevantes• Selección frases destacadas• Transformación frase (taxonomía Bloom)

– Reconocimiento, comprensión, aplicación, análisis

• Construcción distractores

PRUEBAS CRITERIALES

- Elaboración pruebas criteriales … especificación dominio educativo

– Diseño de facetas: parte fija + variable– Aproximación Markle y Tieman: ejemplos y

contraejemplos– Algoritmo Scandura: diagrama flujo procesos

resolución problemas experto

PRUEBAS CRITERIALES

- Análisis de ítems– Revisión lógica (juicio expertos)

• Congruencia representatividad ítem – objetivo• Calidad especificaciones técnicas• Sesgo (neutralidad vs tendencia) en fción

grupos– Revisión empírica

• Grado dificultad y poder discriminatorio• Aplicación piloto• Análisis resultados (dificultad, discriminac, vdez

PRUEBAS CRITERIALES

- Análisis empírico– Índice dificultad: proporción personas que aciertan– Índice homogeneidad

• Correlación ítem - test– Índice discriminación o índices sensibilidad

• Ganancia neta respta incorrecta pretest y correcta postest – respta incorrecta pretest y postest (-1 … 1)

• Diferencia grupos acierto ítem con instrucción – acierto ítem sin instrucción

PRUEBAS CRITERIALES

- Determinación estándares: juicio expertos (los mismos que revisión lógica): niveles de importancia o dificultad en función logro objetivos por individuos y relevancia para otras tareas

– Juicios ítems– Juicios sujetos– Juicio grupo referencia– Punto corte: modelos estado, continuos TD,

compromiso

PRUEBAS CRITERIALES

- Características técnicas– Fiabilidad

• Índice Kappa consistencia distribuciones– Validez

• Contenido• Constructo• Criterio

EJEMPLO LIBRO

Item 1 Ítem 2 Ítem 1 Ítem 2 Pre - postest Sin instr – Con inst Sj 1 0 1 0 1 Sj 2 0 0 1 1 Sj 3 1 0 1 1 Sj 4 0 0 1 1 Sj 5 1 0 1 1 GN I..C-I..I Sj 6 0 0 0 0 (2,4,7) – (6,9,10) Sj 7 0 1 1 1 (2,3,4,5,9,10) – 6,8 Sj 8 1 0 1 0 SI/CI %CI-%SI (1) Sj 9 0 0 0 1 Sj 10 0 0 0 1

Dif 0,4 0,2 0,7 0,8GN 3/10-3/10 6/10-2/10DISci 7/10-4/10 8/10-2/10