estudio internacional de alfabetización informática y manejo de tecnologías (icils) - resultados...
TRANSCRIPT
Estudio Internacional de alfabetizacióninformática y manejo de tecnologías
(ICILS)
Resultados 2013Dirección General de Evaluación de la Calidad
EducativaNoviembre 2014
Índice• Características Generales
• Marco de Referencia
• Resultados
• Conclusiones
• Características Generales
• Marco de Referencia
• Resultados
• Conclusiones
2
CARACTERÍSTICAS GENERALESICILS 2013
3
Características generales• El estudio es impulsado por la Asociación Internacional de
Evaluación Educativa (International Association for theEvaluation of Educational Achievement).
• En Argentina lo coordinó el Ministerio de Educación de laCABA, a través de la DGECE.
• ICILS es el primer estudio internacional comparativo en medirla preparación de los alumnos para su inserción en la era de lainformación.
• El estudio es impulsado por la Asociación Internacional deEvaluación Educativa (International Association for theEvaluation of Educational Achievement).
• En Argentina lo coordinó el Ministerio de Educación de laCABA, a través de la DGECE.
• ICILS es el primer estudio internacional comparativo en medirla preparación de los alumnos para su inserción en la era de lainformación.
4
¿Qué se evaluó y cómo?• ICILS mide la capacidad de utilizar computadoras
para investigar, crear y comunicar, en orden de poderparticipar efectivamente en: hogares, escuelas,trabajos y comunidades.
• La evaluación consistió en la administración de laprueba a través de un USB y una computadora, juntocon cuestionarios complementarios en papel para elalumno, docente y rector.
• ICILS mide la capacidad de utilizar computadoraspara investigar, crear y comunicar, en orden de poderparticipar efectivamente en: hogares, escuelas,trabajos y comunidades.
• La evaluación consistió en la administración de laprueba a través de un USB y una computadora, juntocon cuestionarios complementarios en papel para elalumno, docente y rector.
5
Rasgos básicos de la prueba• Se utilizó Teoría de Respuesta el ítem (TRI) que es
la metodología habitual en los exámenes a granescala.
• Consiste en estimar los niveles de habilidadutilizando preguntas o ítem.
• Es más complicada que la alternativa teoría clásica,exige software específico (y caro).
• Posee muchas ventajas sobre la teoría clásica quees más aplicable a otros contextos (por ejemploacreditar el conocimiento de los contenidos de unamateria)
• Se utilizó Teoría de Respuesta el ítem (TRI) que esla metodología habitual en los exámenes a granescala.
• Consiste en estimar los niveles de habilidadutilizando preguntas o ítem.
• Es más complicada que la alternativa teoría clásica,exige software específico (y caro).
• Posee muchas ventajas sobre la teoría clásica quees más aplicable a otros contextos (por ejemploacreditar el conocimiento de los contenidos de unamateria)
Rasgos básicos de la prueba(II)
• La respuesta a cada pregunta depende de lainteracción entre la “habilidad” del alumno y lascaracterísticas de la pregunta o ítem.
• El estudio trabaja con la metodología de valoresposible (PV por sus siglas en inglés) que realizaimputaciones alternativas para estimar niveles dehabilidad de allí que esa estimación tenga ciertomargen de imprecisión (o error estándar).
• Por ello se reportan media y error estándar
• La respuesta a cada pregunta depende de lainteracción entre la “habilidad” del alumno y lascaracterísticas de la pregunta o ítem.
• El estudio trabaja con la metodología de valoresposible (PV por sus siglas en inglés) que realizaimputaciones alternativas para estimar niveles dehabilidad de allí que esa estimación tenga ciertomargen de imprecisión (o error estándar).
• Por ello se reportan media y error estándar
¿Qué no permite la prueba?• Hablar de porcentajes de respuestas correctas
porque se utilizar TRI.• Obtener resultados a nivel de escuela porque el
estudio es muestral.• Utilizar los datos sin los ponderadores porque
cada escuela representa a N de su clase y parahablar de la CABA deben utilizarse losponderadores o pesos muestrales.
• Obtener resultados a nivel de alumno porque eldiseño por cuadernillos no lo permite.
• Hablar de porcentajes de respuestas correctasporque se utilizar TRI.
• Obtener resultados a nivel de escuela porque elestudio es muestral.
• Utilizar los datos sin los ponderadores porquecada escuela representa a N de su clase y parahablar de la CABA deben utilizarse losponderadores o pesos muestrales.
• Obtener resultados a nivel de alumno porque eldiseño por cuadernillos no lo permite.
¿Qué sistemas educativos participaron?
• En ICILS 2013 participaron 21 sistemaseducativos. Entre ellos:
- Alemania- Australia- Chile- Noruega- Rusia- Ontario, Canadá
• En ICILS 2013 participaron 21 sistemaseducativos. Entre ellos:
- Alemania- Australia- Chile- Noruega- Rusia- Ontario, Canadá
9
¿Cómo se seleccionaron escuelas yalumnos en CABA?
• Escuelas:– El diseño muestral tuvo dos criterios de
representatividad comuna y gestión.– Participó una muestra de 100 escuelas secundarias
(50 del sector de gestión estatal y 50 del sector degestión privada).
• Alumnos– En cada escuela participaron 20 alumnos de 1er año
que fueron seleccionados aleatoriamente una vezingresado el universo total de alumnos del primeraño.
• Escuelas:– El diseño muestral tuvo dos criterios de
representatividad comuna y gestión.– Participó una muestra de 100 escuelas secundarias
(50 del sector de gestión estatal y 50 del sector degestión privada).
• Alumnos– En cada escuela participaron 20 alumnos de 1er año
que fueron seleccionados aleatoriamente una vezingresado el universo total de alumnos del primeraño.
10
Índice• Características Generales
• Marco de Referencia
• Resultados
• Conclusiones
• Características Generales
• Marco de Referencia
• Resultados
• Conclusiones
11
MARCO DE REFERENCIAICILS 2013
12
Marcos de Referencia
• Tanto las pruebas de conocimiento como locuestionarios de contexto siguen una tabla deespecificaciones o referentes.
13
Marco de referencia:prueba de conocimiento
Eje 1: Recolectar y manejarinformación
Eje 2: Producir e intercambiarinformación
Aspecto 1.1. Conocer y entender eluso de computadoras
Aspecto 2.1. Transformar información
Aspecto 1.2. Acceder y evaluarinformación
Aspecto 2.2. Crear información
14
Aspecto 1.2. Acceder y evaluarinformación
Aspecto 2.2. Crear información
Aspecto 1.3. Manejar información Aspecto 2.3. Compartir información
Aspecto 2.4. Usar información demanera segura
Marco de referenciaFactores de contexto
15
RESULTADOSICILS 2013
16
La Ciudad de Buenos Aires se encuentrapor debajo del promedio de logro de los
sistemas que participaron.
450
500
550
600
17
CABA = 450
350
400
Promedio ICILS 2013Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
Niveles de desempeño en ICILS
Debajo delnivel 1
Los resultados también se presentan según niveles dedesempeño. En ICILS se definen 4 niveles dedesempeño:
18
Debajo delnivel 1 Nivel 1 Nivel 2 Nivel 3 Nivel 4
< 407puntos
407 - 492puntos
492 - 576puntos
576 - 661puntos
> 661puntos
¿Qué puede hacer cada nivel desempeño?NIVEL DESCRIPCION
Nivel 1 Abrir un link; utilizar software para pegar imágenes; poner un títuloen posición destacada; identificar quiénes reciben mail en un grupo(CC); detectar riesgos sino se hace el log out desde sitios públicos.
Nivel 2 Agregar contactos en un sitio colaborativo; insertar información enuna hoja de cálculo; diferenciar entre contenidos con sponsor ygratis en la web; utilizar editor de páginas de web simple, entreotros
Agregar contactos en un sitio colaborativo; insertar información enuna hoja de cálculo; diferenciar entre contenidos con sponsor ygratis en la web; utilizar editor de páginas de web simple, entreotros
Nivel 3 Utilizar software para mapear una ruta; evaluar la confiabilidad dela información en la web; seleccionar información relevante;adaptar la información y controlar el manejo de una presentaciónentre otros.
Nivel 4 Evaluar la confiabilidad de los contenidos; seleccionar con éxitos losresultados de búsqueda, clasificar y adaptar; reconocer la diferencialegal, técnica y social cuando se utiliza imágines de sitios públicosentre otros.
19
En la CABA se observa una concentración en losniveles de desempeño más bajo a diferencia de
los sistemas de mayor promedio de logro.
64 67
34
30
23 24
4542
27
4042
46
47 41 3739
4642 41 42
4836
40 45
11
40
824
30
7 1321
3016 21 23
1527 32 29 29 34 30
25 23
2
25
11 4 0 0 1 2 0 2 3 1 3 5 4 4 3 5 2 2 0 4 0
30405060708090
100
20
7 5
3118 11 4 8 9 15 15
5 4 8 6 2 9 12 6
64
7
67
22 18
3025
1728 27 23 30
19 1819 20
1319 21
24 24
48
010203040
Debajo del nivel 1 Nivel 1 Nivel 2 Nivel 3 Nivel 4Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
El de CABA es uno de los sistemas educativosdonde hay menor diferencia de logro por
género
2520
1312
3813
69
352
Ontario, CanadáPaíses Bajos
PoloniaRepública Checa
República de CoreaRepública Eslovaca
SuizaTailandia
Terranova y Labrador, CanadáTurquía
21
1624
525
1515
2913
2517
2325
0 5 10 15 20 25 30 35 40 45
AlemaniaAustralia
CABAChile
CroaciaDinamarca
EsloveniaFederación RusaHong Kong (SAR)
LituaniaNoruega
Ontario, Canadá
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
Los puntajes varían según sector degestión con mayor promedio en el sector
de gestión privada
440
460
480
500
22
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
360
380
400
420
Estatal Privado Total
Se extiende a la distribución por nivelesde desempeño
50%
60%
70%
80%
90%
100%
661 o más
Entre 577 y 661
23
0%
10%
20%
30%
40%
50%
Estatal Privado
Entre 577 y 661
Entre 491 y 577
Entre 407 y 491
Debajo de 407
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
RESULTADOS¿Cuáles son los factores
asociados a las variaciones?
24
Los resultados, como es deesperar, muestran una relación positiva
con el nivel educativo de los padres
350
400
450
500
550
600
25
300
350
Secundario básico o menos Secundario completoPos secundario no universitario Terciario o universitario
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
Que en el caso de CABA es muy marcadapara el sector de gestión privada
450
500
550
26
300
350
400
Estatal Privado
Menos de Primario Primario Inc. Secundario Inc. Universitario Inc. Universitario o más
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
Existen diferencias en el nivel logro de losalumnos según tenencia de computadora
Países BajosPolonia
República ChecaRepública de CoreaRepública Eslovaca
SuizaTailandia
Terranova y Labrador, CanadáTurquía
Diferencia enlos resultadosentre alumnosconcomputadoras yalumnos sincomputadoras
27
25 50 75 100 125 150
AustraliaCABAChile
CroaciaEslovenia
Federación RusaHong Kong (SAR)
LituaniaOntario, Canadá
Países Bajos
Diferencia enlos resultadosentre alumnosconcomputadoras yalumnos sincomputadoras
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
Y está positivamente relacionada alnúmero de libros en el hogar
391
432
462
487
400420440460480500
28
391
300320340360380400
Categoría 1 (0-10libros)
Categoría 2 (11-25libros)
Categoría 3 (26-100libros)
Categoría 4 (+ de100 libros)
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
¿Dónde y para qué utilizan lacomputadora los alumnos de
CABA?
29
El acceso es elevado como también lafrecuencia de uso
• 64% de los alumnos tiene 5 años o más deexperiencia con computadoras
• 89% de los alumnos usa la computadora en sucasa al menos una vez por semana
• 57% de los alumnos usa la computadora en laescuela al menos una vez por semana
• 64% de los alumnos tiene 5 años o más deexperiencia con computadoras
• 89% de los alumnos usa la computadora en sucasa al menos una vez por semana
• 57% de los alumnos usa la computadora en laescuela al menos una vez por semana
30
Y en la escuela
• 81% de los alumnos aprendió a buscarinformación con la computadora en la escuela
• 72% de los alumnos aprendió a definir quéinformación es relevante para un trabajoescolar y a organizar información de distintasfuentes en la escuela
• 81% de los alumnos aprendió a buscarinformación con la computadora en la escuela
• 72% de los alumnos aprendió a definir quéinformación es relevante para un trabajoescolar y a organizar información de distintasfuentes en la escuela
31
La tecnología tiene una variedad deusos didácticos
Al menos una vez por semana:• 31% de los alumnos usa computadoras fuera de la
escuela para crear o editar documentos
• 58% de los alumnos usa una computadora parabuscar información o estudiar para la escuela
• 74% de los alumnos usa la computadora paracomunicarse con otras personas a través de las redessociales
Al menos una vez por semana:• 31% de los alumnos usa computadoras fuera de la
escuela para crear o editar documentos
• 58% de los alumnos usa una computadora parabuscar información o estudiar para la escuela
• 74% de los alumnos usa la computadora paracomunicarse con otras personas a través de las redessociales
32
Para estudioAl menos una vez por mes:• 56% de los alumnos usa la computadora para
completar ejercicios
• 49% de los alumnos trabaja en conjunto conotros alumnos de su escuela en la computadora
• 44% de los alumnos usa la computadora pararealizar ensayos o reportes
Al menos una vez por mes:• 56% de los alumnos usa la computadora para
completar ejercicios
• 49% de los alumnos trabaja en conjunto conotros alumnos de su escuela en la computadora
• 44% de los alumnos usa la computadora pararealizar ensayos o reportes
33
Pero también con fines recreacionalesAl menos una vez por semana:• 84% de los alumnos usa la computadora para
escuchar música
• 73% de los alumnos usa la computadora para vervideos, series o películas
• 59% de los alumnos usa la computadora parajugar
Al menos una vez por semana:• 84% de los alumnos usa la computadora para
escuchar música
• 73% de los alumnos usa la computadora para vervideos, series o películas
• 59% de los alumnos usa la computadora parajugar
34
Los alumnos de la CABA y latecnología…
• El 95% de los alumnos de la CABA piensa que:- Trabajar con computadoras es divertido- Es importante para ellos trabajar concomputadoras- Les gusta aprender cosas nuevas paratrabajar con la computadora
• El 95% de los alumnos de la CABA piensa que:- Trabajar con computadoras es divertido- Es importante para ellos trabajar concomputadoras- Les gusta aprender cosas nuevas paratrabajar con la computadora
35
CONCLUSIONES
36
Docentes y las TICs
• El uso de las TIC en las escuelas sigue siendolimitada .
• Los profesores tienden a utilizar las TIC en laenseñanza cuando tienen confianza en estashabilidades .
• A nivel mundial el 46% de los profesoresadquieren conocimientos en TIC mediante laobservación de otros profesores que utilizanlas TIC en la clase.
• El uso de las TIC en las escuelas sigue siendolimitada .
• Los profesores tienden a utilizar las TIC en laenseñanza cuando tienen confianza en estashabilidades .
• A nivel mundial el 46% de los profesoresadquieren conocimientos en TIC mediante laobservación de otros profesores que utilizanlas TIC en la clase.
37
Alumnos y las TICs
• Aunque los estudiantes han crecido en la eradigital , no implica necesariamente que seannativos digitales .
• En todos los países participantes , enpromedio el 17% de los estudiantes noalcanzó un nivel 1.
• En promedio , sólo el 2 % de los estudiantesalcanzó un nivel 4 , con un máximo de 5 % enCorea.
• Aunque los estudiantes han crecido en la eradigital , no implica necesariamente que seannativos digitales .
• En todos los países participantes , enpromedio el 17% de los estudiantes noalcanzó un nivel 1.
• En promedio , sólo el 2 % de los estudiantesalcanzó un nivel 4 , con un máximo de 5 % enCorea.
38
Alumnos y las TICs (II)• Los tres tipos principales de software
utilizados en la escuela para los propósitos deenseñanza son los procesadores detexto, software de presentaciones y recursosde información basados en computadoras .
• Programas más complicados, tales comojuegos de aprendizaje digitales, registro dedatos y herramientas de monitorización seusan muy poco.
• Los tres tipos principales de softwareutilizados en la escuela para los propósitos deenseñanza son los procesadores detexto, software de presentaciones y recursosde información basados en computadoras .
• Programas más complicados, tales comojuegos de aprendizaje digitales, registro dedatos y herramientas de monitorización seusan muy poco.
39
Muchas graciasDirección General de Evaluación de la Calidad Educativa
https://equidadycalidadeducativa.buenosaires.gob.ar/
International Association for the Evaluation of EducationalAchievement
http://www.iea.nl/icils_2013.html
Dirección General de Evaluación de la Calidad Educativahttps://equidadycalidadeducativa.buenosaires.gob.ar/
International Association for the Evaluation of EducationalAchievement
http://www.iea.nl/icils_2013.html
BACKUP SLIDES
41
RESULTADOS¿Para qué utilizan la
tecnología?
42
Casi el 90% la usa más frecuentemente en elhogar*
88 87 8981
95 95 96 9488
95 9691 95 96 96
71
9586
59
91
62
31
81
57
35
61
76
26
73
57 55 5260 63
79
60
18
77
34
66
54
35
59 13
8 7 8 718
8 9 7 115 5 7
30
126
31
11
23
0102030405060708090
100
43
010
Hogar Escuela Otro lugar*Al menos una vez por semana
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
En la escuela para editar documentos y crearpresentaciones en mayor proporción que las
hojas de cálculo (% alumnos)
10
20
30
40
50
60
44
0
10
Crear o editar documentos (por ejemplo para escribir historias o hacer tareas)
Usar una hoja de cálculo para calcular, almacenar datos o crear gráficos (por ejemplo, usando Microsoft EXCEL ®)
Crear una presentación sencilla de diapositivas (por ejemplo usando Microsoft PowerPoint ®)
Crear una presentación multimedia (con sonidos, fotos, videos)Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
El uso de software de cualquier tipo fuera de laescuela para fines didácticos o de
programación es bajo (% alumnos)*
05
1015202530354045
45
0
Usar software educativo diseñado para ayudarme con los estudios escolares (por ejemplo, un software de matemática o de lectura)
Programar computadoras, escribir macros o scripts (por ejemplo usando Logo, Basic o HTML)
Usar software para dibujar, pintar o realizar diseños gráficos
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
Pero es elevado para fines sociales (% alumnos)
0102030405060708090
100
46
0
Buscar información para estudiar o hacer los trabajos de la escuela
Acceder a wikis o enciclopedias en línea, para estudiar o hacer trabajos de la escuela
Comunicarme con otros usando mensajes instantáneos o redes sociales (por ejemplo, mensajes o actualizaciones deestado)Escribir comentarios en perfiles en línea o blogs
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
Y recreación (% de alumnos)
0
10
20
30
40
50
60
70
47
0
Acceder a internet para averiguar sobre lugares donde ir o actividades para hacer
Leer comentarios en internet sobre cosas que podrías querer comprar
Jugar
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
RESULTADOS¿Qué aprenden en la escuela?
48
Los alumnos en todos los sistemas manifiestandominar la búsqueda de documentos y de
fotografías (% alumnos)
0102030405060708090
100
49
0
Buscar y encontrar un archivo en tu computadora
Usar un software para encontrar y eliminar virus
Editar fotografías digitales u otras imágenes gráficas
Crear una base de datos (por ejemplo, usando Microsoft Access ®)
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
Y bastante menos para crear o editar una página ocambiar la configuración de la computadora
102030405060708090
100
50
010
Crear o editar documentos (por ejemplo, tareas de la escuela)
Buscar y encontrar información que necesitas en Internet
Crear o editar una página web
Cambiar la configuración de tu computadora para mejorar su funcionamiento o arreglar problemasFuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.
Relativamente más para realizar presentacionesmultimedia que para el uso de hojas de cálculo
0102030405060708090
100
51
010
Usar una hoja de cálculo para calcular, almacenar datos o crear un gráficoProgramar o crear una macro (por ejemplo en Basic, Visual Basic)Configurar una red de computadorasCrear una presentación multimedia (con sonidos, fotos o videos)Subir textos, imágenes o videos a un perfil en línea
Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.