SEMINARIO IBEROAMERICANO DE EVALUACIÓN DE LOS NIVELES DE ALFABETISMO EN PERSONAS JÓVENES Y ADULTOS DESAFÍOS DE LA EVALUACIÓN Por: Daniel Bogoya M. Asunción, 23, 24 y 25 de noviembre de 2010
UN LUGAR…
Evaluación y toma de decisiones
Insumos
Procesos Grupo Proyecto Programa Contexto
Resultados
[Shinkfield, Stufflebeam, 1987]
REFLEXIÓN
“Si lo que hago no le sirve a nadie, déjenme perder el tiempo en lo que más me gusta.” Margarita Jaquim
DESAFÍOS DE LA EVALUACIÓN Precisión de la forma y magnitud de la pirámide como se distribuyen… Levedad en instrumentos y procedimientos, retirando… Trascendencia para incidir en la toma de decisiones efectivas…
SOBRE LA PIRÁMIDE… Tensión entre evaluar la posesión temporal de definiciones (que se repiten mecánicamente) o el uso con sentido de los códigos de la modernidad (tal vez una dialéctica entre lo universal y lo local).
LO QUE SE EVALÚA…
Modos de leer y escribir, en niveles. Literal, en la superfice y lo cotidiano. Inferencial, ejercicio de deducción. Intertextual, diálogo de fuentes. Crítico (científico)…
CASO DE PISA (NIVEL 5)… “Obtención de información: localizar y posiblemente ordenar o combinar varios fragmentos de información que no resultan evidentes en absoluto, algunos de los cuales podrían encontrarse fuera del corpus principal del texto. Inferir qué información del texto es relevante para la tarea. Manejar información muy verosímil y/o abundante información en conflicto.” [OECD, 2006]
SOBRE LEVEDAD… 100
95
Reconocimiento de elementos alfanuméricos
90 80
70 60 50 38
40 30 20 10
17
13
21
18
12
1
6
6
4
3
1
6
7
8
9
10
0 CN
SR
RC
1
2
3
4
5
SOBRE DENSIDAD‌ 25
Reconocimiento de elementos alfanumĂŠricos
20 15 10 5
Habilidad (logitos)
0 -14 -12 -10
-8
-6
-4
-2
0
2
4
6
8
10
12
14
2
1
0
-1
-2
-3
. . .# . . .## .## .## .## .#### .### .###### .####### .##### .######## .######### .###### .############ .######### .####### .############ .########## .####### .######### .######## .### .###### .### .### .### .# .# .# . . . . . . . .
| | | | T+ |T | | | | | S+ |S | | | | | M+ |M | | | | | S+ |S | | | | | T+ |T | | | | | + | | |
SOBRE SINTONÍA (δ : h) B2IT11 B4IT09 B6IT05 B3IT09 B2IT08 B2IT02 B3IT05 B1IT03 B1IT10 B3IT07 B1IT05 B1IT08 B4IT01 B3IT08 B4IT07 B2IT01 B1IT07 B1IT01 B6IT11 B4IT02 B1IT02 B4IT04 B3IT02
B1IT09
B1IT06
B5IT04 B6IT02 B4IT11 B2IT09 B2IT05 B3IT06 B1IT04 B5IT03 B6IT01 B2IT03 B3IT01 B6IT07 B3IT10 B5IT07 B4IT10 B1IT11
B6IT09 B5IT08 B6IT03 B2IT06 B2IT04 B6IT06 B6IT08
B6IT10
B4IT05
B4IT06
B3IT11
B4IT08
B5IT10 B5IT05
B4IT03
B3IT03
B2IT07
B3IT04
B2IT10
B5IT09
B6IT04
B5IT01
B5IT02
B5IT06
B5IT11
HACIA DISEÑO DE BLOQUES… Habilidad
Baja
Dificultad 91, 92, 93, 94, 95… 81, 82, 83, 84, 85… 71, 72, 73, 74, 75… 61, 62, 63, 64, 65… 51, 52, 53, 54, 55… 41, 42, 43, 44, 45… 31, 32, 33, 34, 35… 21, 22, 23, 24, 25… 11, 12, 13, 14, 15… 01, 02, 03, 04, 05…
HACIA DISEﾃ前 DE BLOQUES窶ｦ Habilidad
Baja
Dificultad
11, 12, 13, 14, 15窶ｦ 01, 02, 03, 04, 05窶ｦ
HACIA DISEÑO DE BLOQUES… Habilidad
Media
Dificultad 91, 92, 93, 94, 95… 81, 82, 83, 84, 85… 71, 72, 73, 74, 75… 61, 62, 63, 64, 65… 51, 52, 53, 54, 55… 41, 42, 43, 44, 45… 31, 32, 33, 34, 35… 21, 22, 23, 24, 25… 11, 12, 13, 14, 15… 01, 02, 03, 04, 05…
HACIA DISEﾃ前 DE BLOQUES窶ｦ Habilidad
Media
Dificultad
51, 52, 53, 54, 55窶ｦ 41, 42, 43, 44, 45窶ｦ
HACIA DISEﾃ前 DE BLOQUES窶ｦ Habilidad Alta
Dificultad 91, 92, 93, 94, 95窶ｦ 81, 82, 83, 84, 85窶ｦ
HACIA DISEÑO DE BLOQUES… Habilidad
Dificultad 91, 92, 93, 94, 95… 81, 82, 83, 84, 85… 71, 72, 73, 74, 75… 61, 62, 63, 64, 65… 51, 52, 53, 54, 55… 41, 42, 43, 44, 45… 31, 32, 33, 34, 35… 21, 22, 23, 24, 25… 11, 12, 13, 14, 15… 01, 02, 03, 04, 05…
Habilidad
ALGUNAS PISTAS‌
Dificultad
Cuento
Habilidad
ALGUNAS PISTAS‌
Dificultad
Novela Cuento
Habilidad
ALGUNAS PISTAS…
Dificultad
Poesía Novela Cuento
Habilidad
ALGUNAS PISTAS…
Dificultad
Texto científico Poesía Novela Cuento
SOBRE TRASCENDENCIA… Generar información de valor (útil) para los distintos usuarios. Algunos atributos: Validez, confiabilidad… Pertinencia, relevancia, equidad… Visibilidad, levedad, oportunidad…
SÓLO UN EJEMPLO…
Colombia Costa Rica Ecuador Guatemala Honduras Nicaragua Panamá Total Tasa global
76,7
66,1
62,9
54,7
47,3
64,9
77,2 67,7
Fuente: SITEAL
SÓLO UN EJEMPLO…
Colombia Costa Rica Ecuador Guatemala Honduras Nicaragua Panamá Total Tasa global Percentil 5 Percentil 25 Percentil 75 Percentil 95
76,7
66,1
62,9
54,7
47,3
64,9
77,2
67,7
29,5
45,1
36,6
30,8
13,8
39,2
41,1 23,8
56,5
54,8
44,9
42,3
26,7
49,4
53,3 46,4
78,2
73,5
60,8
57,8
47,0
70,0
78,5 72,2
86,5
83,5
73,4
71,1
62,9
77,5
89,1 85,1
Fuente: SITEAL
SÓLO UN EJEMPLO…
Colombia Costa Rica Ecuador Guatemala Honduras Nicaragua Panamá Total Tasa global Percentil 5 Percentil 25 Percentil 75 Percentil 95 p95-p5
76,7
66,1
62,9
54,7
47,3
64,9
77,2
67,7
29,5
45,1
36,6
30,8
13,8
39,2
41,1
23,8
56,5
54,8
44,9
42,3
26,7
49,4
53,3
46,4
78,2
73,5
60,8
57,8
47,0
70,0
78,5
72,2
86,5
83,5
73,4
71,1
62,9
77,5
89,1
85,1
57,0
38,4
36,8
40,3
49,1
38,3
48,0 61,3
Fuente: SITEAL
Distribuci贸n espacial
Fuente: SITEAL
Esperanza de vida - equidad 80
Costa Rica
y = 14,23e0,395x R² = 0,755
78
Panamá
76 74
Colombia
72
Ecuador Nicaragua
70
Guatemala
Honduras
68
3,60
3,70
3,80
3,90
4,00
4,10
4,20
4,30
Fuentes: SITEAL y http://stats.uis.unesco.org
Ingreso per cápita - equidad Costa Rica
10000
8000
y = 14,14e1,506x R² = 0,897
Panamá
Ecuador
6000
Colombia Guatemala
4000 Honduras
Nicaragua
2000
3,60
3,70
3,80
3,90
4,00
4,10
4,20
4,30
Fuentes: SITEAL y http://stats.uis.unesco.org