TERRY D. TENBRINK PROFESOR DE LA UNIVERSIDAD DE MISSOURI
I
Esta obra es propiedad del 5IBOI- UCR J
EVALUACION GUIA PRACTICA PARA PROFESORES
NARCEA, S. A. DE EDICIONES MADRID
Slslema de Bibl iolecas - UCR
111111111111111111111111111111111111111 694093
694093 8 GO 2014
UJ") R.
II' cdicion
I
c NARCEA,
S.A. DE EDICIONES Avda. Dr. Federico Rubio y Gall, 9. 28039 Madrid. Espana,
www.narceaediciones.es
Š Me ORAW - HILL, Nueva York Titulo original: Evaluation. A practical guide for teachers Traduccion: Carmen Fernandez Aguinaeo I.S.B.N.: 978-84-277-0464-0 Deposito legal: M-S0403-2010 Impreso en Espana. Printed in Spain Imprime: CLM, S.L. 28946 Fuenlabrada
(Madrid)
Queda prohibida, salvo excepcion prevista en la ley, cualquier forma de reproduccion, distribucion, comunicacion publica y transformacion de esta obra sin contar con la autorizacion de los titulares de la propiedad intelectual. La infraccion de los derechos mencionados puede ser constitutiva de delito contra la propiedad intelectual (arts. 270 y sgts.Codigo Penal). EI Centro Espaiiol de Derechos Reprograficos (www.cedro.org) vela por el respeto de los citados derechos.
INDICE Pdginas INTRODUCCION
.
PRIMERA PARTE: DE EVALUACION l. EL PROCESO
CONCEPTOS
IMPORTANTES
DE EVALUACION:
PARA ENTENDER
UN MODELO
11
EL PROCESO
PARA PROFESORES
.....
15
Definicion de eualuacion: Decisiones como objetivo final. Juicios como resultado importante, . . .
17 21
2. PRINCIPIOS BASICOS DE LA EVALUACION . Algunas premisas subyacentes: Los individuos tienen capacidades que se pueden rnedir. La obser-
31
Inforrnacion como ingrediente
esencial
Un modelo de promo de eualuacion: Preparacion.
Recogida de datos. Evaluacion
Sintesis
vacion contiene error. Una puntuacion observada se compone de una puntuacion real mas un error . Principio 1: Las fuentes de error sepueden identificar: Fuentes de error en el instrumento de recogida de datos, en el proceso de recogida de informacion, en el individuo que se evalua Principio 2: El error se puede minimi7,tlr: Referir todas las actividades a la razon para evaluar. Ser claro, conciso y consistente. Conseguir un ejernplo de informacion represenrativo ... Principio 3: El error sepuede estimar : Fiabilidad. Valida. Usos de los coeficientes de fiabilidad y validez, Indicadores anteriores al test. Observar indicadores a! recoger informacion y despues de la aplicacion del test. Indicadores proveniences de los resultados de los tests. Indicado-
29
31 34
37
=~~
.
43
Sintesis Bibliografia
. . .
62
Principio 4: 5e puede "vioir con" el error: Separacion. Hipotesis. Verificacion .. . . . . . . .. . .. . . . .. .. . .
. .
SEGUNDA PARTE: PASOS DEL PROCESO DE EVALUACION 3. ESPECIFICAR LOS JUICIOS A EMITIR Y DECISIONES A TOMAR Empeiar con preguntas . Describir las decisiones a tomar : cCuil es el objeto de la decision? cQue clase de accion se debe adoptar? cCuando se tomara la decision? cCua! es el objetivo de la decision? cDonde estan las prioridades? cQue irnportancia tienen las decisiones? . Describir los juicios a formular: cCual es el objeto? cQue clase de juicio? cCuando se debe formular? cQue tipo de referente se utilizara? cQue clase de comparacion se hara? Tres factores importantes en la forrnacion de juicios . Sintesis . Bibliografia . 4. DESCRIBIR
LA INFORMACION
NECESARIA
.
59 63
67 70 71
78 90 90 93
Procedimiento 1: Describir las dimensiones importantes de la informacion necesaria: c Sobre que es la informacion? C Que tipo de comportamientos hay que observar? (taxonomia de objetivos de
7
.11..
INDICE
Bloom, modelos de aprendizaje 'de Gagne). c Hasta que punto se debe especificar la informacion? CHasta que punto debe ser exacta? '.' . Procedimiento 2: Elaborar una lista de objetivos tit instrucddn, Valor de 105 objetivos de instruccion. Utilizacion. Identificar objerivos bien definidos. Reformular 105 mal definidos. Forrnular los propios objetivos de instruccion . . Proadimiento 3: Construir una tabla de especiftcaciones: Dcscribir el contenido de la materia y la respuesta del esrudiante. Construir una matriz de contenido por comportamiento. Indicar la proporcion de items necesarios para cada casilla de la matriz . Procedimiento 4: Construir un "continuum" de reali7.!1cirin:Determinar 105 resultados finales del aprendizaje. Enumerar 105 comportamientos asociados con la perfeccion. Describir cada comp?rta~iento en terminos observablcs. Ordenarlos de un modo significativo . Stnresis
. . . . . .
.
.
Bibliogra£ia . . . . . . . . . . . . . . . .
.
.
5. PREPARATIVOS PARA OBTENER LA INFORMACION NECESARIA Localh,flr la informacion ya disponible: Donde buscarla (notas personales del profesor,
. archivos de la escuela, ar;hivo del orientador, notas del resto del personal y de los padres). Que buscar en la informacion . Decidir cudndo y como obtener la informacion necesaria: Seleccionar una tecnica de recogida de informacion (observacion, interrogacion, analisis, tests). Seleccionar un tipo de instrumento (de observacion: anecdotarios, listas de control, escalas de evaluacion, ordenacion; de interrogacion: cuestiona rio, enrrevista, pruebas sociornetricas, recnicas proyectivas; de analisis: tareas de adquisicion, de repaso y de transferencia; tests: elaborados por el profesor, estandardizados). Decidir cuando se debe obtener la informacion. Especificar las condiciones del test .. Construir (0 seleccionar) el instrumento de recogida de informacion: Lineas generales para su construccion (definir el formate, redacrar 105 items, escribir las instrucciones, reproducirlo). E valuar instrumenros elaborados por el profesor . Sintesis
. . . . . . . . . . .
.
. .. . . .. .
6. OBTENER,
ANALIZAR
Y REGISTRAR
.
LA INFORMACION
100
116
118 125 125 127
127
134
.
148 153 153
.
155
.
Bibliogra£ia
93
Obtener informacion: Sugerencias generales para utilizar los instrumentos de observacion, para observar sin ningun instrurnento, para utilizar instrumentos de interrogacion, para analizar el trabajo diario. Aplicacion de tests . Anali7,!Zr y registrar informacion: Analizar. Registrar (datos de tests, de observacion, de interrogacion, de analisis de tareas, juicios y decisiones). Elaborar normas y baremos .
155
Sinresis
.
Bibliografla
.
17l 184 185
.
187
7. FORMULAR
JUICIOS
. Interpretar puntuaciones de tests estandardi7,!Zdos: Hacer estimaciones (rangos, puntuaciones tipicas). Predecir
105
resultados
.
187
Estimaciones a partir de testsy tareas elaborados por el profesor: Clasificar en una curva. Las notas como porcentaje de puntuaciones correctas. Las notas como percentiles. Calificar en un continuum de realizacion. Calificar segun un standard y en una escala standard. Calificar para libros de notas
.
195
Estimaciones del comportamiento tipico: Juicios por referencia a la norma frente a juicios por referencia a un criterio. J uicios autorreferidos, Juicios de desviacion frente a juicios de dominio. Hacer predicciones en la clase: Escoger un predictor y medir el rendimiento en el. Obtener informacion de la variable predicha. Calcular la relacion entre predictor y predicho . Sintesis . . . . . . Bibliogra£ia . 8. TOMAR
DECISIONES
.
Veriftcar juicios: Comprobar la precision de la informacion. Obtener evidencia emplrica . Tomar decisiones. Causas mas comunes de decisiones incorrecras. Pasos en el proceso de toma de decisiones Sintesis
.
...................•........................
'.'
Bibliogra£ia 9. RESUMIR
Y DAR A CONOCER
Ra\in de los informes de evaluation
8
LOS RESULTADOS
206 208 210 211 213 213
.
219 230 231
.
233 233
.
DE LA EVALUACION.
IN DICE
Resumir los resultados de la eualuacidn: Dererrninar el objetivo, Enunciar las decisiones mas importantes que se han tornado. Indicar los juicios que han influido en cada decision. Resumir la informacion empleada para formular cada juicio ".' '.'.' . Informar de los resultados de la eoaluadon: Ficha-expediente. Cartas. Informes diagnosticos. Entrevistas con los padres. Llamadas telefonicas '.. ~.: .-''':'''' , . Sintesis , . Bibliograffa . TERCERA PARTE: PROCEDIMIENTOS PARA CONSTRUIR 0 SELECCIONAR INSTRUMENTOS ESPECIFICOS DE RECOGIDA DE INFORMACION 10. CONSTRUIR LISTAS DE CONTROL Y ESCALAS DE EVALUACION Construir una lista de control: Especificar una realizacion 0 producto adecuado. Enumerar los comportamientos 0 caracteristicas importantes, Ariadir cualquier error comun. Ordenar la lista de comportamientos y/o productos, Ofrecer un modo de utilizar la lista . Construir escalas de eualuacion: Especificar un resultado de aprendizaje apropiado. Enumerar las caracteristicas importantes de cada resultado. Definir una escala para cada caracteristica. Ordenar las escalas. Escribir las instrucciones . Evaluar listas de control y escalas de eualuaadn: Comprobar si hay defecros patentes. Probar el instrumento . Sintesis . Bibliograffa " . II. ELABORAR CUESTIONARIOS, PLANES DE ENTREVISTAS E INSTRUMENTOS SOCIOMETRICOS . Construir cuestionartos: Describir la informacion que se necesita, Redactar las preguntas. Ordenarlas. Ofrecer un modo de responder. Escribir las instrucciones. Reproducir el cuestionario Tipos especificos de cuestionarios: Inventarios. Escalas de actitud . Elaborar un plan de entreuista, Un enunciado del proposito, Un conjunto de orientaciones para establecer un rapport. Un conjunto de preguntas. Un guion de como estaria estructurada. Nota sobre la hora y lugar. Espacio para tomar notas . Construir instrumentos soaometricos. Tecnicas de norninacion. "Adivina quien". Emplazarniento Evaluar los instrumentos de interrogacion: Defectos mas comunes . Sintesis . Bibliograffa .
12. DISENAR PROYECTOS Y TAREAS . Decidir 10 que se ua a aprender. Tipo, nive!, momenta ' . Decidir qui informacion se quiere obtener: Deterrninar 10 que han de hacer los alurnnos. Formular
234 239 '253 254
257
257
259 270 272 273 275 275 281
283 285 293 294 295 297 298
. .
302 311
13. CONSTRUCCION DE TESTS POR EL PROF.ESOR . Determinar elformato: Tipos de items (emparejamiento, respuesta alternativa, eleccion multiple,
313
las instrucciones. Sintesis
Establecer
reglas (y razones) para el analisis que se va a hacer
lIenar un espacio, respuesta corta, ensayo de respuesta restringida, ensayo de respuesta extensa, ejemplos). Cuantos Items. De que dificultad. Como se deben presentar. Como deben responder los alurnnos. Criterios para un buen formato .
Redactar los items
.
Escribir las instrucciones: Controlar el nivel de lectura. Presentar modelos de problemas . Preparar el test: Escoger los Items. Ordenarlos logicamente. Finalizar e insertar las instrucciones. Ofrecer un medio de responder. 'Dererminar una maqueta general. Ofrecer formas paraIe!as. Reproducir e! test : ',' ' .' .
-Como redactar tipos especificos de items Items de empare/amiento: Pasos y ejemplos Items de respuesta altematiua: Pasos y ejemplos .Items de election multiple: Pasos y ejemplos Items de llenar un espacio: Pasos y ejemplos Items de respuesta corta, Pasos y ejemplos Items de ensayo: Pasos y ejemplos Como ju-;gar la calidad de un test elaborado por el profesor: Observar los indicadores. Analisis elementos. Comprobar cia a un criterio
.
. . . . . . de la validez de! test y su fiabilidad. Evaluar test de dominio por referen.
314 322 324
325 329 329 334 341 350 352 353
359.
9
IN DICE Sintesis . . . . . . . . . . ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . Bibliograffa . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14. SELECCION
DE TESTS
ESTANDARDIZADOS
. .. . .. . . . .. . . . .. . . . . . . .. . .
371 372 37 5
Tests estandardi1,!ldos: cudlesy por qui: C Que hay de nuevo en la informacion que ofrecen? C Que ripos de decisiones se tornaran con los resultados? C Por que se debe usar un tipo concreto (rendimienro, aptitud, actuacion tfpica) . . . . . . . . Tests estandardi1,!ldos: como seleaionarlos: Definir eleccion, Obtener y examinar los materiales del leccion final Sinresis . . . . . . . . . . . . . . . . . . . . . . . . . . . . Bibliograffa . . . . . . . . . . . . . . . . . . . . . . . . . APENDICES APENDICE
.. . .. . .. .. . . . . . . .. . . .. . . . . . . .. . . las necesidades. Delimitar las posibilidades de test. Caracterfsticas importantes. Hacer la se. . .. . . . .. .. . . . . . . .. .. . .. . . .. . . . . . . . . .. . . .. . . . . . .. .. . . .. . . . . . . .. .
A: ESTADISTICA
Distribuciones de frecuencias .........•..•......•..........•............... Histogramas Diagramas lineales. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . D~scripcion.esnumi~ica~: T;n.dencia ~entral [moda, rnediana, media). Dispersion (range, desviaCIOn cuartil, desviacion tipica] . . . . . . . . . . . . . . . . . . . Medidas de relation, Correlacion. Fiabilidad Otros conceptos de medida: Puntuaciones derivadas (rango curva normal. Error tipico. Tabla de expectacion Bibliograffa ,................................................. APENDICE B: RESPUESTAS A LOS EJERCICIOS BIBLIOGRAFIA INDICE DE AUTORES . . . . . . . . .. . . . . .. .. . . .. .. IN DICE TEMATICO . . . . . . . . . . . . . . . . . . . . . . .. . . INDICE DE TAB LAS. FIGURAS Y GRAFICOS
10
. . . . . . . . . . . . . . . . . . . . . . . . . percentil, puntuaciones
376
383 401 401
405 406 408 408 413 419
tfpicas). La
. . . . . . .. . . . . .. .. . . . .. . . . . . . . .. . . . . . .. . . . . . . . . . .. . .
426 433 435 443 449 451 459
~,oy
Esta ÂŤguia practica para profesoresÂť esta pensada para ser un eficaz instrumento en sus manos a la hora de lograr una evaluacion objetiva que les ayude a enfrentarse con los problemas concretos de la clase, emitir [uicios, tomar decisiones y hacer predicciones de orden educacional. Se propone ofrecerles, paso a paso, una detallada descripci6n del proceso de la evaluaclon, segiin un modelo que se basa en unos principios .que le proporcionan la base teorica necesaria para la construccion y aplicacion de las tecnicas adecuadas. Los tradicionales conceptos de validez y fiabilidad, y el enfrentamiento con el error de medici6n se abordan en terminos practices. A 10 largo de la obra se va explayando cada etapa del proceso evaluativo y se examinan sus procedimientos de aplicaci6n en el aula. Queda sefialada la importancia de la informaci6n de los resultados a los demas profesores del centro, al director, tuto res y padres de los alumnos. Se presentan unas claras orientaciones para la selecci6n y construcci6n de unos buenos instrumentos de recogida de informaci6n (tests estandarizados, pruebas elaboradas por el profesor, instrumentos sociornetricos, de rendimiento, disefios de proyectos y tareas) y de informes (escritos 0 por medio de entrevista). Los conceptos estadisticos van siendo explicados a medida que se va necesitando, pero cuentan con un apendice expresamente dedicados a ellos.
Terry D. Tenbrink, especialista en temas didacticos, es profesor de la Universidad
de Missouri.
I
ISBN
IIii
=-
norceo, s. o. de ediciones
9
9]O_OA
?B8d,"
'"'",-MNi-n
261013~O
,¢?gooo~