Curso para Formaci贸n de Tutores
Validez y confiabilidad Ing. Waleska Perdomo C谩ceres Msc.
www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
Agenda o Pre-ambulo o Validez o Confiabilidad
o Calculo de la validez del contenido o C谩lculo de la confiabilidad o Calculo de coeficiente de medici贸n en el tiempo o Calculo de coeficiente de consistencia interna
o A manera de Conclusi贸n
www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
«Piensa por ti mismo, valida todo por ti mismo. Tus conclusiones no tienen que en ser las mismas que las del otro. Tienes derecho a pensar y a cuestionar » Kok Sui
PREÁMBULO www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
Validez • Características de la validez • Definiciones y Conceptos de Validez • Tipos de Validez: • • •
De Contenido De Criterio De Constructo
• • • •
Triangulación entre investigadores Triangulación entre Teorías Triangulación entre Informantes Triangulación entre Métodos Triangulación entre Datos
www.parquesinapsix.com -
Contenido • Juicio de Expertos
• Factores que afectan la validez • Métodos para verificar la validez: •
Cálculo de la Validez Criterio • Coeficiente de Validez
Constructo • Análisis de Factores
www.lineadeinvestigacion.blogspot.com
Confiabilidad • Concepto de Confiabilidad • Tipos de Confiabilidad • Técnicas para obtener la confiabilidad • Confiabilidad a través del tiempo • Consistencia interna • Confiabilidad entre evaluadores
Confiabilidad A través del tiempo • Prueba – Reprueba • Pruebas Paralelas
Consistencia Interna • Alfa de Cronbach • Spearman Brown • Richard Kuderson
Confiabilidad entre evaluadores • Juicio de Expertos
www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
1 2 3
4 5
6
Construcci贸n L贸gica de la secuencia del trabajo de investigaci贸n www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
La validez apunta al blanco de la Diana
www.parquesinapsix.com -
La confiabilidad apunta hacia un lugar especifico sin necesidad de ser en el blanco
www.lineadeinvestigacion.blogspot.com
CALCULO DE LA VALIDEZ DEL CONTENIDO DEL INSTRUMENTO Curso para formaci贸n de tutores
www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
Planilla de Validaci贸n de Contenido
Item
EJEMPLO: Suponiendo que uno de los expertos llena la planilla de validaci贸n en la siguiente forma: Congruencia D
R
B
S
1 2
O
D
R
B
S
O
X
4
X
F
X X
X X
R
P X
X
X
B
X
X X
Observaciones
Tendenciosidad
X
3
5
Claridad
X X
M
Modi f
Elim in
Planilla de Validaci贸n de Contenido Primer paso: Se suman los valores para cada columna:
Item
Congruencia D
R
B
S
1 2
O
D
R
B
S
X
4
X
5 0
2
F
X 1
R
0
0
0
2
P
M
X X
X 1
B
X
X X
1
O
X
X X
Observaciones
Tendenciosidad
X
3
危
Claridad
X X
3
3
1
0
1
0
Mo dif
Eli mi n
Validez de Contenido Se llevan las valoraciones a números Congruencia y Claridad O = Óptimo = 5 S = Satisfactorio = 4 B = Bueno = 3 R = Regular = 2 Tendenciosidad D = Deficiente =1 M = Mínima = 5 P = Poca = 4 R = Regular = 3 B = Bastante = 2 F = Fuerte =1
Planilla de Validaci贸n de Contenido
Item
Segundo Paso: Se multiplica por el valor dado a cada columna Congruencia D
R
B
S
1 2
D
R
B
S
O
X
4
X
5
F
B
R
X
X X
*
O
P
M
X X
X
X X
X
Observaciones
Tendenciosidad
X
3
危
Claridad
X
X X
1
0
2
1
1
0
0
0
2
3
3
1
0
1
0
1
2
3
4
5
1
2
3
4
5
1
2
3
4
5
1
0
6
4
5
0
0
0
8
15
3
2
0
4
0
Mo dif
Eli mi n
Planilla de Validaci贸n de Contenido Tercer Paso: Se suman los valores obtenidos Item
Congruencia D
R
B
S
1 2
D
R
B
S
O
X
4
X
5
F
B
R
X
X X
*
O
P
M
X X
X
X
X X
Observaciones
Tendenciosidad
X
3
危
Claridad
X
X X
1
0
2
1
1
0
0
0
2
3
3
1
0
1
0
1
2
3
4
5
1
2
3
4
5
1
2
3
4
5
1
0
6
4
5
0
0
0
8
15
3
2
0
4
0
16
23
9
Mo dif
Eli mi n
Planilla de ValidaciĂłn de Contenido Cuarto paso: Se dividen los valores obtenidos entre el valor mĂĄximo posible (5 items x 5 ptos = 25), y se Multiplica por el nĂşmero total de items para obtener el promedio ponderado:
(16/25)x5=3,2
(23/25)x5=4,6
Congruencia D
R
B
S
(9/25)x5=1,8
Claridad O
D
R
B
Tendenciosidad S
O
F
B
R
16
23
9
25
25
25
3,2
4,6
1,8
P
M
Validez de Contenido Se calcula el promedio ponderado para cada una de las tres valoraciones, dadas por el validador, y luego se obtiene un promedio general Validador
Congruencia
Claridad
Tendenciosidad
A
3,2
4,6
1,8
B
4
5
2,5
C
4
4
1,2
Promedio
3,73
4,53
1,8
Del an谩lisis de este cuadro se toman las acciones pertinentes: Valoraci贸n general: 3,35 = Regular Tendenciosidad: 1,8 = Bastante Claridad: 4,53 (hacia 贸ptima) Congruencia: 3,73 (regular hacia satisfactoria)
Promedio
3,35
CALCULO DE LA CONFIABILIDAD Curso de Formaci贸n de Tutores
www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
• El concepto confiabilidad, tal como se aplica en la medición en las ciencias sociales, desemboca en diversos métodos de comprobación que se traducen en coeficientes. • La confiabilidad expresa el grado de precisión de la medida. • Si baja la fiabilidad, sube el error. Entonces los resultados podrían variar de una medición a otra. • Un instrumento puede ser válido, porque mide lo queremos medir, pero lo puede medir con un margen de error grande. Para evitarlo se aplica la comprobación de la confiabilidad.
Test para la medición en Ciencias Sociales www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
COEFICIENTES DE MEDICIÓN EN EL TIEMPO Curso para Formación de Tutores
www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
Definición • Los sujetos responden dos veces al mismo test, dejando entre las dos veces un intervalo de • tiempo. El coeficiente de correlación entre las dos ocasiones es lo que denominamos coeficiente de confiabilidad testretest
Test-retest www.parquesinapsix.com -
• Método intuitivo de confiabilidad. Es fiable si arroja los mismos resultados para cada aplicación. • No usar si esta previsto un cambio de sujetos, o cuando entre la primera y segunda vez se puede dar un aprendizaje. • Es un coeficiente o indicador de estabilidad o de no ambigüedad en la medida en que ambas ocasiones los resultados son parecidos. • Puede tener alta confiabilidad Test-retest pero sin consistencia interna.
www.lineadeinvestigacion.blogspot.com
Aplicaci贸n Test-Retest www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
• Se utiliza cuando se preparan dos versiones del mismo test con ítems son distintos pero ambos pretenden medir lo mismo. • El coeficiente de fiabilidad es la correlación entre las dos formas paralelas, respondidas por los mismos sujetos.
Pruebas paralelas www.parquesinapsix.com -
• Es un coeficiente de equivalencia entre los dos tests. • La correlación es alta si: las dos formas del mismo test dan resultados parecidos, ordenan a los sujetos de manera similar, ambas formas son intercambiables. • La correlación es baja si: los sujetos han cambiado, las dos formas no están equilibradas en sus contenidos y miden cosas distintas. • Se puede confirmar si las dos formas son paralelas al comprobar si la correlación media inter-ítem dentro de cada forma es similar, lo mismo que la correlación de los items. • Este tipo de confiabilidad, o prueba de equivalencia, es necesario siempre que se disponga de dos o más test.
www.lineadeinvestigacion.blogspot.com
COEFICIENTES DE CONSISTENCIA INTERNA Curso para Formaci贸n de Tutores
www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
• Los sujetos son distintos en aquello que se les está midiendo. • Las diferencias observadas en los sujetos, las preguntas realizadas no concretas, la respuesta que da el sujeto, la no objetividad en el instrumento son lo que llamamos errores de medición.
Supuestos de medición de Instrumentos www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
Xt= Xv+Xe Diferencias Observadas entre sujetos
Varianza Total
Es mayor si los sujetos difieren mucho, hay mas confiabilidad
=
Diferencias Verdaderas
+
Diferencias Falsas
Varianza Debida a errores Varianza Verdadera
Respuestas Coherentes, items relacionads, los items miden lo mismo
Varianza Verdadera www.parquesinapsix.com -
Dónde: Xt: Puntuación Total del Sujeto Xv: Puntuación Verdadera del Sujeto según lo que se está midiendo Xe: Puntuación con errores de medición
www.lineadeinvestigacion.blogspot.com
Errores de medición, items no relacionados, incoherencia en las respuestas
Varianza: xi
Desviación Típica:
fi
xi · fi xi2 · fi
[10, 20)
15 1
15
225
[20, 30)
25 8
200
5000
[30,40)
35 10 350
12 250
[40, 50)
45 9
405
18 225
[50, 60
55 8
440
24 200
[60,70)
65 4
260
16 900
[70, 80)
75 2
150
11 250
42 1 820 88 050
Calculo de la Varianza y Desviación Típica www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
La muestra son dos grupos de cuatro sujetos cada uno responden en forma positiva (1) o Negativa (0) a 2 items de las preguntas: 1. En casa me lo paso muy bien con mis padres [sí=1 y no =0] 2. A veces me gustaría marcharme de casa [sí = 0 y no = 1]
Kuder- Richardson 20 (1937) www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
Cuanto más se aproxime a su valor máximo, 1, mayor es la fiabilidad de la escala.
La expresión [k/(k-1)] (k= número de ítems) El segundo miembro de esta fórmula, que es el que realmente cuantifica la proporción de varianza debida a lo que los ítems tienen en común o de relacionado, puede alcanzar un valor máximo de [(k-1)/k] y esto solamente en el caso improbable de que todas las varianzas y covarianzas sean iguales. Como [(k-1)/k] x [k/(k-1)]= 1, al añadir a la fórmula el factor [k/(k-1)] hacemos que el valor máximo posible sea 1.
Alfa de Cronbach (1951) www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
Alfa de Cronbach (1951) www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
• En una sociedad globalizada, de naturaleza compleja, múltidimensional e interconectada no caben discusiones de abordajes investigativos. • No tiene sentido hacer una separación de enfoques de investigación cuando se está abordando una realidad sistemica, colaborativa y extensa • Así que la vieja controversia existente entre lo cuantitativo y lo cualitativo equivale a comparar la correspondencia entre lo virtual y lo físico: Ya no existe. • Indagar los fenómenos actuales requiere de un enfoque holistico, perspectiva analítica y múltidisciplinariedad en la investigación
A manera de Conclusión www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com
• • • •
E-mail: wperdomo@parquesinapsix.com On Twitter: @sinapsix Web: www.parquesinapsix.com Blog: www.lineadeinvestigacion.blogspot.com
Contactos: www.parquesinapsix.com -
www.lineadeinvestigacion.blogspot.com