CONFIABILIDAD Y VALIDEZ

CONFIABILIDAD y VALIDEZ

CONFIABILIDAD Fiable, consistente, estable, fiel, predecible, fidedigno.

VALIDEZ Veracidad, exactitud, autenticidad, genuinidad, solidez.

Validez y Confiabilidad

Por qu son importantes?

Todo test tiene como finalidad medir una variable o conjunto de variables a travs de un nmero determinado de preguntas (tems).

CONFIABILIDAD
La confiabilidad de un instrumento de medicin se refiere al grado en que su aplicacin repetida al mismo sujeto produce resultados iguales. Cuando se habla de confiabilidad, se refiere a puntajes. El desempeo de cualquier persona respecto a cualquier variable consiste en un puntaje formado por tres componentes.

Puntaje observado = Puntaje verdadero + Puntaje de error Error de mtodo Error de rasgo

Puntaje verdadero, es un reflejo perfecto del valor verdadero de la variable, descontando cualesquier otras influencias internas o externas.
Puntaje de error, abarca las razones por las que el puntaje verdadero y el puntaje observado difieren. Error de mtodo. Se debe a la situacin de prueba ( mtodo de medicin, instrucciones poco claras, y dems ). Error de rasgo. Es caracterstica de la persona que esta presentando la prueba.

Cmo saber si un instrumento es confiable?

En la practica es imposible que una medicin sea perfecta, generalmente se tiene un grado de error. Existen diversos procedimientos para calcular la confiabilidad de un instrumento de medicin. Todos utilizan formulas que producen coeficientes de confiabilidad. Estos coeficientes pueden oscilar entre 0 y 1 . Donde un coeficiente de 0 significa nula confiabilidad y 1 representa la mxima confiabilidad.

Procedimientos para determinar confiabilidad

Medida de estabilidad ( test-retest). En este procedimiento , un mismo test de medicin es aplicado dos o ms veces a un mismo grupo de personas, despus de cierto periodo. Si la correlacin entre los resultados de las diferentes aplicaciones es altamente positiva, el instrumento se considera confiable.

Test-retest: Coeficiente de estabilidad temporal

1
2 3 4 5 6

7
8 9

13
14 15

1
2 3 4 5

7
8 9

13
14 15

10 16 11 17 12 18

10 16 11 17

12 18

Mtodo de formas paralelas. Aqu no se administra el mismo instrumento de medicin, sino dos o ms versiones equivalentes de ste. Las versiones son similares en contenido, instrucciones, tiempo, etc. El instrumento es confiable si la correlacin entre los resultados de los instrumentos son significativamente positivos. Los patrones de respuesta pueden variar poco entre las aplicaciones.

Mtodo de mitades partidas (split halves ) . Los dos mtodos anteriores requieren cuando menos dos administraciones de la medicin en el mismo grupo de individuos. En este mtodo requiere solo una aplicacin de la medicin. El total de tems es dividido en dos mitades y los resultados o puntuaciones de ambos son comparados. Si el instrumento es confiable, las puntuaciones de ambas mitades deben estar fuertemente correlacionadas. Un individuo con baja puntuacin en una mitad, tendr que mostrar tambin baja puntuacin en la otra mitad.

Dos mitades:
1
2 3 4 5 6

7
8 9

13
14 15

10 16 11 17 12 18

Coeficiente alfa de Cronbach. Requiere una sola administracin y produce valores que oscilan entre o y 1. El anlisis de confiabilidad permite estudiar las propiedades de las escalas de medicin y los tems que las componen. El procedimiento Reliability Analisis calcula algunas medidas comnmente usadas de confiabilidad de escalas y tambin provee informacin acerca de las relaciones entre tems individuales en la escala..

El coeficiente Alpha de Cronbach es un modelo de consistencia interna, basado en el promedio de las correlaciones entre los tems. Entre las ventajas de esta medida se encuentra la posibilidad de evaluar cunto mejorara (o empeorara) la confiabilidad del ndice si se excluyera un determinado tem

Consistencia Interna
1 4 16 10

13 7

9
12

3
15

18 6

Consistencia Alta.

8 2
Consistencia Baja.

17 11 5

14

Coeficiente de KR-20. Su interpretacin es la misma que el alfa de Kronbach.

VALIDEZ

De que la prueba o el instrumento que se esta usando realmente mida lo que necesita medir.

Aspectos importantes de la validez:

La validez se refiere a los resultados de la prueba y no a la prueba misma. La validez nunca es una cuestin de todo o nada . Los resultados de una prueba no son simplemente vlidos o no vlidos. Tiene una progresin desde escasa validez hasta mucha validez. La validez de los resultados de una prueba se deben interpretar dentro del contexto en que ocurre la prueba. 2 + 2 = ?

Tipos de Validez

Validez de Contenido. Es el grado en que una prueba representa el universo de reactivos del cual de extrajo y es til sobre todo para evaluar la utilidad de las pruebas que muestrean un rea de conocimiento en particular.

Validez de Criterio. Es una medida del grado en que una prueba est relacionada con algn criterio. Es de suponer que el criterio con el que se est comparando tiene un valor intrnseco como medida de algn rasgo o caracterstica.

Validez de Constructo. Se refiere al grado en que una medicin se relaciona consistentemente con otras mediciones de acuerdo con hiptesis derivadas tericamente y que conciernen a los conceptos (o constructos) que estn siendo medidos.

Validez
La validez de un cuestionario puede analizarse desde tres perspectivas: Validez interna Validez externa Validez convergente y/o divergente

Validez Interna
La validez interna se refiere en esencia a analizar a travs de pruebas estadsticas, si los tems que fueron desarrollapara medir cada escala o subescala se agrupan de acuerdo a lo esperado.

Validez Interna.
La validez se puede demostrar a travs de distintas pruebas de estadstica multivariada como por ejemplo:
Escalamiento multidimensional Anlisis factorial exploratorio Anlisis factorial confirmatorio.

Validez.
Supngase que se desarroll un test para medir las tres 7 13 dimensiones del compromiso 8 14 organizacional.
9 15

1
2

3
4 5 6

Los tems que se supone que miden 10 16 cada dimensin estn intercalados 11 17 en el cuestionario: Compromiso afectivo 12 18
Compromiso continuo Compromiso normativo

Validez.
Al aplicarse cualquiera de las 3 pruebas estadsticas antes mencionadas, se esperara que stas revelaran que los tems que se desarrollaron para medir a cada una de las tres dimensiones tienden a agruparse entre s.

Validez Interna
1 4 16 10 3 9 12 15 6 17 11 8 2 14 5 18

13 7

Validez Interna
Todos los mtodos antes sealados tienen como punto de partida, una matriz de correlaciones entre las puntuaciones que asignaron una muestra de sujetos a cada uno de los tems del cuestionario.

Validez Externa
Esta consiste en analizar si las escalas, dimensiones o facetas que mide un cuestionario, se correlacionan con algunas variables externas con las que existe una estrecha relacin segn lo marca la teora.

Validez convergente y divergente.

La primera se refiere en revisar si existe una relacin estrecha entre las puntuaciones usando el instrumento analizado y otro u otros que midan lo mismo.

Validez convergente y divergente.

La validez divergente consiste en analizar a travs de pruebas estadsticas, si las variables que mide el cuestionario se pueden diferenciar claramente de otras que son parecidas.

FACTORES QUE AFECTAN LA

CONFIABILIDAD Y VALIDEZ

1.- Improvisacin: por el poco o nulo conocimiento del proceso de elaboracin de un instrumento. 2.- Instrumentos utilizados en el extranjero, que no han sido validados en nuestro contexto. 3.- Instrumento no adecuado para las personas a las que se les aplica. 4.- Condiciones en las que se aplica el instrumento.

RELACIN ENTRE CONFIABILIDAD Y VALIDEZ

La relacin entre confiabilidad y validez es directa y fcil de entender : una prueba puede ser confiable, pero no vlida, pero una prueba no puede ser vlida si no es confiable. En otra palabras, la confiabilidad es una condicin necesaria, pero no suficiente, para la validez.

El proceso de medicin es un componente crtico de cualquier proyecto de investigacin e indispensable para llevarlo a buen trmino. Esta parte del proceso de investigacin tiene especial importancia, ya que una prueba sin los niveles apropiados de confiabilidad y validez de nada le sirve a usted ni a nadie ms. El empleo de herramientas de medicin mal diseadas hace que no podamos saber si vamos por buen camino o si nunca medimos con exactitud lo que queremos medir.

EJERCICIOS
Indique cules de las fuentes de error en la confiabilidad son de rasgo y cules son de mtodo No dormir lo suficiente la noche anterior. Instrucciones deficientes de la prueba. Vigilante que pasea demasiado durante la prueba. Instrucciones mal impresas y difciles de leer. Edad.