Universidad Catlica del Uruguay

Facultad de Ciencias Humanas

Autotexto N 5
Serie Estadstica

Construccin de Indices. Confiabilidad: Alpha de Cronbach

Laboratorio Metodolgico
Autores: Juan Bogliaccini Manuel Cardoso Federico Rodrguez 2005

Mdulo de Prctica de Anlisis Serie Estadstica Tema: Construccin de ndices y su confiabilidad

1. Descripcin: Muchas variables utilizadas en investigacin en ciencias humanas son latentes (Kerlinger, pgs. 37-8), y esto es especialmente cierto de algunas de las variables ms relevantes desde el punto de vista terico: status socio-econmico, inteligencia, logro acadmico, cultura organizacional, por mencionar solamente algunos ejemplos. Estas variables no pueden ser medidas en forma directa, a travs de un nico indicador (a diferencia de las observables). Una de las formas habituales de medir variables latentes son los ndices sumatorios, ya sean simples o ponderados. 2. Ejemplo: En el estudio "Los docentes uruguayos y los desafos de la profesionalizacin" se maneja una batera de indicadores orientados a medir el orgullo de ser uruguayo (ver Anexo III, en ANEP-IIPE/UNESCO). La base de datos "orgullo" contiene los valores de cada uno de los 14 indicadores para una muestra aleatoria de 1500 casos, extrada a su vez de la muestra (tambin aleatoria) de 2993 docentes de Primaria, Secundaria y UTU que respondieron a la encuesta.

3. Ejercicio de revisin: Describa en forma univariada cada uno de los indicadores (Ver autotexto 1, "Anlisis descriptivo univariado de variables categricas"). 4. Procedimiento: Para crear una nueva variable a partir de los valores de variables ya existentes, existen diversos procedimientos incluidos en el men Transform. Uno de esos procedimientos, Compute, me permite crear una variable numrica que sea el resultado de una combinacin de variables, constantes, operaciones aritmticas, operaciones o condiciones lgicas y/o funciones.

En este caso, crearemos la variable p95iss (ndice sumatorio simple de los indicadores de la pregunta 95) usando la funcin MEAN para calcular la media de los 14 indicadores, como se observa abajo: 1. Se ingresa el nombre de la nueva variable en el recuadro Target Variable 2. Se selecciona MEAN del men Functions 3. Se introducen en los parntesis, separados por comas, los nombres de los 14 indicadores de la pregunta 9.5. 4. Se ejecuta el procedimiento, oprimiendo el botn OK.

5. Ejercicio de Revisin: Describa en forma univariada el ndice resultante, teniendo en cuenta su nivel de medicin (Ver autotexto 2, "Anlisis descriptivo univariado de variables continuas").

Como la inclusin de los 14 items obedeci a criterios conceptuales o tericos, nada asegura que efectivamente todos los items pertenezcan a la dimensin. La pregunta es naturalmente, cules items pertenecen y cules no. En el procedimiento de ndices sumatorios el test que nos permite despejar esta duda, se efecta calculando la fuerza de las correlaciones de los items entre s o de cada item con el ndice. Intuitivamente, la idea es sencilla, todos los items que presentan correlaciones altas formarn parte del ndice, los que tienen correlaciones bajas es ms probable que no formen parte y por lo tanto se eliminan. (tener presente las fortalezas y debilidades de un test de esta naturaleza). CONFIABILIDAD 1. Concepto: La confiabilidad es la "exactitud o precisin de un instrumento de medicin" (Kerlinger, p. 459). Existen distintos tipos de confiabilidad: la estabilidad a travs del tiempo (medible a travs de un diseo test-retest); la representatividad, que se refiere a la ausencia de variaciones en la capacidad del instrumento para medir un mismo constructo en distintas subpoblaciones; y por ltimo la equivalencia, que se aplica a las variables latentes, medidas a travs de mltiples indicadores, y que se puede poner a prueba mediante diversos mtodos, incluyendo el llamado Alpha de Cronbach, split-half, y distintas formas de verificar la consistencia entre evaluadores.(Neuman, pgs. 127-8). 2. Procedimiento: El anlisis de confiabilidad permite estudiar las propiedades de las escalas de medicin y los tems que las componen. El procedimiento Reliability Analisis calcula algunas medidas comnmente usadas de confiabilidad de escalas y tambin provee informacin acerca de las relaciones entre tems individuales en la escala. El coeficiente Alpha de Cronbach es un modelo de consistencia interna, basado en el promedio de las correlaciones entre los tems. Entre las ventajas de esta medida se encuentra la posibilidad de evaluar cunto mejorara (o empeorara) la confiabilidad del ndice si se excluyera un determinado item.

El procedimiento consiste en: 1. Seleccionar los indicadores que conforman el ndice. 2. Seleccionar el tipo de anlisis a utilizar, en el men Model: en este caso elegimos la opcin por defecto, Alpha. 3. Oprimir el botn Statistics, para solicitar informacin adicional. 4. En el men de Statistics, marcar la opcin Scale if item deleted, que me permite evaluar qu ocurrira con la confiabilidad de la escala si excluyo cada uno de los tems. 5. Salir del men Statistics presionando el botn Continue. 6. Ejecutar el procedimiento presionando el botn OK.

3. Anlisis de resultados: A mayor valor de Alpha, mayor confiabilidad. El mayor valor terico de Alpha es 1, y en general .80 se considera un valor aceptable. En este caso, el valor de 0.7943 se encuentra bastante prximo, pero ya veremos que existen posibilidades de

elevar la confiabilidad del ndice. Para ello, es recomendable observar las dos ltimas columnas del anlisis tem por tem: La columna etiquetada Corrected Item-Total Correlation proporciona una medida de la correlacin entre el tem y el ndice, que como toda medida de correlacin vara entre -1 y 1. Si algn tem presenta correlaciones negativas, o bien correlaciones positivas muy leves, es probable que sea recomendable excluir el tem del ndice. Obsrvese que el tem 95b tiene el coeficiente de correlacin ms bajo. La columna etiquetada Alpha if item deleted proporciona el valor del coeficiente de confiabilidad Alpha de Cronbach para el caso hipottico en que se excluyera un determinado tem del clculo del ndice. Obsrvese que la exclusin del tem 95 y/o el tem 95b permitira un aumento del valor de Alpha, pero la ganancia en confiabilidad sera mayor si se excluyera el tem 95b. ****** Method 1 (space saver) will be used for this analysis ****** _

R E L I A B I L I T Y A N A L Y S I S - S C A L E (A L P H A) Item-total Statistics Scale Mean if Item Deleted P95A P95B P95C P95D P95E P95F P95G P95H P95I P95J P95K Scale Corrected Variance ItemAlpha if Item Total if Item Deleted Correlation Deleted 7.9944 8.1650 7.9656 7.4773 8.0235 7.4255 7.9768 7.2856 7.7840 8.1953 8.6116 .2850 .2396 .4639 .5224 .3744 .5765 .4947 .5921 .4888 .4142 .2526 .7951 .7984 .7784 .7716 .7849 .7667 .7768 .7645 .7756 .7828 .7926

16.5357 16.6229 16.8071 16.6343 16.1607 16.6807 16.8279 16.6114 16.7593 16.8493 16.8950

P95L P95M P95N

16.8743 16.6371 16.5750

8.4474 7.8082 7.6370

.3147 .3861 .4320

.7892 .7847 .7806

Reliability Coefficients N of Cases = 1400.0 Alpha = .7943 N of Items = 14

4. Procedimiento: Se excluye el tem 95b y se repite el procedimiento descrito en la pgina 4.

10

5. Anlisis de resultados: Se repite el anlisis de la instancia anterior, y se procede en forma iterativa, excluyendo tems uno a uno hasta que ya no se producen ganancias en el valor de Alpha aunque se excluya cualquiera de los tems. ****** Method 1 (space saver) will be used for this analysis ****** R E L I A B I L I T Y A N A L Y S I S - S C A L E (A L P H A) Item-total Statistics Scale Mean if Item Deleted P95A P95C P95D P95E P95F P95G P95H P95I P95J P95K P95L P95M P95N Scale Corrected Variance ItemAlpha if Item Total if Item Deleted Correlation Deleted 7.2372 7.1464 6.6472 7.2502 6.5857 7.1216 6.4601 6.9612 7.3328 7.7650 7.5943 6.9748 6.8191 .2548 .4605 .5353 .3459 .5967 .5123 .6077 .4920 .4301 .2445 .3171 .3911 .4343 .8043 .7830 .7747 .7923 .7687 .7796 .7669 .7797 .7862 .7979 .7938 .7894 .7854

15.1953 15.4669 15.2944 14.8204 15.3407 15.4875 15.2708 15.4191 15.5089 15.5545 15.5339 15.2965 15.2352

Reliability Coefficients N of Cases = 1403.0 Alpha = .7984 N of Items = 13

Dados estos resultados que nos permiten alcanzar valor de Alpha de casi .80, continuamos eliminando items? qu ventajas obtenemos si lo hacemos? lo

11

que gano de incremento del Alpha justifica seguir adelante con la depuracin de items, o gano muy poco? Para responder a estas interrogantes es necesario tener en cuenta que el nmero ideal de items no se define slo por el test de correlaciones sino por la inconveniencia de tener cuestionarios muy extensos y costosos. Si con 7 items obtengo en un pre-test un Alpha muy prximo al encontrado con 13 items, parece razonable definir el ndice por el nmero menor de items si el instrumento ser empleado en el estudio final.

Bibligrafa De Referencia - Pea, D. Romo, J - Introduccin a la Estadstica para las Ciencias Sociales. Mc Graw Hill 1997. - Mason y Lind - Estadstica para administracin y economa. Alfaomega 1998. Mxico, D.F. 8 edicin.

6. Ejercicio de revisin: Calcule un nuevo ndice sumatorio simple "depurado" (al que llamar p95iss2), que maximice la confiabilidad y describa en forma univariada el ndice resultante, teniendo en cuenta su nivel de medicin (Ver autotexto 2, "Anlisis descriptivo univariado de variables continuas").

12

7. Ejercicio: Complete la siguiente tabla con el resumen de los resultados fundamentales de los anlisis de confiabilidad realizados: Tabla 1: Evolucin del coeficiente Alpha de Cronbach, de los coeficientes de correlacin de cada tem con el total del ndice, y del promedio de dichos coeficientes, a medida que se van excluyendo tems del ndice. 1 2 3 4 Corr. Alpha Corr. Alpha Corr. Alpha Corr. Alpha 1. Los logros deportivos 0,2850 0,7951 0,2548 0,8043 2. Los avances en la ciencia y la tecnologa 0,2396 0,7984 3. La democracia y las libertades pblicas 0,4639 0,7784 0,4605 0,7830 4. El respeto a los derechos humanos 0,5224 0,7716 0,5353 0,7747 5. Los logros en el desarrollo econmico 0,3744 0,7849 0,3459 0,7923 6. El respeto al derecho de los dems 0,5765 0,7667 0,5967 0,7687 7. La libertad de expresin 0,4947 0,7768 0,5123 0,7796 8. El respeto a los derechos sociales 0,5921 0,7645 0,6077 0,7669 9. La defensa de la paz entre los pueblos del mundo 0,4888 0,7756 0,4920 0,7797 10. La tolerancia y el respeto a todas las ideas y religiones 0,4142 0,7828 0,4301 0,7862 11. La msica, la literatura, las artes plsticas, etc. 0,2526 0,7926 0,2445 0,7979 12. La apertura a los inmigrantes de todas las 0,3147 0,7892 0,3171 0,7938 nacionalidades 13. El nivel cultural de la poblacin 0,3861 0,7847 0,3911 0,7894 14. La ausencia de desigualdades extremas 0,4320 0,7806 0,4343 0,7854 Correlacin promedio y alpha total de la escala 0,4169 0,7943 0,4325 0,7984 8. Problema: Discuta la conveniencia de utilizar una u otra versin del ndice, teniendo en cuenta los conceptos de confiabilidad y parsimonia, e incorporando las consideraciones tericas y sustantivas que estime pertinentes.

13