PROPRIETATILE TESTELOR PSIHOLOGICE

FIDELITATEA

The meter (m) is the Si unit of length and is defined as the length of the path traveled by light in vacuum during the time interval of 1/299 792 458 of a second. This replaces the two previous definitions of the meter: the original adopted by CGPM in 1889 based on a platinum-iridium prototype bar, and a definition adopted in 1960 based on a krypton86 radiation from an electrical discharge lamp. In each case, the change in definition achieved not only an increase in accuracy, but also progress toward the goal of using fundamental physical quantities as standards, in particular, the quantum mechanical characteristics of atomic systems.
- Taylor,1991.

Scorul la test
Orice scor la un test psihologic este rezultatul scorului real i al unei erori de msur: Xobservat = Xreal + e (e = eroarea de msur) Deviaii (+/-) de la performana real a subiectului Erori aleatoare vs. erori constante

Tipuri de fidelitate i metode de calcul a fidelitii unui test

Metoda consistenei interne
coeficientul de consisten intern

Fidelitate test-retest
coeficient de stabilitate

Metoda formelor paralele

coeficient de echivalen

Metoda fidelitii interevaluatori

coeficient interevaluatori

Fidelitatea estimata pe baza consistentei interne

Reliability
Metod utilizat pentru a determina gradul n care toi itemii unui test msoar aceeai variabil Un coeficient de consisten ridicat exprim faptul c toi itemii testului se refer la aceeai variabil Are valori intre 0 si 1 Presupune o singur aplicare a testului Coeficienii de consisten intern cei mai des utilizai: Alpha Cronbach () pentru testele cu orice tip de itemi; cel mai des utilizat pentru evaluri obiective 3 Guttman; 20 i 21 Kuder Richardson (dac itemii testului sunt binari). Valoarea minima acceptata este 0.60

Consistenta interna
Item 1 - Memorie Item 2 - Memorie Item 3- Memorie Item 4 - Memorie Item 5 Personalitate

Care este corelatia intre itemul 5 si ceulalti itemi/scor total?

Consistenta interna prin Metoda njumtirii

Split Half method Itemii testului sunt mpri n 2 i se calculeaz corelaia dintre jumti Itemi pari / impari sau prima/a doua jumatate Etape:
mparirea testului n jumti echivalente Calcularea coeficientului Pearson pentru cele 2 jumti

Fidelitatea estimata pe baza Metodei test-retest

Corelaia scorurilor la un test administrat n dou perioade diferite de timp Coeficienii de fidelitate test-retest Sunt coeficieni ai stabilitii n timp Au valori mai mari dect coeficineii obinui din administrarea formelor paralele Dezavantaj: solicit 2 administrri ale testului Se utilizeaz n cazul testelor care msoare constructe relativ stabile in timp. Timpul administrrii crete, corelaia scade Interval recomandat: 4-8 saptmni.

Factori care influeneaz calculul fidelitii test-retest (stabilitii): Intervalul de timp ntre test i retest Gradul de dificultate al itemilor Schimbri ale subiectului determinate de prima aplicare

Metoda formelor paralele

Corelaia scorurilor obinute din utilizarea a dou forme paralele ale testului Coeficientul de corelatie intre scorurile observate se numeste coeficient de echivalenta Se presupune c scorul subiectului va fi la fel dac cele 2 forme sunt ntr-adevr paralele Eroarea standard de msur ar trebui s fie la fel, dac formele sunt paralele Itemii celor dou teste trebuie s fie logic izomorfi, adic s aib acelai nivel de dificultate. Metoda este potrivita cnd se msoar caracteristici generale ale persoanelor

 Avantaje: Nu permite memorarea rspunsurilor de la primul test Nu permite cutarea rspunsurilor la care nu s-a stiut rspunde Dezavantajele acestei metode sunt urmtoarele: necesit consum de timp prin dou administrri; subiecii se pot plictisi dac testrile sunt prea lungi; este greu de realizat fiind dificil i costisitoare. Un procedeu asemntor este utilizarea formelor paralele la interval mai mare de timp. n acest caz se obine coeficientul de echivalen i stabilitate. Utilizare: pentru obinerea unei colecii de teste paralele (ex. In psihoterapie, la administrarea in timp sxurt a unor teste de anxietate subiectii nu sunt tentati sa repete rspunsurile anterioare)

Fidelitatea inter-evaluatori
Pentru testele cu o cotare subiectiv, la care scorul este influenat i de interpretarea pe care o d persoana care face cotarea Are la baz calculul coeficientului de corelaie ntre scorurile pe care mai muli evaluatori le acord aceluiai test coeficient de fidelitate inter-evaluatori

Interpretarea unui coeficient de fidelitate

Murphy & Davidshopher (1998) - repere n interpretarea coeficienilor de fidelitate

Valori ale Tipul testului coeficieni lor de fidelitate 0.95 0.90 0.85 0.80 0.75 0.70 0.65 0.60 0.55 0.50 Testele de inteligen de grup Testele de performan Testele cu rspunsuri multiple Scalele comportamentale

Interpretare

Fidelitate mare

Fidelitate moderat

Unele msurtori proiective

Fidelitate sczut
Scorul real i eroarea au efect egal asupra scorurilor la test

Recomandri:
Pentru teste folosite n selecia de personal se cer coeficieni de fidelitate mai mari de 0.9 Teste utilizate pentru rezultate preliminare sau care mpart subiecii n categorii puine , pe baza unor diferene indivisuale mari niveluri sczute de fidelitate Teste pentru compararea grupelor de persoane : coef. ntre 0.6-0.7 Teste pentru compararea persoanelor una cu alta : coeficient mai mare de 0.85 Fidelitatea testelor de personalitate i interese este mai mic dect cea a testelor cognitive Testele cotate obiectiv : coeficieni mai mari de 0.8 Testele cotate subiectiv: coeficieni mai mici de 0.8 Testele standardizate de cunotine fidelitate moderat spre mare Testele cu alegere multipl de la clas fidelitate aprox. 0.75

Fidelitatea i tipul testului

Test de performan Teste n care fiecare subiect are timp suficient pentru completarea itemilor Calcularea fidelitii prin: Metoda njumtirii sau calcului coeficientului de consisten intern Test de vitez Teste n care se ateapt ca subiecii s nu termine realizarea itemilor Calcularea fidelitii prin: Metoda njumtirii pentru jumtile de test cronometrate separat

Itemii testului: Omogeni consisten intern crescut Heterogeni (constructe multidimensionali) consisten intern sczut, se recomand calculul coeficientului test retest

Dinamic vs static: - Test cu caracteristici dinamice calcularea coef. de consisten intern (ex. Masurarea anxietii) - Caracteristici statice metoda test-retest sau forme paralele (ex. Msurarea inteligenei)

 Testul msoar o caracteristic durabil, scorurile atrag concluzii valabile pe o perioad de timp = metoda testretest Nu se poate asigura retestarea dup un interval de timp suficient de lung = metoda formelor paralele Testul se compune din itemi care tim c msoar aceeai caracteristic = coeficient de consisten intern Teste care nu au o cotare obiectiv = coeficient de fidelitate inter-evaluatori Valoarea coef. de consisten intern > valoarea coef. de echivalenta > coeficientii de stabilitate

Factori care intervin n estimarea coeficienilor de fidelitate

Eantionul ales s fie ct mai voluminos Eantionul s fie reprezentativ pentru populaia creia i este destinat testul Msurtorile efectuate s fie independente ntre ele (testarea unui subiect s nu influeneze testarea celorlali) Dac se impune ca o persoan s rspund de 2 ori la un test, trebuie utilizate forme paralele Dac se calculeaz un coeficient de consisten intern, itemii testului s fie independeni ntre ei (s nu se condiioneze) Procedura de administrare a testului i retestului sau a formelor paralele s fie identic i aceeai cu cea din pracitc

Implicatii ale fidelitatii testului

Orice scor la un test psihologic este rezultatul scorului real i al unei erori de msur: Xobservat = Xreal + e (e = eroarea de msur) Deviaii (+/-) de la performana real a subiectului Erori aleatoare vs. erori constante

Calculul intervalului de ncredere (IC)

IC = Xobservat + z*SEm
Eroarea standard de masura
Este abaterea standard a unui scor obinut referitor la scorul real Aceste distribuii sunt aceleai pentru fiecare scor real Cu ct e mai mic eroarea standard de msur, cu att e mai fidel testul

SEm = SD*

(1 r )

SEm= eroarea standard de msur SD= abaterea standard a scorurilor la test; r= coeficientul de fidelitate r = coeficientul de fidelitate al testului

Calculul intervalului de ncredere (IC)

IC = Xobservat + z*SEm
65% din scoruri se afl ntre +/- 1 abateri std 95 % din scoruri se afl ntre +/- 2 abateri std 99% din scoruri se afl ntre +/- 3 abateri std Alegerea scorului z care va intra n calcul se face n funcie de precizia cu care dorim s lucrm: o probabilitate de 95% - scorul z corespunztor este de 1.96 o probabilitate de 90% scorul z corespunztor este de 1.65 Etape de calcul: - calcularea erorii standard de masura - alegerea scorului z cu care vrem sa lucram, in functie de precizia dorita - calcularea intervalului de incredere Intervalul de ncredere depinde de: Coeficientul de fidelitate al testului: dac avem un coeficieni de fidelitate mici, atunci intervalul se mrete, deci eroarea este mai mare Intervalele folosite (68%, 90%, 95%): interval mare, siguran mai mare a intervalului n care se afl scorul real Abaterea standard a scorurilor la test

Exemplu
Presupunem c la un test de inteligen o persoan a obinut un scor de 115. Coeficientul de fidelitate alpha este de 0,98, iar abaterea standard a scorurilor la test este de 15. Cum aflm intervalul n care se gsete scorul real al persoanei la test? 1. Calculm eroarea standard de msur SEm = 2.12 2. Calculm intervalul de ncredere IC = Xobservat + z*SEm IC = 115 + z*2.12 Alegerea scorului z care va intra n calcul se face n funcie de precizia cu care dorim s lucrm. Dac alegem s lucrm cu o probabilitate de 95% scorul z corespunztor este de 1.96 . Pentru o probabilitate de 90% scorul z corespunztor este de 1.65. n acest exemplu s vom lucra cu o precizie de 95%, deci z=1.96. Astfel vom avea: IC = 115 + 1.96*2.12 IC= 115 + 4.15 n acest caz putem spune cu o probabilitate de 95% c scorul real al persoanei se gsete n intervalul 110.85 119.15.

Aplicatie
Un manager vrea sa angajeze o persoana si stabileste ca scorul minim obtinut la test sa fie 87. Testul are un coeficient de fidelitate de 0.88 si abaterea standard de 12.40. O persoana obtine scorul de 85 , alta de 80. Il puteti elimina pe cel cu scor de 80 pentru ca are scor mai mic?

Fidelitatea
Msur:
a consistenei msurtorii (in timp si inter-evaluatori) i a stabilitii n timp a rezultatelor

Gradul n care un set de itemi ai testului msoar constant acelasi lucru

Stim ce masuram??? Un test poate fi fidel, fr a fi valid; fidelitatea este necesar, dar nu este o condiie suficienta pentru validitate Validitatea garanteaz un anumit grad de fidelitate