Professional Documents
Culture Documents
de evaluare o constituie natura ntrebrilor, modul de formulare i de adresare (exprimare) i, n legtur cu acestea, tipul de solicitare implicat n formularea verbal. O ntrebare adresat memoriei studenilor va genera un rspuns repetitiv, reproductiv sau, dup caz, un rspuns incomplet sau chiar nonrspuns. Mai mult dect att, un astfel de gen de ntrebri va induce la studeni un stil de nvare, bazat pe memorare i reproducere. Principalele cerine privind natura, formularea i exprimarea ntrebrilor pot fi sintetizate astfel: a) ntrebrile trebuie s fie formulate clar, ntr-un limbaj explicit, fr ambiguiti de sens, iar solicitarea trebuie s fie sintetic i direct. Cnd ntrebarea se refer la o problem mai complex, sau cnd presupune precizri suplimentare care s direcioneze gndirea studenilor, se recomand ca formularea ntrebrii s cuprind dou pri: o parte explicativ, cu rol introductiv sau de lmurire a contextului i o parte constnd n ntrebarea propriu-zis, care trebuie s fie scurt i precis. b) Fiecare ntrebare trebuie s exprime direct i explicit natura i coninutul solicitrii adresate studenilor (studenii s neleag ce li se cere) i genul de rspuns pretins (reproductiv sau creativ, scurt sau detaliat etc.). Cu alte cuvinte, obiectul ntrebrii trebuie s fie clar, iar, dac apar dificulti, profesorul trebuie s verifice dac studenii au identificat i au neles corect acest obiect. c) ntrebrile nu trebuie s sugereze rspunsul i nici c un rspuns ar fi mai bun iar altul mai ru. Sugestia poate fi generat att prin modul de formulare, ct i prin modul de exprimare. d) ntrebrile nu trebuie s cuprind simultan mai multe solicitri i, mai ales, s nu cuprind mai multe solicitri foarte diferite, care ar presupune zone diferite de concentrare mental. n cazul n care verificarea urmrete capacitatea studenilor de a stabili relaii, de a efectua transferul de cunotine, de a combina algoritmi diferii, se recomand ca aceste aspecte s fie solicitate i puse n eviden nu printr-o singur ntrebare, ci printr-un lan de ntrebri n care fiecare nou ntrebare s aib n vedere i rspunsurile date de studeni la ntrebrile precedente. 2. Cerine privind formularea i acceptarea rspunsurilor . Cealalt component a conversaiei de evaluare o constituie rspunsurile date de studeni. De fapt, relaia ntrebare-rspuns formeaz o unitate indisociabil; calitatea rspunsurilor date de studeni nu poate fi apreciat separat de calitatea ntrebrilor puse de profesor, iar fiecare nou ntrebare nu trebuie s fie formulat independent de rspunsurile date de studeni la ntrebrile anterioare. Similar ntrebrilor, i rspunsurile studenilor trebuie s respecte anumite cerine: a) Rspunsurile trebuie s fie corecte i complete, formulate fluent, coerent i expresiv. Profesorul trebuie s descurajeze tendina studenilor de a da rspunsuri recitate, monotone, eliptice sau fragmentate. b) Profesorul trebuie s lase studenilor timp de gndire, de elaborare mental a rspunsurilor, aa-zisul dinamism al conversaiei trebuie meninut n limite acceptabile, fr a dezavantaja studenii cu ritmuri intelectuale mai lente. c) Rspunsurile greite sau prile greite din rspunsuri trebuie corectate imediat i, dac este cazul, conversaia de evaluare poate fi temporar
22
ntrerupt pentru explicarea de ctre profesor a naturii greelilor, dup care studentul poate fi solicitat s reformuleze rspunsul. n cazul n care frecvena rspunsurilor incomplete, greite sau a nonrspunsurilor este mare, profesorul trebuie s adapteze nivelul de dificultate, s reformuleze ntrebrile, n ceea ce privete modul de desfurare a conversaiei de evaluare, opiunea profesorului depinde de tipul de evaluare n care conversaia este implicat. n cazul evalurilor curente, recomandarea general este de a se folosi o conversaie de tipul comunicrii de grup, care implic participarea tuturor membrilor grupului. n acest caz conversaia se practic frontal, cu ntreaga grup de studeni i presupune urmtoarele cerine: - ntrebrile se adreseaz tuturor studenilor din clas, chiar dac evaluarea vizeaz, n mod special, anumii studeni; - studenii sunt antrenai n corectarea eventualelor erori ale colegilor, n completarea rspunsurilor sau n formularea altor variante de rspunsuri; n cazul evalurilor finale care folosesc examinarea oral, conversaia de evaluare dobndete n mai mare msur caracterul unei chestionri orale, la care particip un singur student. Este evident c, n acest caz, ntrebrile se adreseaz direct studentului i ele sunt mult mai dependente de calitatea rspunsurilor precedente date de student. Cu toate c valoarea formativ a conversaiei de evaluare este incontestabil, aceast metod de evaluare prezint i unele dezavantaje. n primul rnd, este o metod care consum mult timp, iar limitarea timpului poate conduce la o conversaie superficial i irelevant, mai slab dect verificrile scrise, care au o putere mai mare de cuprindere sub aspectul numrului de studeni evaluai. Ca dezavantaj, se menioneaz i caracterul mai puin standardizat al evalurii prin conversaie, dificultatea aplicrii unor bareme riguroase i, prin urmare, riscul unui subiectivism mai accentuat al profesorului.
sistematizri, s nu depind excesiv de informaii memorizate i ale cror lacune ar putea s fragmenteze expunerea sau chiar s o blocheze. Profesorul trebuie s ncurajeze continuitatea expunerii, s nu ntrerup studentul dect n cazul unor erori importante sau al devierii expunerii ntr-o direcie greit. n funcie de contextul evalurii, expunerea studentului poate fi sprijinit pe schie scrise, n care studentul i structureaz cele mai importante puncte de reper, cum este cazul examinrilor orale. n aplicarea acestei metode, profesorul trebuie s aprecieze (i s ncurajeze) nu numai corectitudinea tiinific a prestaiei studentului, dar i aspectele referitoare la continuitatea, coerena i fluena expunerii, expresivitatea, capacitatea studentului de a valorifica maximal cunotinele pe care le deine, de a evita cile nchise, de a pune n valoare ceea ce tie i de a nu ptrunde n zone n care are lacune.
Pe de alt parte, tehnicile de verificare scris au i dezavantaje. Principalul dezavantaj aparine nsi comunicrii scrise, care nu permite un feed-back direct i operaional. Actul emiterii (al elaborrii lucrrilor de ctre studeni) i actul receptrii (al corectrii lucrrilor de ctre profesor) sunt separate n timp i spaiu. Studentul nu poate reveni asupra celor scrise, nu poate aduce explicaii suplimentare, nu beneficiaz de ntrebri ajuttoare i nici de confirmarea sau infirmarea direct sau indirect a corectitudinii rspunsurilor date. La rndul lui, profesorul nu poate solicita precizri suplimentare din partea studentului i nu poate corecta operativ erorile. De aceea, o cerin aproape obligatorie este ca rezultatele lucrrilor scrise s fie prezentate studenilor, discutate cu studenii, cu precizarea principalelor caliti, dar i a erorilor tipice, a rezolvrilor greite i a concluziilor privind pregtirea viitoare.
trebuie s o ndeplineasc. Fiecare item corespunde unui criteriu (tip de capacitate sau de performan), aa nct itemii nu sunt entiti izolate, ci sunt organizai n seturi sau baterii de itemi, n interiorul crora itemii sunt ierarhizai pe tipuri de solicitri i niveluri de dificultate. Din punctul de vedere al tipului de rspunsuri solicitate, itemii pot fi de dou feluri: itemi cu rspunsuri deschise, la care rspunsurile trebuie elaborate de studeni i itemi cu rspunsuri nchise, la care studenii trebuie s aleag rspunsurile corecte dintr-o list de variante de rspunsuri preformulate. 1. Itemii cu rspunsuri deschise pot fi construii prin dou tehnici principale: tehnica rspunsului scurt, n care rspunsul corect i complet are o formulare scurt i precis, alctuit din date, nume, termeni, formule, factori etc., care pot fi enunate (scrise) ca atare, fr completri sau precizri suplimentare; tehnica rspunsului elaborat, n care rspunsul corect i complet presupune o construcie verbal cel puin de nivelul unei fraze (n sens gramatical), care implic folosirea mai multor termeni, noiuni, date etc. n funcie de natura solicitrilor, rspunsurile pot s fie de tip algoritmic, cnd exist o structur cunoscut de reguli i operaii ce trebuie aplicat de student (de exemplu, definiiile, clasificrile, procedurile, formulele etc.), sau de tip euristic, cnd se cer studenilor interpretri, exemplificri, aprecieri i, n general, sarcini pentru care nu exist o soluie unic i cert care s fi fost anterior nvat. 2. Itemii cu rspunsuri nchise cuprind dou sau mai multe variante de rspunsuri, dintre care una sau mai multe sunt corecte (adevrate), iar celelalte greite (false). Desigur, variantele greite nu trebuie s conin absurditi, aberaii sau erori grosolane, uor identificabile, ci soluii plauzibile, adevruri aparente care, dac sunt alese de studeni, traduc erori tipice, lacune cognitive, imprecizii, confuzii, generalizri pripite etc. Cu alte cuvinte, varianta greit trebuie s par corect, s conin o anumit capcan care s surprind fie nvarea superficial, fie o eroare de gndire, de nelegere sau de aplicare a cunotinelor. De aceea, unii autori fac deosebire ntre rspunsuri, care sunt variantele corecte, i distractori, care sunt variantele greite, acetia din urm avnd rolul de a distrage atenia studenilor de la rspunsurile corecte n cazul n care calitatea slab a nvrii nu permite identificarea cert a rspunsului corect. Exist o mare varietate de tehnici de construire a itemilor cu rspunsuri nchise. n funcie de numrul variantelor de rspuns, exist itemi cu alegere dihotomic sau dual i itemi cu alegere multipl. a) Itemul cu alegere dual const dintr-un enun (o afirmaie sau o negaie, o ipotez, o regul etc.), iar studentul este solicitat s aleag ntre dou variante de tipul: corect-greit, adevrat-fals, acord-dezacord, pozitiv-negativ, da-nu etc. b) Itemul cu alegere multipl const dintr-o ntrebare, o problem sau un enun pentru care se ofer mai multe (cel puin 3) variante de rspunsuri. Aceste variante pot s aib forma unor rspunsuri complete preformulate sau, n cazul problemelor, a rezultatului final al rezolvrii, sau forma unor scale de evaluare cantitativ (foarte mult, mult, puin etc.), calitativ (foarte bine, bine, mai puin bine etc.) sau temporal (ntotdeauna, deseori, uneori etc.). n privina numrului i naturii variantelor de rspunsuri corecte/greite, exist mai multe opinii, fiecare evideniind avantaje i dezavantaje. Tehnica alegerii multiple prezint dou varieti principale: alegerea rspunsului corect, caz n care n care exist o singur variant corect i alegerea
26
celui mai bun rspuns, caz n care mai multe sau toate variantele sunt aproximativ corecte, mai mult sau mai puin discutabile, dar una singur are cel mai ridicat grad de adecvare cu premisa enunat n item. Opiunea pentru o singur variant corect prezint riscul ghicirii sau pur i simplu al alegerii din ntmplare a variantei corecte, mai ales cnd numrul variantelor este redus. De pild, la 3 variante, exist o probabilitate de 30% ca rspunsul corect s fie ales la ntmplare, dar probabilitatea ghicirii poate fi mult mai mare, dac avem n vedere c majoritatea studenilor tiu cte ceva despre coninuturile testului.
concrete. Rezult c aplicaiile presupun exersarea cunotinelor n situaii profesionale reale, fiind nemijlocit legate de tipul de activitate didactic bazat pe lucrri practice.
NOTRII COLARE
Notarea colar este ca actul prin care se atribuie note sau calificative prestaiilor studenilor n urma diferitelor forme de evaluare. Notarea exprim i oficializeaz nivelul performanelor atinse de studeni n diferitele etape ale procesului de nvmnt. Importana notrii colare nu se limiteaz ns la cadrul strict pedagogic al procesului de nvmnt. Notarea este nu numai un act pedagogic, dar i unul cu semnificaii i consecine care depesc graniele instituiei de nvmnt i influeneaz statutul social i profesional al studenilor. Calitatea notrii i pune amprenta pe calitatea ntregului act de evaluare, aa nct sistemul de evaluare n ansamblul su nu poate fi ameliorat i perfecionat dac nu se asigur un sistem de notare corect. Din aceast perspectiv, prezentm n continuare o sintez a principalelor aspecte privind notarea colar, valoarea i limitele acesteia, condiiile aplicrii corecte a sistemului de notare.
1.1. Particulariti
Pentru a evita eventualele confuzii ntre actul msurrii i cel al evalurii prin note colare, este necesar s subliniem c: 1. Notarea colar nu este stricto sensu un act de msurare ntruct notele colare, dei exprimate numeric, nu reflect mrimi absolute ci ierarhii, poziii sau ranguri, aa nct ntre mrimile caracteristicii msurate i seria numeric folosit nu exist o relaie de identitate izomorf, n sensul c n timp ce numerele cresc sau descresc cu intervale egale, distanele reale care separ o not colar de alta nu sunt egale pe diferitele paliere ale scrii de notare (de pild, intervalul dintre notele 4 i 5 nu este egal cu intervalul dintre notele 9 i 10, iar acesta din urm nu este egal cu intervalul dintre 5 i 6 .a.m.d.); 2. Exprimnd relaii de ordine i nu cantiti de sine stttoare, notele colare nu au semnificaia unor valori absolute i nici nu poate fi stabilit un punct sau nivel zero absolut (sau natural) al caracteristicii msurate - care s desemneze absena caracteristicii sau inexistena unui nivel mai mic dect cea mai mic valoare a caracteristicii msurate - de unde rezult dou consecine deosebit de importante: a) relaia dintre numerele care exprim notele colare nu este aditiv, ceea ce nseamn c numrul care exprim dou mrimi reunite nu este egal cu suma a dou numere care exprim fiecare din cele dou mrimi. Foarte simplu spus,
29
aceasta nseamn c doi elevi de nota 5 nu sunt egali cu un elev de nota 10, sau c o performan de nota 9 nu este suma unor performane distincte cotate cu 2, 6 i 1 (dei 5+5=10, iar 9=2+6+1). b) notele colare nu exprim nici produse i nici raporturi ntre mrimile pe care le desemneaz; astfel, o performan de nota 8 nu poate fi tratat ca de dou ori mai mare dect una de 4, iar o performan de nota 3 nu exprim a treia parte dintr-o performan de nota 9. 3. ntruct acordarea notelor implic un act de raportare la anumite criterii i la anumite valori, relaia dintre obiectul evalurii i sistemul de msurare nu este direct, ci mijlocit de semnificaii, aa nct nota acordat depinde att de proprietile obiectului evalurii, ct i de sensul pe care evaluatorul sau sistemul de evaluare l acord proprietilor respective. Aceasta deoarece nota colar msoar nu doar cantiti, ci i caliti, ea exprim nu numai ordine de mrime (intensitate, frecven, volum), ci i atribute cu semnificaia de pozitiv sau negativ, favorabil sau nefavorabil. Meninnd analiza n limitele acestor particulariti ale notrii colare, vom putea n continuare s supunem ateniei posibilitile de control al erorilor de notare ce rezult din considerarea notrii colare ca un act de msurare.
Rezult c a defini obiectul evalurii nseamn a stabili indicatorii empirici, care vor fi nregistrai i notai. n tehnicile moderne de evaluare, aceti indicatori sunt numii descriptori de performan, iar formularea lor este similar modului de formulare a obiectivelor operaionale, adic precizndu-se comportamentul i performana care vor fi nregistrate i msurate. Rezumnd, vom spune c definirea obiectului evalurii are dou componente: a) capacitatea sau subcapacitatea care este supus evalurii i b) indicatorii sau descriptorii prin care capacitatea este pus n eviden. Pe de alt parte, definirea obiectului evalurii trebuie s fie fcut de manier s permit sesizarea variaiilor cantitative i calitative ale caracteristicilor evaluate. Sub acest aspect, profesorul trebuie s gseasc soluii la dou probleme: - problema nivelului minim i maxim de dificultate, adic a amplitudinii intervalului de evaluare, aa nct acesta s corespund ct mai bine scrii de notare folosit; - problema metodei sau tehnicii potrivite cu tipul de indicatori evaluai. Ca regul general se recomand combinarea mai multor modaliti de verificare i evaluare (oral, scris, practic .a.m.d.). 2. Al doilea element al analizei structurii actului de notare este natura sistemului de notare i a etalonului folosit n evaluare. Dup cum se cunoate, etalonul este un fragment standardizat al mrimii ce se msoar care servete drept numitor comun pentru toate msurrile efectuate pe aceeai dimensiune. Se ridic ntrebarea: ndeplinete scala de notare colar condiiile unui etalon de msur? Rspunsul cel mai potrivit nu este n termeni de DA sau NU, ci n termeni de ct i n ce condiii notarea poate s devin un etalon de msur. n acest sens, trebuie subliniat c scala de notare are caracterul unui etalon convenional (i nu natural) ceea ce nseamn c relaia dintre obiectul evalurii i sistemul de msur este indirect, depinznd de calitatea metodelor sau instrumentelor prin care se face evaluarea. Dac vom compara scala de notare cu modalitile de etalonare utilizate n psihologie, atunci vom constata c practic ea apare ca o scal bazat pe cote normalizate, n sensul c, de regul, profesorii acord notele n ponderi care aproximeaz o distribuie normal. 3. Al treilea element al structurii actului de notare l constituie regulile de atribuire a notelor sau, cu alte cuvinte, criteriile pe baza crora o anumit performan este pus n legtur cu un anumit nivel al scrii. Prin regulile de acordare a notelor, profesorul trebuie s asigure de fapt o coresponden ct mai deplin ntre nivelurile de performan - identificate prin tehnicile de verificare - i sistemul de note (ca sistem numeric). Problema este la ce nivel de msurare se situeaz evaluarea colar i deci ce operaii sunt permise cu notele colare acordate. Deseori se neglijeaz acest aspect, ceea ce conduce la scri diferite i necomparabile i la calcule nepermise. n acest sens trebuie subliniat c, prin cele mai multe caracteristici ale sale, notarea colar nu depete nivelul ordinal al msurrii. Ce consecine are acest fapt? a) n primul rnd, aceea c notele colare nu reflect mrimi absolute ci ranguri, poziii sau ierarhii pe o scar ordonat cresctor sau descresctor, indiferent c se folosesc numere sau calificative. Aceasta nseamn c o anumit not nu are semnificaie dect raportat la alta mai mic sau mai mare.
31
b) n al doilea rnd, n sistemul de notare nu poate fi stabilit (nu are sens) un punct zero natural care s aib semnificaia de absen a caracteristicii evaluate sau de nivel dincolo de care nu exist o valoare mai mic. De aceea, scala de notare nu include nivelul zero. De aici rezult o consecin deosebit de important: aceea c notele nu pot fi nsumate, nmulite sau mprite n acelai mod n care aceste operaii se fac cu cantitile fizice . Este evident c dou performane distincte reunite nu conduc la o performan care s poat fi cotat cu dublul notelor acordate separat (dou performane de 5 nu formeaz o performan de 10). Tot astfel, un student de nota 8 este cu 4 uniti superior unuia cu nota 4 i nu de dou ori mai bun. c) n al treilea rnd, n timp ce sistemul numerelor naturale are intervale egale ntre numere pe toat ntinderea lui, intervalele reale dintre notele colare nu sunt egale pe diferitele niveluri ale scrii de notare. Toate aceste caracteristici impun anumite restricii privind operaiile ce se pot efectua cu notele colare. Astfel, efectuarea unor operaii de adunare, mprire sau nmulire cu notele trebuie privit cu circumspecie i are ntotdeauna o anumit doz de arbitrar. De exemplu, o medie colar de 6 ce rezult din notele 3 i 9 este n mod evident nesemnificativ i induce n eroare evaluarea studentului. ntr-o astfel de situaie ar fi necesar cel puin nc o evaluare pentru ca media calculat s fie minimal reprezentativ.
performan folosii n evaluare alctuiesc o selecie reprezentativ din ansamblul indicatorilor ce acoper caracteristica evaluat. Nevaliditatea este generat n acest caz de doi factori: - indicatorii alei nu sunt pertineni pentru nivelurile caracteristicii evaluate; - numrul indicatorilor este prea mic. Asigurarea validitii de coninut presupune n principal intervenii asupra instrumentelor de evaluare, ea se asigur n primul rnd n etapa de verificare. De reinut este faptul c verificrile sumare, cu un numr i o diversitate redus de probleme, puse n condiii omogene conduce aproape sigur la o evaluare nevalid. 2. Validitatea conceptual numit i de construct depinde de calitatea conceptelor pe care se ntemeiaz actul evalurii i n primul rnd de claritatea cu care a fost definit obiectul evaluat. Astfel, cnd capacitatea sau performana care se evalueaz este precis definit, prin indicatori operaionali, atunci ea va putea fi evaluat n acelai sens i n acelai mod fie prin tehnici diferite, fie de ctre evaluatori diferii. n acest fel vor deveni posibile comparaiile ntre evaluri diferite i verificarea fiecrei evaluri prin raportri la celelalte. Aceast tehnic de validare prin comparare este cunoscut i sub denumirea de validitate concurent i este larg folosit n sistemele de moderare interevaluatori. Astfel, profesorul poate s i evalueze validitatea notrii, oferind altui profesor conceptul i indicatorii pe care i-a folosit, dar nu i instrumentele utilizate i s compare n final rezultatele proprii cu ale celuilalt profesor. 3. Validitatea predictiv este probabil cea mai important form de validitate pentru evaluarea colar ntruct ea desemneaz capacitatea sistemului de notare de a prognostica evoluia viitoare a studentului din punctul de vedere al caracteristicilor evaluate. Ea se mai numete i validitate de criteriu sau criterial deoarece se determin prin raportare la un criteriu exterior n raport cu cel pe baza cruia s-a fcut evaluarea. Acest criteriu este de regul o activitate, o performan sau o competen care reprezint un mod de manifestare real a caracteristicii evaluate. Pentru evaluarea colar acest criteriu este i trebuie s fie n principal succesul/insuccesul studentului n acele activiti care reprezint o practicare, o exersare a capacitilor pentru care a fost notat . Astfel, o not colar este valid, n sens predictiv, dac este confirmat de rezultatele obinute de student n afara procesului de nvmnt, la un examen, la un concurs, n activitatea profesional. Validitatea predictiv poate fi evaluat prin folosirea aa-numitelor tabele de previziune n care se nscriu rezultatele evalurii (de pild notele obinute la o anumit disciplin sau media de absolvire)) i rezultatele n integrarea profesional (vezi figura nr. 1).
Note sau 0 medii 10 9 8 7 6 5 Reu it profesional , n % 10 20 30 40 50 60 70 80 90
33
fidelitate a probei. Este important ca cele dou pri s fie echivalente sau ct mai bine echilibrate ca numr de probleme, ca nivel de dificultate i ca diversitate de sarcini. c) Tehnica formelor echivalente const n utilizarea a dou forme (instrumente) de evaluare pentru evaluarea aceleiai caracteristici sau a acelorai studeni (de exemplu, verificarea scris combinat cu examinarea oral). Fidelitatea rezult din gradul de coeren a rezultatelor produse de cele dou forme echivalente.
Transpunerea standardelor minime/maxime n etaloane de msurare i respectiv n praguri de sensibilitate a notrii ridic ns problema raportului dintre nivelurile standardelor prestabilite i nivelurile reale ale performanelor studenilor. De exemplu, ntr-o grup sau serie de studeni cu performane excelente, nivelul maximal ar putea fi atins de majoritatea studenilor (80-90%), ceea ce ar conduce la o notare nesensibil (care nu mai sesizeaz diferenele dintre studeni). Aceast problem i poate fi rezolvat prin utilizarea unor standarde normative. Particularitatea acestora const n aceea c nivelurile minime i maxime ale performanelor corespunztoare notelor minime i maxime nu se mai iau ca prestabilite, ci se stabilesc n funcie de distribuia real a performanelor n grupul sau formaia de studenii n care se face evaluarea. Procedura de lucru const n a identifica, de exemplu, ntr-un set de lucrri, lucrarea cea mai bun i, respectiv, cea mai slab, de a stabili ce note corespund celor dou lucrri, urmnd ca diferenierea s se realizeze n interiorul intervalului de variaie astfel stabilit. Desigur, procednd astfel se diminueaz comparabilitatea notelor ntre grupuri de niveluri i cu distribuii diferite. Dar aceast procedur are i avantajul c verific i valideaz n cele din urm realismul standardelor generale. 2. Pragurile relative sunt cele mai mici diferene dintre valorile succesive ale caracteristicii pe care un instrument sau un sistem de msurare le poate deosebi. n ali termeni, pragurile relative, numite i difereniale, reprezint cele mai mici cantiti care adugate sau sczute dintr-o mrime dat conduc la o msur diferit. Aceast cerin general este pe deplin aplicabil i sistemului de notare. Practic, un sistem de notare nesensibil acord aceeai not pentru performane apropiate, dar diferite. Un sistem sensibil conduce la o notare care deosebete ntre niveluri de performan apropiate i nu include n aceeai unitate de msur mrimi diferite. Aceast diferen minim pe care sistemul de notare o poate surprinde se numete intervalul su de rezoluie. n cazul n care notarea este nesensibil, distribuia de frecven a notelor acordate este n form de I sau J, ceea ce nseamn c elevii clasei nu se distribuie pe o curb normal, ci sunt plasai toi sau majoritatea, fie n zona notelor mari, fie n zona notelor mici. Aceast situaie este datorat n principal diferenelor mari (n plus sau minus) dintre nivelul de dificultate al sarcinilor i nivelul real al grupului de studeni. Cnd sarcinile sunt prea facile, majoritatea studenilor se situeaz ntr-o zon restrns a scalei de notare (notele 8-10), situaie redat n figura nr.3. O situaie analog apare i pentru sarcinile prea dificile, cu deosebirea c restrngerea intervalului apare n partea notelor slabe a scalei (notele 4-6), situaie redat n figura nr.2.
50
Frecvena notelor Frecvena notelor
50 40 30 20 10 0
40 30 20 10 0 0 4 5 6 7 8 9 10
Note colare
36
10
Note colare
Figura nr. 2
Figura nr. 3
n ambele cazuri, problema care se pune este dificultatea medie, adic acel nivel al dificultii n jurul cruia se distribuie, n jos sau n sus, notele colare. Problema dificultii medii se pune att pentru fiecare ntrebare, sarcin, problem, n general pentru fiecare item al unei probe de evaluare, ct i pe ansamblul solicitrilor pe baza crora se acord o not. Practic, profesorul trebuie s rspund ntrebrii: Ci studeni trebuie s rezolve o problem sau un item pentru ca acesta s fie reinut n prob?. La aceast problem s-au dat n timp mai multe soluii, iar n prezent soluia cel mai larg acceptat este distribuia normal, potrivit creia dificultatea medie corespunde itemilor care sunt rezolvai de aproximativ 50% dintre studenii grupului pe care se aplic proba. Este evident c un instrument (o metod, o tehnic) de evaluare, pentru a fi sensibil, nu trebuie s cuprind doar itemi de dificultate medie, ci i itemi cu dificulti mai mari, respectiv mai mici, ntr-o proporie corespunztoare distribuiei normale. Ca regul practic s-a stabilit c procedura cea mai bun este creterea gradual a dificultii. Criteriul sensibilitii criteriului de evaluare nu trebuie ns absolutizat. El trebuie nsoit i de criteriul utilitii, sau al sensibilitii necesare. Nu este ntotdeauna nevoie s difereniem milimetric studenii, ci este suficient s-i ordonm n grupe de nivel corespunztoare celor 7-8 niveluri practice ale scrii de notare. Gradul de sensibilitate a notelor acordate de profesor poate fi uor pus n eviden prin stabilirea frecvenelor de apariie a notelor colare i prin reprezentarea grafic a distribuiei acestor frecvene. Cu rol orientativ prezentm n figura nr.4 forma distribuiei de frecven a notelor caracteristic pentru trei nivele de sensibilitate: ridicat, medie i slab. Primul grafic (A) este construit n sistemul decilelor, al doilea grafic (B) n sistemul cotelor normalizate.
A. Pentru sistemul decilelor i centilelor (reprezentare tip ogiv | )
37
CENTRUL DE ANALIZ I DEZVOLTARE PEDAGOGIC B. Pentru sistemul cotelor normalizate (reprezentare tip distribu ie de frecven e)
c a - sensibilitate ridicat b - sensibilitate bun c - sensibilitate slab b
Figura nr. 4
vedere i msura i modul n care studentul contribuie, ntr-un fel sau altul, la influenarea subiectiv a evalurii . Concepia studentului despre evaluare, criteriile proprii, motivaiile i atitudinile lui sunt cel puin la fel de influente ca ale profesorului. n evaluarea prestaiilor proprii sau pe ale colegilor, studenii pot comite aceleai erori de evaluare pe care le ntlnim i la profesori. De aceea, formarea capacitii de autoevaluare a studenilor trebuie s constituie un obiectiv major al procesului de nvmnt, prin care se poate crete gradul de obiectivitate a evalurii. 3. n al treilea rnd, pentru a determina mai bine contribuia factorului subiectiv n evaluare, trebuie s distingem ntre dou tipuri de influene subiective: o influen pozitiv, care apare ca o consecin a angajrii subiective a profesorului i studenilor n actul evalurii i o influen negativ, deformatoare, care produce abateri cu sens de eroare de la caracterul obiectiv al evalurii. Opernd cu aceast distincie, vom denumi influena pozitiv a factorului subiectiv (profesori, studeni) cu termenul de subiectivitate, iar influena negativ cu termenul de subiectivism. Considerm c aceast distincie creeaz un cadru mai bun pentru o analiz pertinent a contribuiei factorului subiectiv i, n consecin, poate oferi soluii adecvate pentru controlul influenei subiective n actul evalurii. Subiectivismul, definit ca manifestare negativ a influenelor subiective, prezint fr ndoial un interes mult mai mare dect latura pozitiv a aciunii factorului subiectiv n actul evalurii. De altfel, majoritatea studiilor referitoare la influena factorului subiectiv n evaluare au n vedere tocmai acest gen de influen, n acelai sens fiind direcionate i cele mai multe tehnici de control al interveniei factorului subiectiv. n acest sens, considerm c abordarea cea mai potrivit este de a face distincie ntre dou tipuri de influene negative: intenionate i neintenionate, aceste tipuri de influene fiind semnificative pentru tipurile de efecte generate de distorsiunile subiective: erori sau incorectitudini. a) Influenele subiective neintenionate sunt cel mai frecvent ntlnite, iar studiile de evaluare se refer aproape exclusiv la acestea. Este firesc s fie aa ntruct majoritatea profesorilor nu i propun n mod intenionat s evalueze necorect sau s vicieze rezultatele evalurii. n general, erorile subiective de evaluare i au originea n complexitatea acestei activiti, n gradul mai mic sau mai mare de incertitudine care nsoete orice apreciere a calitilor umane. n particular, distorsiunile subiective de evaluare, pot fi grupate pe cauze specifice, dintre care cele mai importante sunt: - insuficiena informaiilor primare pe baza crora se efectueaz evaluarea; - metode i tehnici de verificare i evaluare inadecvate n raport cu obiectul evalurii (ceea ce se evalueaz) i cu obiectivele evalurii (n ce scop se evalueaz); - influenele indirecte ale contextului psihosocial n care se efectueaz evaluarea (statutul familiei elevului, unele presiuni exercitate indirect de colectivul didactic .a.); - influenele contextului pedagogic n care se face evaluarea (nivelul general al grupului de studeni i compoziia acestuia, unele elemente de politic a universitii n materie de evaluare, de pild, atingerea unei anumite promovabiliti, stimularea succesului sau diminuarea insuccesului colar al studenilor etc.). Efectele influenelor subiective neintenionate n evaluare sunt imperfeciunile
39
sau erorile de evaluare, ele au semnificaie cognitiv i nu moral, fcnd parte, n anumite limite, din normalitatea actului de evaluare. Existena acestor erori este i motivul pentru care ameliorarea evalurii trebuie s fie o permanen a procesului de nvmnt. n acest sens, fiecare din cauzele enunate solicit ci i modaliti specifice de mbuntire a actului de evaluare, aflate n cea mai mare parte la ndemna profesorului. Sensul diminurii sau nlturrii erorilor de acest gen este cel al controlului i autocontrolului influenelor subiective, prin mai buna cunoatere i folosire a metodelor i tehnicilor de evaluare. b) n ceea ce privete influenele subiective intenionate, aceastea au o cauzalitate complex, inclusiv cu implicaii social-morale. Problema principal a erorilor generate de influenele subiective intenionate const n aceea c acest tip de influene este greu de sesizat i, mai ales, este greu de demonstrat. Supra sau sub evaluarea intenionat, cu caracter de avantajare/dezavantajare a unor studeni, nu apar, de regul, foarte evident, ele fiind mascate prin folosirea unor criterii, metode i tehnici obiective, uneori excesiv de riguroase i pe fondul unei imparialiti greu de pus la ndoial. Chiar dac sunt mai puin frecvente i nu pot fi considerate caracteristice pentru profesori, aceste intervenii subiective exist totui i pot avea consecine foarte importante, mai ales cnd evaluarea nsi are importan special, de pild cnd decide obinerea sau pierderea unei burse sau a statutului de student subvenionat. De aceea, corectitudinea moral i respectarea codului deontologic al profesiunii didactice sunt cerine de maxim importan ale evalurii i, n general, ale comportamentului pedagogic al profesorului.
aceluiai student la evaluri diferite, precum i ntre performanele studenilor i standardele (baremele) de evaluare, erorile subiective de apreciere acioneaz cel mai frecvent n zona estimrilor, ele viciaz comparaiile prin aceea c o estimare deja fcut influeneaz celelalte estimri, prin contagiune, prin contrast, prin inerie, prin proximitate .a.m.d. Sub alt aspect, erorile subiective de apreciere i au originea n implicarea subiectiv a evaluatorului i evaluatului, implicare generat de caracterul relaional, nsoit de interaciuni psihosociale, al procesului de evaluare. Evaluarea colar nu se produce, de regul, ntre persoane necunoscute i nici nu apare ca un act izolat de celelalte interaciuni ce au loc ntre profesor i studeni n procesul de nvmnt. Pe scurt, relaia de evaluare este o relaie inter-subiectiv care i pune amprenta, ntr-un fel sau altul, pe rezultatele evalurii. n acest context, vom ncerca n cele ce urmeaz s prezentm principalele cauze i principalele efecte ale erorilor de evaluare. Pentru fiecare tip de erori vom ncerca s prezentm modalitile de identificare i posibilitile de control i de diminuare.
siguri pe ei sau la profesorii tineri este de a arunca o privire prin catalog sau prin carnetul de note al studentului, nainte de a acorda nota, pentru a vedea cum st n general studentul la celelalte discipline de nvmnt.
1.3. Stereotipiile
Stereotipiile sunt forme de manifestare a efectului halo care constau n instalarea unei fixiti a opiniei formate despre un anumit student sau grup de studeni. Unii autori trateaz stereotipia ca pe un factor distinct de efectul halo, considernd c acesta din urm se deosebete prin caracterul su pronunat afectiv. Se arat n acest sens c stereotipia rezult dintr-o contaminare a rezultatelor: o prim lucrare mediocr duce la presupunerea c i a doua va fi la fel de mediocr; dac aceasta se confirm, tendina de a acorda o not mediocr i celei de-a treia lucrri crete mai mult i aa mai departe. Se instaleaz astfel un conservatorism cognitiv care face ca profesorul s nu mai sesizeze schimbrile n performanele i atitudinile studenilor. Ca ilustrare a abaterilor la care poate conduce stereotipia, G. De Landsheere citeaz cazul unui profesor care a meninut constant nota acordat unui elev cunoscut ca elev slab chiar i atunci cnd, sub numele acelui elev, au fost plasate lucrri ale celui mai bun elev din clas, apoi ale celui mai bun elev din coal i apoi ale unui liceniat n domeniul respectiv, dar nota nu a variat nici mcar cu o jumtate de punct din douzeci.[99, pag.33]. Trebuie subliniat c efectul halo i stereotipia pot s acioneze nu numai asupra evalurilor diferite privind acelai student, dar i asupra evalurilor efectuate n grupe sau serii diferite de studeni, n funcie de climatul general sau de impresia general pe care fiecare grup de studeni le-a generat n timp. Astfel, studenii dintr-o formaie cotat ca bun, disciplinat, receptiv, harnic etc. tind s fie notai mai bine dect studenii dintr-o alt formaie care are o imagine nefavorabil.
42
Identificarea aciunii efectului halo i stereotipiilor se poate face, cel mai simplu, pe cale statistic, prin analiza datelor i reprezentarea grafic a distribuiei notelor acordate aceluiai student. Distribuia tipic pentru aciunea efectului halo i a stereotipiei se prezint ca n figura nr. 5.
10 8
4 2
0 A B C
Evaluri
Literele (A, B, C, D, E, F etc.) notate pe abscisa graficului pot s desemneze: - note acordate de acelai profesor, la aceeai disciplin, aceluiai student, n cadrul unor evaluri diferite (prin metode diferite i n etape diferite); - note acordate de profesori diferii, la aceeai disciplin, aceluiai student; - note acordate de profesori diferii, la discipline diferite, aceluiai student; - note acordate de acelai profesor, la aceeai disciplin, aceluiai student, dar pentru criterii diferite, de exemplu pentru corectitudine, completitudine, logic, originalitate, calitatea prezentrii (scrise sau orale) etc.; Desigur, graficul trebuie interpretat cu atenie, mai ales n funcie de semnificaia datelor nscrise pe abscis. Astfel, dac pe abscis sunt nscrise notele acordate aceluiai student la discipline diferite, graficul este cu att mai semnificativ cu ct disciplinele respective sunt mai diferite Dac pe abscis sunt nscrise notele acordate aceluiai student, dar pentru criterii diferite, graficul este cu att mai semnificativ cu ct caracteristicile evaluate - care constituie criterii de evaluare - sunt mai diferite sau divergente. Astfel, dac notele sunt aceleai pentru dou caracteristici cum sunt tratarea complet a subiectului i abordarea original a temei, este foarte probabil s avem de-a face cu o evaluare halo, n virtutea ipotezei c o abordare original nu poate fi, de regul, i complet, sau completitudinea nu poate fi pus n eviden deoarece o astfel de abordare nu se potrivete sau scap grilei de evaluare a completitudinii. n toate situaiile, msura n care efectul halo i stereotipia afecteaz evaluarea este pus n eviden de forma graficului i de gradul de paralelism al liniei frnte cu
43
abscisa. Cu ct linia graficului este mai puin frnt sau cu ct se apropie mai mult de forma unei linii drepte, cu att efectul halo este mai prezent. Sub cellalt aspect, cu ct linia graficului este mai paralel cu abscisa, cu att stereotipia este mai pronunat. n legtur cu gradul de paralelism al liniei graficului cu abscisa, trebuie spus c, n practic, se pot ntlni nc dou situaii: una n care linia s fie cresctoare, cealalt n care linia s fie descresctoare (vezi figura nr. 6).
10 8 6 4 2 0 A B 10 8 6 4 2 0
Evaluri
Evaluri
n prima situaie, efectul halo acioneaz n sensul c unui student care a nregistrat progrese evidente pe parucursul a ctorva evaluri succesive continu s i se acorde note mari, n cretere, chiar dac performanele lui stagneaz sau nu cresc n acelai ritm cu notele acordate. A doua situaie este invers: unui student aflat n cdere, continu s i se acorde note tot mai mici, chiar dac ntre timp el i-a ameliorat performanele. Cele dou situaii apar i n cazul n care scderea sau creterea performanelor la unele discipline de nvmnt antreneaz sub sau supra evaluarea studentului la alte discipline.
autocontrol, ceea ce nseamn c profesorul trebuie s aduc n planul analizei contiente imaginea creat despre fiecare dintre studenii si, i un control extern, prin verificarea metodelor i tehnicilor de evaluare folosite i, n general, prin verificarea calitii informaiilor pe baza crora se face evaluarea. 2. n al doilea rnd, efectul halo i stereotipia sunt fenomene care apar n condiiile unor evaluri repetate, n cadrul crora rezultatele evalurilor anterioare i pun amprenta pe evalurile actuale, iar acestea din urm prescriu un anumit cmp, o anumit prefigurare pentru evalurile viitoare. Rezult c erorile in de succesiunea evalurilor (n ce ordine, la ce interval se fac) i de modalitile prin care se efectueaz fiecare din evalurile succesive (care sunt metodele i tehnicile folosite, ce obiective, ce coninuturi i ce criterii sunt avute n vedere). Sub acest aspect, efectul halo i stereotipia afecteaz nu numai rezultatele evalurii (n sensul unor erori de notare), ci i procesul evalurii, adic obiectivele, coninutul i tehnicile de evaluare. De exemplu, unui student cunoscut ca foarte bun, profesorul va continua s i adreseze ntrebri dificile, interesante, de creativitate sau probleme atipice, iar rspunsurile slabe vor fi puse mai curnd pe seama dificultii problemelor, dect pe seama studentului. Invers, unui student cunoscut ca slab profesorul va continua s i adreseze ntrebri simple, de ncurajare, probleme obinuite, care nu numai c nu permit elevului s-i depeasc condiia, dar ale cror rspunsuri, chiar foarte bune, nu pot fi cotate la niveluri foarte nalte. Sintetiznd modalitile de control al erorilor provocate de efectul halo i stereotipie - lund n considerare i tehnicile de control recomandate n literatura de specialitate - vom prezenta, n cele ce urmeaz, cteva din modalitile i tehnicile de control ce pot fi utilizate n perfecionarea evalurii, n sensul eliminrii dau diminurii efectelor distorsionante de tipul halo-ului sau stereotipiilor: 1. Instruirea personalului didactic cu privire la existena efectului halo i a stereotipiei, explicarea coninutului acestora i a tehnicilor de identificare a existenei lor. Instruirea evaluatorilor este considerat de muli specialiti drept cea mai bun i la ndemn cale de mbuntire a evalurii. Se arat, n acest sens, c experimentele legate de diversele metode de evaluare nu fac altceva dect s demonstreze c cea mai potrivit metod de optimizare a aprecierilor este s instruim cu mult grij evaluatorii. [H. D. Pitariu, 132, pag.70]. Deseori este suficient ca profesorii s tie cum se manifest i n ce condiii apar efectul halo i stereotipia pentru ca erorile generate de acestea s fie mult diminuate sau eliminate. 2. Diversificarea tehnicilor i procedurilor de evaluare sunt modaliti menite s diminueze transferul i interferena evalurilor ntre caracteristici i criterii de evaluare diferite. n acest sens, se recomand: a) n evaluarea i notarea lucrrilor scrise, profesorul s evalueze i s noteze numai un singur aspect (un singur subiect), numai o singur caracteristic dintre cele care constituie criterii de evaluare, urmnd ca numai dup ce ntregul set de lucrri a fost evaluat i notat la criteriul (subiectul) respectiv s treac la urmtorul criteriu (subiect) de evaluare .a.m.d. La evaluarea fiecrui nou criteriu (subiect), profesorul nu se va uita la notele acordate studenilor la criteriile (subiectele) anterioare. b) Combinarea mai multor forme i tehnici de evaluare (orale, scrise, practice)
45
pentru evaluarea aceleiai caracteristici sau a aceluiai student (sau grup destudeni). 3. Combinarea, n cadrul aceleiai metode (tehnici sau instrument) de evaluare a unor scale de ierarhizare sau de notare cu semnificaii inverse , este o modalitate de control ce poate fi folosit practic n urmtoarele moduri: a) n unele scale evaluarea s nceap de la polul favorabil sau nivelul maxim ctre polul nefavorabil sau nivelul minim, iar n alte scale evaluarea s nceap cu polul nefavorabil (minim) ctre polul favorabil (maxim). De exemplu, evaluarea poate s nceap cu definirea standardelor de nota 10 i n funcie de acestea se vor defini treptele inferioare i, invers, evaluarea poate s nceap cu definirea standardelor minime de promovare (nota 5) i n funcie de acestea se vor defini treptele superioare. b) n unele scale, polului maxim s-i corespund nota colar minim, iar polului minim s-i corespund nota colar maxim. De exemplu, se pot lua n considerare numrul i gravitatea erorilor, polului maxim corespunzndu-i cea mai mic not i polului minim cea mai mare not. c) S se foloseasc scale cu sisteme de cotare (punctaje) diferite de scala de notare de la 1 la 10, de pild cu punctaje care s depeasc 20 sau cu calificative exprimate nominal, urmnd ca acordarea notelor colare s se fac ulterior evalurii, prin sisteme de convertire a punctajelor sau calificativelor n note colare. 4. Schimbul interevaluatori sau evaluarea prin reciprocitate, este o modalitate de control care, dei destul de puin folosit, poate reprezenta o soluie foarte bun de control al evalurii. Desigur, schimbul interevaluatori se poate realiza ntre profesori de aceeai specialitate sau de specialiti nrudite, situaia cea mai favorabil fiind aceea cnd aceeai disciplin sau discipline foarte apropiate sunt predate de doi sau mai muli profesori. Practic, se poate proceda n urmtoarele moduri: a) profesorul care pred la seria de studeni A evalueaz la aceeai tem seria de studeni B, iar profesorul care pred la seria de studeni B evalueaz seria de studeni A, n ambele situaii coninutul lucrrilor - ntrebrile, problemele fiind stabilit de fiecare profesor pentru seria de studeni la care pred; b) profesorul seriei de studeni A ntocmete proba de evaluare pentru seria de studeni B, pe care o corecteaz att el ct i profesorul seriei respective i, reciproc, profesorul seriei de studeni B ntocmete proba de evaluare pentru seria de studenii A, proba fiind corectat de ambii profesori; c) profesorul seriei de studeni A asist la examinarea oral a seriei de studeni B i acord propriile note i, reciproc, profesorul seriei de studeni B asist la examinarea oral a seriei de studeni A i acord propriile note. Firete, rezultatele obinute n cadrul acestor evaluri ncruciate pot fi supuse ulterior prelucrrilor statistice, devenind astfel posibil identificarea cu un grad ridicat de certitudine a eventualelor erori de evaluare.
succesiv de ctre acelai evaluator . Spre deosebire de efectul halo i stereotipie, care acioneaz n sensul unei anumite fixiti a evalurii, indiferent la schimbrile n plan real caracteristicilor evaluate, efectul de contrast i de proximitate acioneaz n sensul c rezultatele evalurii se modific, fr ca aceast modificare s traduc o schimbare n plan real a obiectului/subiectului evalurii. Altfel spus, aceeai performan, aceeai lucrare (test, prob) i, n general, prestaii de acelai nivel sunt cotate n mod diferit n funcie de poziia sau locul ocupat n succesiunea sau n configuraia evalurilor efectuate pe un grup de studeni sau pe un lot de lucrri.
controlul trebuie s se efectueze nu numai n etapa final, de acordare a notelor, ci ncepnd cu etapa de proiectare a evalurii , de construire a instrumentelor i continund n etapa de verificare propriu-zis. Din aceast perspectiv, propunem n cele ce urmeaz cteva dintre modalitile de control eficiente i uor de aplicat. 1. Ca i n cazul efectului halo, una dintre cele mai accesibile i eficiente ci de control a erorilor de contrast i proximitate este instruirea evaluatorilor cu privire la natura i modul de manifestare a acestui tip de erori. Experiena instruirii examinatorilor la concursurile de admitere n liceu i n nvmntul superior a artat c o bun cunoatere, de ctre profesori, a riscurilor de eroare face ca autocontrolul s devin o modalitate foarte eficient de limitare a erorilor de evaluare. 2. Pentru erorile de contrast, o modalitate util de control este tehnica comparaiei pe grupuri de lucrri , care este o variant simplificat i adaptat evalurii colare a tehnicii comparaiei n perechi folosit n scalele de evaluare a persoanelor. Aceast tehnic presupune urmtoarele operaii: a) Se efectueaz o prim verificare i notare a ntregului lot de lucrri, dup care lucrrile sunt grupate n funcie de notele acordate (lucrri cu note n intervalul 9-10, apoi n intervalul 8-8.99 .a.m.d.). Numrul grupelor de lucrri se va stabili astfel nct numrul lucrrilor din cea mai numeroas grup (grup care va fi probabil cea a notelor de mijloc) s nu fie prea mare, dac e posibil s nu depeasc 15-20 de lucrri. Dac distribuia notelor se apropie de o distribuie normal, atunci va fi necesar ca intervalele de grupare la mijlocul scalei de notare s fie mai mici. n experienele realizate de noi am folosit urmtoarele intervale de grupare: - grupa 1, intervalul sub nota 5.00; - grupa 2, intervalul [5-6); - grupa 3, intervalul [6-7); - grupa 4, intervalul [7-7.66); - grupa 5, intervalul [7.66-8.33); - grupa 6, intervalul [8.33-9.00); - grupa 7, intervalul [9-10]. b) Se efectueaz apoi comparaii ntre lucrrile din fiecare grup, prin tehnica perechilor (fiecare lucrare este comparat cu fiecare din celelalte lucrri ale grupei) i, dac este cazul, se modific nota acordat iniial i se realizeaz (re)ierarhizarea lucrrilor funcie de note. c) Se efectueaz comparaii ntre grupe n modul urmtor: lucrarea cea mai bun din grup se compar cu lucrarea cea mai slab din grupa superioar, iar lucrarea cea mai slab se compar cu lucrarea cea mai bun din grupa inferioar. n funcie de rezultatul comparaiilor, unele lucrri pot s fie transferate n alt grup (inferioar sau superioar) i, bineneles, re-notate. 3. Controlul erorilor de proximitate se poate realiza respectnd regulile de construire a instrumentelor de evaluare (probe, teste, chestionare). Acestea sunt ns destul de complicate i nu pot fi aplicate - uneori nici nu este necesar - pe cazul evalurilor curente din procesul de nvmnt. Se pot utiliza totui procedee simplificate, uor de aplicat i la ndemna profesorului. n general, aceste procedee pornesc de la faptul c erorile de proximitate afecteaz fidelitatea instrumentului de evaluare. Nefidelitatea probelor de evaluare
48
are n principal dou cauze: numrul redus de itemi (de ntrebri, de subiecte) i ordinea inadecvat n care acetia sunt plasai n prob. Cu ct numrul itemilor crete, fidelitatea probei este mai ridicat, cu precizarea c dincolo de anumite limite creterea numrului de itemi nu mai aduce o mbuntire substanial de fidelitate. Pentru examenele scrise, o tehnic uor de aplicat este procedeul njumtirii, care const n divizarea n dou pri egale a probei, fiecare parte fiind corectat i evaluat separat. De regul, njumtirea se face lund n prima jumtate itemii impari (1,3,5,7,...), iar n cealalt jumtate itemii pari (2,4,6,8,...). Nota final se calculeaz ca medie aritmetic a celor dou note acordate distinct.
uurin notele mari, ei noteaz mai mult progresul studenilor dect performana absolut, iar nivelul cel mai mic al notelor se afl rareori sub patru. Profesorii care consider nota ca instrument de sanciune, de avertisment sau ameninare, acord n mod frecvent note foarte mici, de trei, doi sau chiar unu i mai rar note mari.
50
i se asociaz deci un indice de dificultate care exprim proporia de elevi ce se ateapt c vor rezolva corect ntrebarea respectiv sau grupul de ntrebri. Fiecare profesor alege ntrebrile adecvate seriei de studeni la care pred, innd seama de nivelul general al seriei, dar i de compoziia acesteia (omogen, heterogen). n funcie de nivelurile de dificultate ale itemilor alei, se poate calcula un indice mediu de dificultate a probei, ceea ce va permite ca, ulterior, notele acordate studenilor s poat fi moderate i interpretate n funcie de acest indice mediu. 4. Procedeul moderrii prin raportare la examenele i concursurile externe este menit s compatibilizeze evalurile interne cu evalurile externe, n principal examenele de absolvire, de finalizare a unui ciclu de studii, cu examenele de acces n ciclurile superioare de studii sau cu concursurile de competen pentru ocuparea locurilor de munc. Procedeul const n analiza comparativ a rezultatelor obinute de absolveni n timpul studiilor i la examenele de finalizare cu rezultatele obinute la concursurile de admitere n ciclurile superioare sau la concursurile de ocupare a posturilor. n funcie de rezultatele acestei analize se face ajustarea criteriilor i scrii de notare n funcie de rezultatele examenelor i concursurilor externe. Ideea este c o not sau o medie colar, mai mare sau mai mic, nu are o nsemntate n sine, ci numai n msura n care poate garanta studentului sau absolventului o reuit ulterioar, colar sau profesional, cel puin egal cu nota sau media respectiv. Firete, problema nu se pune att pentru notele mai mici urmate de reuite mai mari, ct mai ales pentru notele mari i foarte mari care nu sunt confirmate prin reuitele ulterioare ale studentului sau absolventului.
40 30 20 10 0 0 4 5 6 7 8 9 10
Note colare
52
Pentru efective mai mari (peste 100) se pot folosi scale cu 7 sau 9 trepte, adaptnduse n acest sens proporiile distribuiei normale.
40% 10%
1. 2. 3. 4. 5.
20%
20%
10%
Performan foarte ridicat .... Performan ridicat .............. Performan medie ................ Performa redus ................. Performan foarte redus .....
Dei valoarea scalei cu distribuie forat este deseori contestat, mai ales de adepii pedagogiei curbei n J (o pedagogie a succesului general), folosirea ei poate fi un bun exerciiu pentru creterea sensibilitii instrumentelor de evaluare i aceasta deoarece, cel mai frecvent, eroarea tendinei centrale i a restrngerii de rang sunt direct determinate de calitatea metodelor de evaluare. Folosirea unor ntrebri i probleme cu un raport de dificultate/accesibilitate constant nu permite sesizarea diferenelor reale ntre nivelele de performan a studenilor i conduce la o evaluare nediscriminativ. n consecin, controlul erorilor tendinei centrale i a restrngerii de rang trebuie s se fac nu numai n etapa de evaluare propriu-zis, de verificare sau corectare, ci i n etapa de proiectare i elaborare a instrumentelor e evaluare.
BIBLIOGRAFIE
1. ABRECHT, ROLAND: Lvaluation formative, une analyse critique, De Boeck Universit, Bruxelles, 1991. 2. BEDARIDA, CATHERINE: Les examens mal nots, n Rev. Le monde de lducation, nr. 204, Mai, 1993. 3. BRZEA, CEZAR: Domenii i procedee de evaluare , n vol. Analiza procesului de nvmnt. Componente i perspective, coord. I.Nica, E.D.P., Bucureti, 1977. 4. CLEMENCE, ALDIN: Teoriile disonanei cognitive, n vol. Psihologie social. Aspecte contemporane, coord. Adrian Neculau, Editura POLIROM, Iai, 1996. 5. **** Consiliul Naional de evaluare i examinare - Unitatea tranzitorie - Ghid general de evaluare i examinare, Bucureti, 1995. 6. FIGARI, GERARD: valuer: quel rferentiel? colecia Pedagogies en developpement. Methodologie de la recherche - De Book Universite, 1994, Wesmael s.a. Bruxelles. 7. HOLBAN, ION: Testele de cunotine, E.D.P., Bucureti, 1995. 8. LANDSHEERE, G. DE: Evaluarea continu a elevilor i examenele. Manual de docimologie (trad.), E.D.P., Bucureti, 1975. 9. LISIEVICI, PETRU: Testele de cunotine. Cadru conceptual, proiectare i evaluare, Trgovite, Institutul de tiine ale Educaiei i CCD, 1993. 10. MRGINEAN, ION: Msurarea n Sociologie, Editura tiinific i Enciclopedic, Bucureti, 1982. 54
11. PAVELCU, VASILE: Principii de docimologie. Introducere n tiina examinrii, E.D.P., Bucureti, 1968. 12. PITARIU, HORIA, D.: Managementul resurselor umane. Msurarea performanelor profesionale, Editura All, Bucureti, 1994. 13. RADU, IOAN; MICLEA, M; MOLDOVAN, O.; NEME, S.; SZAMOSKOZY, S.: Metodologie psihologic i analiza datelor, Editura Sincron, Cluj, 1993. 14. VOICULESCU, ELISABETA: Factorii subiectivi ai evalurii colare. Cunoatere i control, Editura Aramis, Bucureeti, 2001. 15. VOICULESCU, FLOREA; LUDUAN, NICOLAE: Msurarea i analiza statistic n tiinele educaiei, Ed. IMAGO, Sibiu, 1998.
55