Tme5 Elab Probei de Ev

5. ELABORAREA PROBELOR DE EVALUARE. ROLUL LOR N CALITATEA EVALURIIObiective vizates opereze n diverse contexte educaionale, activiti metodice etc. cu principalele concepte teoretice specifice acestui capitol: tehnica de evaluare, item, tehnici de evaluare obiective, tehnici de evaluare subiective, itemi obiectivi, itemi semiobiectivi, itemi subiectivi etc;s aplice n practic regulile de concepere, aplicare i corectare a diverselor categorii de itemi;s coreleze tipurile de itemi cu abilitile sau competenele ce urmeaz a fi evaluate;s identifice situaii educaionale specifice folosirii diferitelor categorii sau tipuri de itemi;s elaboreze o prob de evaluare n care s utilizeze diferitele tipuri de itemi;Sa interpreteze si sa evalueze probe de evaluare elaborate;Sa stie sa faca analiza statistica si ameliorarea testelor docimologice.

5. ELABORAREA PROBELOR DE EVALUARE. ROLUL LOR N CALITATEA EVALURII5.1. Relaia ntre calitatea probelor de evaluare i calitatea i eficiena evalurii5.2. Calitile metrologice ale probelor de evaluare5.3. Etape n elaborarea si aplicarea probelor de evaluare (testului docimologic) 5.3.1. Stabilirea scopului probei de evaluare (diagnostic sau prognostic), care determin structura i coninutul acesteia.5.3.2. Selectarea coninuturilor i a obiectivelor corespunztoare care vor fi vizate prin intermediul testului (este sintetizat ntr-un tabel/matrice de specificaii );5.3.3. Formularea itemilor (cea mai laborioas etap a elaborrii unui test pedagogic); 5.3.3.1. Tehnici de elaborare a itemilor5.3.3.1.1. Tehnici obiective itemi obiectivi5.3.3.1.2. Tehnici semiobiective itemi semiobiectivi5 3 3 1 3. Tehnica rspunsurilor deschise itemi subiectivi5.3.3.2. Formularea itemilor cerine i recomandri5.3.4. Stabilirea unei grile de corectare care s includ rspunsurile corecte pentru fiecare item uureaz considerabil activitatea evaluatorului. 5.3.5. Elaborarea baremului de corectare sau a modalitii de calculare a scorurilor va permite evaluarea precis i identic a rspunsurilor formulate de fiecare subiect. n cazul itemilor subiectivi, baremul de corectare include elemente ale rspunsului care vor fi5.3.6. Aplicarea/pretestarea5.4. Analiza i interpretarea rezultatelor obinute5.4.1. Administrarea instrumentului de evaluare5.4.2. Rezultate obinute5.4.3. Matricea pe itemi5.4.4. Matricea pe itemi i pe elevi5.4.5. Matricea pe obiective i pe elevi5.4.5. Concluzii. Msuri de optimizare

5.1. Relaia ntre calitatea probelor de evaluare i calitatea i eficiena evalurii

Fr s supraestimm valoarea instrumentelor de evaluare, trebuie s recunoatem rolul lor important n evaluare, cel puin din perspectiva calitii i reprezentativitii msurrii, i, prin aceasta, asupra calitii evalurii. Acest rol este, ns, direct proporional cu calitatea lor. De aceea, simim nevoia s atragem atenia asupra pericolului improvizaiilor n evaluare, din perspectiva probelor (instrumentelor) utilizate, i, respectiv, asupra necesitii elaborrii i utilizrii acestora n consens cu cerinele tiinifico- metodologice. Aadar, eficiena activitii de evaluare depinde att de calitatea instrumentelor utilizate, ct i de modul de administrare a acestora. Ca atare, proiectarea instrumentelor de evaluare trebuie s reflecte:eficacitatea sistemului ( gradul de realizare a obiectivelor educaionale) pus n eviden prin msurarea performanelor/rezultatelor colareEficiena sistemului (model de utilizare a resurselor n vederea obinerii rezultatelor educaionale) exprimat prin corelarea performanelor cu resursele/condiiile n care acestea au fost dobndite

5.2. Calitile metrologice ale probelor de evaluare

Validitatea = calitatea (capacitatea) unei probe (test) de a msura efectiv ceea ce proiectantul testului dorete ca acesta s msoare, adecvarea la tema propusa. Validitatea reprezint caracteristica central a probelor ca acestea s fie demne de ncredere. Validitatea se raporteaz i se exprim n:validitatea de construct cnd are la baz definiii explicite, pertinente i relevante ale aspectelor pe care i propune s le msoarevaliditatea de coninut dac acoper uniform i consistent coninuturile avute n vedere; cnd un test abordeaz numai o parte din coninuturile temei, este necesar ca aceasta s fie reprezentativ i esenial:validitatea de criteriu de apreciere - care indic virtuile testului privind prognozarea performanelor ntr-un domeniu corelat cu domeniul de coninut verificat (validitate predictiv) sau dac rezultatele obinute la acest prob concord cu rezultatele obinute de elevi la alte probe (validitate concurent).

5.2. Calitile metrologice ale probelor de evaluareFidelitatea = calitatea de a oferi rezultate constante(similare) n condiiile administrrii identice, la populaii similare sub aspect statistic. Aceast calitate ne conduce la ideea de generalizare a instrumentului. - Un test este caracterizat de o bun fidelitate dac:diferena dintre scorurile obinute de diferii elevi este determinat n primul rnd de diferenele reale dintre acetia din punctul de vedere al performanelor de care sunt capabili;prin repetarea testului pe acelai grup de elevi se vor pstra scorurile individuale i ierarhia acestora - Factorii care influenez fidelitatea unui test sunt:Lungimea testului cu ct este mai lung, cu att mai mari vor fi ansele s diferenieze mai bine ntre nivelurile apropiate de performanmprtirea scorurilor cu ct distana dintre cel mai mic i cel mai mare scor este mai mare cu att vor fi mai bine marcate diferenele dintre performanele individualeDificultatea testului un test prea uor sau prea dificil pentru grupul de subieci testai va fi caracterizat de o redus mprtiere a scorurilor, ceea ce influenez negativ fidelitateaObiectivitatea testului exprim o caracteristic legat de diferenele ce pot aprea n cazul cotrii aceluiai test de persoane diferiteEroarea standard a msurrii valoare care indic amplitudinea intervalului de variaie a msurtorii. ntre eroarea stadard a msurrii i fidelitatea testului este un raport de invers proporionalitateFuncionalitatea calitatea testului de a fi administrat i interpretat cu uurinUurina administrriiTimpul necesar pentru administrareSimplitatea cotriiObiectivitatea = gradul de concordan ntre aprecierile fcute de evaluatori. Probele cu o foarte bun obiectivitate sunt probele/testele standardizate.

5.3. Etape n elaborarea si aplicarea probelor de evaluare (testului docimologic)

Testele sunt instrumente folosite n evaluarea educaional. n latina veche testimonio nsemna mrturie, dovad a ceea ce se ntmpl n spiritul adevrului (D. Ungureanu, op. cit.). Testele constituie instrumente de verificare cu structur i nsuiri specifice. Prin forma de examinare adoptat, testul este fie o prob oral sau practic, fie, de cele mai multe ori, o prob scris. Testul este principalul mijloc de obinere a unor date relevante referitoare la performanele elevilor. Testul docimologic este o alternativ i o cale de eficientizare a evalurii tradiionale. Testul este o prob standardizat, ce asigur o obiectivitate mai mare n procesul de evaluare. Standardizarea este una din calitile/ condiiile eseniale. De aceast calitate/caracteristic depind obiectivitatea i corectitudinea testului,independent de context ori persoana evaluatorului. Testele oficiale sunt n mod obligatoriu standardizate, atributul de standardizat fiind asociat cu o anumit garanie, o atestare a valorii unor astfel de teste.Un test standardizat este un test a crui construcie, aplicare i interpretare sunt complet i riguros urmrite, n baza unor norme i criterii clare, acceptate i respectate de evaluatori i evaluai. Standardizarea dar i respectarea altor caliti ale testelor asigur un sistem unic de raportare valoric a tuturor subiecilor:Standardizarea coninutului (a itemilor ca atare)Standardizarea timpului de rezolvareStandardizarea condiiilor de lucruStandardizarea modului de notare/msurareStandardizarea interpretrii i acordrii notei/calificativului


5.3.1. Stabilirea scopului probei de evaluare (diagnostic sau prognostic), care determin structura i coninutul acesteian acest etap este vorba de anticiparea finalitii evaluative la care vrem s ajungem, respectiv, funciile pe care este destinat s le ndeplineasc evaluarea n desfurarea procesului didactic: prognostic, naintea unei noi secvene de instruire, diagnostic, pe parcursul procesului, predictiv, la sfritul unei perioade de instruire. De fapt, scopul probei determin structura i coninutul acesteia..5.3.2. Selectarea coninuturilor i a obiectivelor corespunztoare care vor fi vizate prin intermediul testului (este sintetizat ntr-un tabel/matrice de specificaii ) Obiectivele selectate pentru evaluare vizeaz achiziii semnificative referitoare la competena de comunicare scis n acord cu tipurile de activiti parcurse i cu standardele curriculare la aceasta disciplin pentru clasa a VIII-a. n acest scop, se noteaz din programa colar obiectivele cadru i obiectivele de referin n vederea instrumentului de evaluare, respectiv, coninuturile /activitile parcurse:Obiective cadru3. Dezvoltarea capacitii de receptare a mesajului scris,Obiective de referintaS interpreteze un text literar sau nonliterar, fcnd corelaii ntre nivelurile fonetic, lexical, morfologic i semantic;S sesizeze valoarea expresiv a mijloacelor de mbogire a vocabularului i a categoriilor semantice studiate;S identifice valori etice i culturale ntr-un text, exprimndu-i impresiile i preferinele


4. Dezvoltarea capacitii de exprimare scris. Obiective de referintaS elaboreze texte aparinnd diverselor stiluri funcionale, adaptnd redactarea la situaia de comunicare i la partener;S utilizeze n redactarea unui text propriu cunotinele de morfo-sintax, folosind adecvat semnele ortografice i de punctuaie; S identifice efectele expresive ale construciei lingvistice utilizate n diferite texte sau s genereze efecte expresive prin construcii lingvistice proprii. Continuturile evaluate vizeaza:Practicarea raional a limbii: tipuri de comunicare:Scierea:- Structurarea analizei de text literar;- Valoarea expresiv a semnelor grafice i de punctuaie;- Scrierea despre textul literar sau nonliterar;- Analiza de text literar; - Dimensiunea stilistic a faptelor de limbElemente de construcie a comunicrii:- Noiuni de sintax;- Lexicul;- Noiuni de fonetic. Valorile stilistice ale nivelului fonetic ntr-un text literar;- Sintaxa propoziiei i a frazei.


Formularea obiectivelor de evaluarePentru testul ales elevii vor fi capabili:

Matricea (tabelul) de specificaii este prezentat n literatura pedagogic n strns conexiune cu filosofia evalurii prin raportare la obiective (engl. objective-based evaluation), consituind o veritabil punte de legtur ntre obiective, coninuturi i evaluare, n calitate de componente ale curriculumului. Demersul de elaborare a matricei de specificaii constituie una dintre etapele proiectrii testului docimologic, care urmeaz celei n care se stabilete tipul de test vizat Liniile matricei de specificaii includ elementele de coninut vizate, iar coloanele se refer la nivelele taxonomice la care vor fi msurate performanele elevilor n raport cu aceste coninuturi. Cea mai utilizat taxonomie pentru domeniul cognitiv este cea a lui B. S. Bloom.Matricea de specificaii detaliat este recomandat n cazul testelor sumative care vizeaz coninuturi mai restrnse (evaluare la finalul unei uniti de nvare, la finalul unui semestru etc.) i chiar n cazul testelor formative (care pot viza coninutul unei singure lecii i, n mod evident, nu pot inti dect anumite nivele taxonomice). Ea poate detalia fie coninuturile care vor fi acoperite prin test, fie nivelele taxonomice, fie pot include informaii amnunite despre ambele dimensiuni. Celule tabelui, aflate la intersecia dintre elementele de coninut i nivelele taxonomice pentru nivelul cognitiv cuprind procentele de itemi (din totalul itemilor consacrai ntregului test) ce vor fi folosii n proiectatea testului. Dac testul va include 20 itemi, nseamn c 5% din total (identificai-l n tabel), adic 2 itemi, vor fi alocai celulei care vizeaz terminologia de recunoscut sau de redat din memorie (celul rezultat din intersectarea coninuturilor constnd din terminologie, cu nivelul taxonomic achiziia informaiei); 30%, adic 12 itemi, pentru celula viznd rezolvarea de probleme, la nivelul taxonomic analiz (rezultat din ntretierea rndului coninuturilor constnd din probleme cu coloana reprezentnd analiza) etc.


Instrumentul de evaluareLimba i literatura romn, Clasa a VIII-a (Tez cu subiect unic pe semestrul I)Precizri: Toate subiectele sunt obligatoriiTimpul efectiv de lucru este de 2 ore. Se acord 10 puncte din oficiu Subiectul I (60 de puncte) Citete cu atenie textul dat. Scrie, pe foaia de tez, rspunsul pentru fiecare dintre cerinele de mai jos: Btile versului am prins a deprindeNu din cri, ci din hor, din dan,Rimele, din bocete i colinde, Din doinele seara cntate pe an. [...]Am strns sntate din cremenea neagr,Din vna de ap, nind ncordat, i btrnii din sat cnd murir, Toate iubirile motenire mi-au dat. Eu m scldam prin praie cu ochii deschii,Era o ap de cletar i de stele Peti alburii, plpind ca-ntr-un vis, Lunecau lng genele mele. Ori prin munii cu iarba-ntomnat pe creastAscultam ritul de greier bolnav;


Gonind pe-un cer de-ntunecare vast,Nouri scmoi n spinri purtau frigul jilav. nsemnam cu uimire pe-un petic de foaieCum scpra ceru-n bltoace ntorsCum, dup munii ursuzi, dup ploaie, Fuioarele de aburi s-au tors. (Nicolae Labi, nceputul)A. 1. Transcrie trei cuvinte/ grupuri de cuvinte folosite cu sens figurat. 6 puncte;2. Precizeaz mijlocul intern de mbogire a vocabularului prin care s-au format cuvintele: deschii, alburii, motenire. 6 puncte3. Stabilete cte un sinonim potrivit pentru cuvintele subliniate n textul dat. 6 puncte4. Precizeaz un neles/ o accepie a adjectivului-epitet ntomnat din versul Ori prin munii cu iarba-ntomnat pe creast 6 puncte5. motiveaz folosirea virgulei n versul Rimele, din bocete i colinde. 6 puncte B. 6. Menioneaz tipul de rim folosit n versurile 1-4 ale fragmentului citat. 6 puncte7. Transcrie un vers n care apare o imagine artistic adresat vizualului. 6 puncte8. Explic semnificaia din context a sintagmei btile versului. 6 puncte


C. Scrie o compunere de 15-20 rnduri, n care s-i exprimi opinia despre semnificaiile sau despre mesajul fragmentului citat din poezia nceput, de Nicolae Labi (formularea clar/ logic a opiniei, motivarea acesteia, prin referirea la structura textului i la procedeele de expresivitate). 12 puncteNot! Vei primi 8 puncte pentru coninut i 4 puncte pentru redactare. n vederea acordrii punctajului pentru redactare, compunerea trebuie s se ncadreze n limita de spaiu cerut. Subiectul al II-lea (30 de puncte)Imagineaz-i c, ntr-o vizit la muzeu, te-a impresionat o pictur n care aprea un peisaj de toamn. Scrie o compunere de 20-25 de rnduri, n care s evideniezi trsturile peisajului pe care le-ai remarcat n aceast oper de art. n compunerea ta, trebuie:- s formulezi un titlu expresiv/ personalizat al textului redactat de tine; 4 puncte- s respeci conveniile specifice unei descrieri; 6 puncte- s ai un coninut i un stil adecvate tipului de text i cerinei formulate; 12 puncte- s respeci normele de exprimare, de ortografie i de punctuaie. 8 puncte Not! Dac vei considera necesar, n compunere poi folosi doar unul sau mai multe dintre urmtoarele titluri i nume proprii: Muzeul Judeean de Art, Petru Grigora, Zi de toamn. n vederea acordrii punctajului pentru exprimare, ortografie i punctuaie, compunerea trebuie s se ncadreze n limita de spaiu cerut. Proba este elaborat n concepie curricular i structurat n raport cu obiectivele cadru i de referin ale programei colare. Proba se compune din dou categorii de itemi: subiectul I este un item semiobiectiv tip ntrebare structurat, iar subiectul al II-lea este un item subiectiv tip eseu structurat.


5.3.3. Formularea itemilor (cea mai laborioas etap a elaborrii unui test pedagogic) 5.3.3.1. Tehnici de elaborare a itemilorn sens restrns, itemii reprezint elemente componente ale unui instrument de evaluare i pot fi: simple ntrebri; un enun cu sau fr element grafic, urmat de o ntrebare; exerciii; probleme; ntrebri structurate; eseuri etc.n sens larg, itemii conin, pe lng elementele de mai sus, i tipul de rspuns ateptatDeci, item = ntrebare + rspuns ateptatTehnicile de elaborare a itemilor trebuie puse n coresponden cu tehnicile de testare. Ne putem imagina tehnicile de testare utilizate la ora actual ca fiind distribuite pe un continuum, limitat, pe de o parte, de tehnicile de testare pentru care este posibil i de dorit s existe un model complet al rspunsului corect, numite tehnici obiective, iar, pe de alt parte, de tehnicile de testare pentru care nu este nici posibil i nici de dorit s existe un model complet al rspunsului corect. Aceste tehnici pot fi numite subiective, n sensul c judecata subiectiv a evaluatorului va interveni n etapa de cotare Obiectiv Semiobiectiv Subiectiv


Tehnicile de testare obiective pot fi utilizate cu mai mare succes n abordarea unor rezultate ale nvrii situate la nivelurile inferioare ale domeniului cognitiv, pe cnd tehnicile subiective pot aborda cu mai mult succes rezultate de nvare situate la nivelurile superioare ale domeniului cognitiv.Meniune: n cazul de fa, semnificaiile conceptelor de obiectiv, respectiv, subiectiv nu se refer la corectitudinea sau incorectitudinea rspunsurilor, ci la tehnica de realizare a rspunsurilor i la tehnica de evaluare. n primul caz, exist un model complet al rspunsului corect ce trebuie dat de elev, pe care l tie i l ateapt examinatorul, ceea ce face ca tehnica de evaluare s fie cu grad maxim de precizie i, deci, de obiectivitate. n cazul al doilea, itemul fiind deschis, deci lsnd la latitudinea elevului s construiasc rspunsul, intervin mai multe variabile, care confer caracter subiectiv elaborrii rspunsului i tehnicii de evaluare: a) sunt posibile mai multe rspunsuri, din care toate s fie corecte, incorecte, unele corecte altele incorecte; b) profesorul nu tie dinainte ce rspuns va da elevul, ca atare, nu poate stabili dinainte un barem precis; c) e posibil ca nici elevul s nu tie de la nceput rspunsul, urmnd s-l construiasc treptat. Sigur acest rspuns va purta o nota de originalitate (subiectivitate) a autorului mult mai mare dect n cazul precedent. E posibil, chiar, s-l construiasc n mai multe variante. n aceast situaie, evaluatorul va trebui i el s construiasc tehnica de evaluare, care nu mai pornete de la un model de rspuns dinainte tiut. Probabil, produsele obinute se raporteaz unele la altele, n evaluare lundu-se n calcul i calitatea rspunsului, dar i nota lui de originalitate. Ca atare, putem evalua cu acelai calificativ (not) dou sau mai multe rspunsuri, chiar dac ele sunt diferite ntre ele ca mod de realizare sau ca soluie propus


A. TEHNICI OBIECTIVE DE TESTARE ITEMI OBIECTIVI / CU RSPUNSURI NCHISEItemii obiectivi presupun ntotdeauna alegerea rspunsului/rspunsurilor corecte dintr-o list anterior elaborat pus la dispoziie celui examinat, fiind denumii i itemi cu rspuns dat. Rspunsul corect este identic pentru toi cei examinai, iar evaluatorii corecteaz aceti itemi strict identic. Tehnica alegerii duale itemi cu alegere dualElevului i se ofer posibilitatea s aleag rspunsul corect din dou alternative: adevrat - fals; da - nu; corect - incorect; fapt opinieExemplu:Citete afirmaiile de mai jos i pune A(adevrat) sau F(fals) la nceputul lor dup cum tu le consideri adevrate sau false:TME este o stinta pedagogica fundamentala. Functia diagnostica este una din functiile specifice ale evaluarii. Evaluarea formativa este o evaluare de produs. n general, itemii cu rspuns dual conduc la evaluarea unor comportamente corespunztoare nivelelor taxonomice inferioare (cunoaterea i nelegerea), ns pot fi utilizai n elaborarea testelor pentru majoritatea disciplinelor de nvmnt. Limite:elevul poate ghici rspunsul corect n proporie de 50%Remediu:- se cere elevului modificarea enunului fals pentru ca afirmaia s devin adevrat


Tehnica perechilor sau a asocierilor ( a itemilor tip pereche sau de asociere); variante:mperechere asimetricmperechere simetricLe solicit elevilor stabilirea unor corespondene ntre cuvinte, propoziii, fraze, numere, litere sau alte categorii de simboluri, distribuite pe dou coloane paralele. Elementele din prima coloan, pentru care urmeaz a se identifica elementele corespunztoare din coloana a doua, sunt, de obicei, denumite premise, iar cele din a doua coloan, rspunsuri.Criteriul sau criteriile pe baza crora urmeaz a se stabili perechile de elemente sunt enunate sau explicate n instruciuni:

Exemplu de mperechere asimetric:nscriei n spaiul din stnga numerelor de ordine ale parametrilor automobilelor din coloana A, litera care corespunde caracteristicilor din coloana B:AB________1. Budapesta a. capitala Greciei________2. Amsterdam b. capitala Belgiei________3. Praga c. capitala Olandei d. capitala Ungariei e. capitala Cehiei


Exemplu de mperechere simetric:nscriei n spaiul din stnga numerelor de ordine ale romanelor din coloana A, litera care corespunde scriitorilor autori din coloana B:AB_______1. Arta conversaieia. Cinghiz Aitmatov _______2. Singur pe lumeb. Eugen Barbu_______3. Eafodulc. Laureniu Fulga _______4. Alexandra i Infernuld. Victor Hugo _______5. Incognitoe. Ion Lncrnjan_______6. Oamenii mriif. Hector Malot _______7. Fiul seceteig. Ileana VulpescuAvantaje:permite abordarea unui foarte important volum de rezultate de nvare ntr-un interval de timp redus, cu utilizarea eficient a spaiului pe foile de test, ct i cu utilizarea eficient a timpului profesorului la cotare;uurina construciei elementelor de testDezavantaje:tehnica nu poate fi utilizat pentru abordarea unor rezultate de nvare complexeeste dificil, n unele cazuri, s construim liste de premise sau de rspunsuri care s fie omogene


Tehnica alegerii multiple itemi cu alegere multiplPresupune solicitarea alegerii unui rspuns dintr-o list de alternative, oferite pentru o singur premis (o premis i o list de alternative)La nivelul alternativelor, facem deosebirea dintre rspuns(alternativa corect) i distractori(alternative incorecte, dar plauzibile)Variante:alegerea rspunsului corect:Care dintre unghiurile de mai jos este specific pivoilor? ncercuiete litera rspunsului corect!a. unghiul de convergen - b. unghiul de carosaj - c. unghiul de fug alegerea celui mai bun rspuns:Care dintre urmtoarele considerente este cel mai frecvent utilizat, atunci cnd urmeaz a se decide n ce ora urmeaz a se stabili capitala unui stat? ncercuii litera corespunztoare variantei alese!a. amplasarea centralb. clim favorabilc. reeaua de comunicaii cu restul riid. numrul de locuitori


Avantaje:Nivel nalt de flexibilitate datorit evantaiului larg de niveluri de generalitate n care pot fi formulate att premisele, ct i alternativele fiindu-i accesibile nu numai nivelurile inferioare ale domeniului cognitivTehnica faciliteaz asigurarea omogenitii interne a fiecrui element de test, datorit utilizrii unei premise unicePermit discriminri complexe n domeniile de coninut sau situaiile unde li se cere n mod expres acest lucru elevilorErorile comise de candidai pot furniza informaii utile profesorului, fiind susceptibile de prelucrare i interpretare statisticLimite:tehnica este inutilizabil atunci cnd profesorul dorete s afle dac elevul este capabil s-i organizeze i s-i exprime corect ideileuneori, construirea unui numr suficient de distractori plauzibili poate constitui o dificultateUtilizare:cunoaterea terminologiei:cunoaterea unor elemente specifice:Cunoaterea unor principii:Cunoaterea unor metode sau proceduri:Capacitatea de a aplica cunotine i principii:Capacitatea de a justifica metode i proceduri:Capacitatea de a interpreta relaii cauz-efect:


Recomandri pentru construirea itemilor obiectivi:premisa va conine o premis bine definit i va fi semnificativ independent de citirea alternativelortoate alternativele vor fi gramatical compatibile cu premisantre alternative va figura un singur rspuns, fie n ipostaza de corect, fie n ipostaza de cel mai buntoi distractorii vor fi plauzibilirspunsurile vor fi amplasate aleatoriu pe toate locurile disponibile din coloana alternativelorB. TEHNICA SEMIOBIECTIV DE TESTARE ITEMI SEMIOBIECTIVI / CU RSPUNSURI SEMI-NCHISEPrincipala caracteristic a tehnicilor semiobiective const n faptul c elevul este pus n situaia de a-i construi rspunsul i nu de a-l alege, ca n cazul itemilor de tip obiectivAvantaje:permite profesorului s identifice natura/tipul greelilor elevilor, n scop diagnostictesteaz o gam mai larg de capaciti intelectuale, cu un nivel de dificultate i complexitate variabil


Variante:Tehnica rspunsului scurt rspunsul scurt este solicitat prin intermediul unei ntrebri:Care este unitatea de msur pentru tensiunea electric ? ( )Ce tipuri de autoturisme se fabric sau se asambleaz n ara noastr? (.)rspunsul este solicitat prin intermediul unei formulri incomplete itemi de completareUnitatea de msur pentru tensiunea electric este ( .. )n ara noastr se fabric i se asambleaz urmtoarele tipuri de autoturisme (..)Avantaje: itemi cel mai uor de construitexistena unui model complet al rspunsului corect faciliteaz construirea itemilor, sursele de apariie a ambiguitii fiind astfel limitaterspunsul fiind produs de subiect i nu selecionat dintr-o list de alternative, reduce drastic probabilitatea rspunsului corect prin ghicireLimite:complexitatea redus a rezultatelor de nvare abordabiledificulti suplimentare la cotare legate de lecturarea rspunsului produs


Tehnica ntrebrilor structurate itemi structuraiO ntrebare structurat este format din mai multe subntrebri de tip obiectiv sau semiobiectiv, legate ntre ele printr-un element comun. Ele umplu practic golul dintre tehnicile de evaluare cu rspuns liber (deschis) i cele cu rspuns limitat (nchis) impuse de itemii de tip obiectivModul de prezentare a unei ntrebri structurate include:un material/stimul (texte, date, diagrame, grafice etc.)subntrebridate suplimentarealte subntrebriSubntrebrile din componena lor pot viza practic toate categoriile taxonomice, pornind de la simpla reproducere (definiii, enumerri etc.) pn la aplicarea cunotinelor, analiz, sintez i formularea de ipoteze, judeci de valoare etc.Exemplu:Temperamentul este latura dinamico-energetic a personalitiiAfirmaia de mai sus este adevrat sau fals?Care sunt principale tipuri temperamentale? Precizeaz dup ce criteriu ai fcut aceast clasificare?Enumer patru nume de specialiti care au ncercat s explice ce este temperamentul!Tu crui tip temperamental crezi c i aparii ?Autocaracterizeaz-te din punct de vedere temperamental!


Cerine ale tehnicii ntrebrilor structurate:ntrebarea trebuie s cear rspunsuri simple la nceput i s creasc dificultatea acestora spre sfritfiecare subntrebare va fi relativ independent i nu va depinde de rspunsul corect la subntrebarea precedentfiecare subntrebare poate testa unul sau mai multe obiectiveun spaiu liber va fi lsat sub ntrebare, suficient, pentru rspunsul elevului ndrumri practice:Se va utiliza mai degrab un numr mare de ntrebri care cer rspunsuri relativ scurte(una-dou fraze) dect un numr mic de ntrebri care presupun rspunsuri lungi.

C. TEHNICA RSPUNSURILOR DESCHISE / SUBIECTIVE ITEMI CU RSPUNS DESCHIS / SUBIECTIVAceast tehnic ofer elevilor posibilitatea de a formula, a descrie, a prezenta sau a explica diferite concepte, relaii, argumente, metode de rezolvare etc.Ea permite elevilor s-i construiasc rspunsurile, testnd obiective ale nvrii care vizeaz originalitatea, creativitatea i, mai ales, personalitatea exprimat n individualitatea rspunsurilor.


Variante:Tehnica rezolvrii de probleme itemi tip rezolvare de problemeRezolvarea tip problem sau a unei situaiiproblem are ca scop dezvoltarea creativitii, a gndirii divergente, a imaginaiei, a capacitii de a genera sau reformula o problemExemple:I. Alctiuete un text format din 2 propoziii simple i 3 propoziii dezvoltate, n care sa vorbeti despre : toamn, vnt, cer, psri, frunze.II. Citete cu atenie textulMaimua i vulpeaFiarele pdurii au ales-o odata pe maimu cpetenia lor. Vulpea vine ntr-o zi la maimu i i spune:- De acum, eti cpetenia noastr i vreau s-i fac o bucurie. Am gsit n pdure o comoar. Vreau s i-o art.Maimua se bucur i o porni dup vulpe. Aceasta se duse n faa unei capcane:- E ascuns aici. Ia-o singur. N-am vrut s o ating naintea ta.Maimua vr laba n capcan i se prinse n ea. Vulpea fugi n pdure, adun toate animalele i le-o art pe maimu:- Privii, le spuse ea, ce fel de cpetenie vai ales ! N-are un dram de minte, de aceea a nimerit n capcana. ...........Cerine:


Ce titlu ai da tu acestui text?Formuleaz sub forma unor propoziii primele dou idei principale ale textului.Subliniaz verbele din ultimile dou rnduri ale textului.Analizeaz ultimul verb folosit de autorAtenie! Raportndu-ne la taxonomia lui Bloom, cu acest gen de tehnic se testeaz capaciti ce in de :aplicare, analiz, sintez, evaluare

Tehnica tip eseu itemi tip eseuTesteaz obiective ca: abilitatea de a evoca, organiza i integra ideileabilitate de exprimare personal n scrisabilitatea de a realiza/produce interpretarea i aplicarea datelorasigur o evaluare global a unei sarcini de lucru ale crei obiective nu pot fi evaluate prin itemi obiectiviAvantaje: construiete o imagine coerent a modului de interaciune real a cunotinelor, coninuturilor i abilitilor


Variante:dup dimensiunea rspunsului ateptateseu cu rspuns restrns (minieseul). n acest caz, este precizat prin enun limita de numr de cuvinte, de paragrafe sau de rnduriExemplu: Scriei n 20 de rnduri un eseu despre informatica aplicateseu cu rspuns extins (pentru care limita este timpul acordat rezolvrii)Exemplu: Cum putem avea un mediu nconjurtor curat?Rspunde la ntrebarea de mai sus, pornind de la explicarea expresiei subliniate n afirmaia urmtoare: Lacurile sunt ochii albatri ai pmntului care privesc spre cerTimp de lucru: 30 minutedup tipul rspunsului ateptat:eseu structurat sau semistructurat ( cu ajutorul unor sugestii sau cerine, rspunsul ateptat este ordonat i orientat)Exemplu: Elaborai un eseu despre constituiile statului romn, avnd n vedere :- precizarea anilor adoptrii a dou dintre constituiile Romniei i prezentarea unei asemnri ntre prevederile celor dou legi fundamentale - menionarea a dou deosebiri dintre prevederile celor dou consituii - menionarea a cte unei consecine a adoptrii fiecreia dintre cele dou constituii - formularea unui punct de veder cu privire la necesitatea adoptrii unor legi fundamentale n statul romn i susinerea acestuia cu un argument istoric eseul liberExemplu: Scriei un eseu despre viitorul profesorului


5.3.3.2. Formularea itemilor cerine i recomandri Concordana itemilor cu tipurile de obiective vizate este dependent de modul de formulare a acestora. Regula general este aceea ca formularea itemilor s solicite ct mai exact i mai adecvat competenele/subcompetenele ce urmeaz s fie evaluate, n raport de situaiile lor concrete de manifestare. Aadar, nu elaborm mai nti itemi pe care i asamblm n prob ci elaborm proba de evaluare care vizeaz anumite competene, n raport de care construim tipuri adecvate de itemi. Astzi exigenele de formulare a itemilor s-au adaptat noilor viziuni asupra finalitilor educaionale. n acest sens deosebit de interesant este dezvoltarea lui N.M. Sanders asupra Taxonomiei interogaiei a lui B.S.Bloom, respectiv, punerea n coresponden a tipologiei itemilor cu clasele comportamentale ale taxonomiilor obiectivelor pedagogice (N.M.Sanders, 1969, Classroom Questions: What Kinds?, New York, Harper and Row). n acest sens se ntocmete matricea de specificaie, pentru a vedea reprezentativitatea itemilor folosii i corespondena lor cu clasele taxonomice ale lui Bloom ( a se vedea matricea de specificatii in cursul urmator)


5.3.4. Stabilirea unei grile de corectare care s includ rspunsurile corecte pentru fiecare item uureaz considerabil activitatea evaluatorului. Grila de corectare este instrumentul care mijlocete, uureaz i scurteaz corectarea. De fapt, ea este modelul rspunsurilor corecte i complete. Ea const n precizarea datelor, ideilor principalelor sau a performanelor ce trebuie s se regseasc n rspunsurile complete sau, mai adecvat spus, n rspunsurile aa-zise bune: Grila de corectare servete profesorului cnd acesta face evaluarea i elevului cnd este autoevaluare. Grilele de corectare pot mbrca diferite forme ( gril ablon pentru probele cu rspunsuri nchise, grile liste de rspunsuri etc.) n funcie de natura probei/rspunsurilor ateptate.


Grila de corectare


5.3.5. ELABORAREA BAREMULUI DE NOTARE SAU A SCHEMEI DE PUNCTAJn aceast etap se trece la cotarea itemilor, stabilirea punctajului pentru fiecare item, iar n cazul rspunsurilor deschise cu grad de originalitate, chiar pentru diferite componente ale fiecrui item. Deci, un etalon de apreciere a unei probe indic condiiile principale ale rspunsului ateptat la un item i punctajul atribuit.Referitor la punctajul atribuit, se pot ntlni mai multe variante:se atribuie o not pentru fiecate item, urmnd s se fac media aritmetic a acestora , care va exprima valoarea lucrrii (7 +9 +6 +10 +8 = 42; 40 : 5 = 8). Acest procedeu este mai rar i se utilizeaz doar n cazurile n care greutatea itemilor este aproximativ egal;stabilirea unui punctaj diferit de la un item la altul, funcie de importana fiecruia n ansamblul probei. n acest variant se ajunge la punctajul cumulativ, valoarea rezultatului obinut depinznd de totalul punctelor acumulaten acest variant se pot regsi dou cazuri:cnd totalul punctajului stabilit este n coresponden cu scala sistemul de notare din ara respectiv, n cazul nostru, maximum 10 puncte;cnd totalul punctelor este mai mate dect lungimea scalei i n acest caz se recurge la convertirea n note a punctajului obinut de fiecare elev, care poate fi: - o formul simbolic matematic:nr total de puncte obinute x 10 numr total puncte - o nomogram


Barem de corectur/notare


5.3.6. Aplicarea/pretestareaDac este vorba de teste nestandardizate sau elaborate de profesor, etapa urmtoare include aplicarea testului, n timp ce n cazul testelor standardizate aceast etap este pregtit de etapele de pretestare i de revizuire, reformulare i definitivare a acestuia. A. Anastasi (1976, p. 413) indic ns c i n cazul testelor nestandardizate trebuie realizat o pretestare care s includ o analiz a itemilor (calcularea coeficientului de dificultate i a celui de discriminare).Pretestarea are n vedere verificarea calitilor globale ale testului (Karmel i Karmel, 1978; Radu, 2000; Moise, 2003) - obiectivitate, aplicabilitate, fidelitate i validitate, precum i a calitilor fiecrui item dificultate i putere de discriminare. n ultima etap de construire a unui test revizuirea acestuia o parte dintre itemi sunt fie reformulai, fie eliminai n funcie de rezultatele analizei privind caracteristicile prezentate anterior. Pentru a fi corect aplicat un test docimologic standardizat, ca i un test psihologic trebuie nsoit de un manual de utilizare care s includ toate detaliile tehnice, precum i informaii complete privind administrarea i maniera de calculare a scorurilor.Coeficientul de dificultate al unui item (Anastasi, 1976; Karmel i Karmel, 1978; Radu, 2000; Moise 2003) se calculeaz ca procent de subieci care rezolv corect un item. Itemii prea uor sau prea dificil de rezolvat nu ofer informaii relevante despre subieci i sunt eliminai n etapa de revizuire a testului. Din punct de vedere strict statistic, itemul ideal ar fi cel care este rezolvat corect de 50% dintre subieci. n general, se accept un coeficient de dificultate cuprins ntre 25% i 75%.Coeficientul de discriminare (Anastasi, 1976; Karmel i Karmel, 1978; Radu, 2000; Moise, 2003) indic msura n care un item face diferena ntre subiecii cu performane nalte i cei cu performane sczute. Se poate calcula ca diferen ntre procentul de subieci care au rezolvat corect itemul analizat din cincimea superioar a clasamentului, realizat pe baza scorurilor totale la test (primii 20% dintre subieci) i procentul de subieci care a rezolvat corect itemul analizat din cincimea inferioar a clasamentului (ultimii 20% dintre subieci). Valoarea minim acceptat a coeficientului de discriminare este de 25%.

5.4. Analiza i interpretarea rezultatelor obinute

5.4.1. Administrarea instrumentului de evaluareTestul a fost aplicat pe 24 elevi de clasa a VIII-a.Precizri fcute naintea nceperii probei: Toate subiectele sunt obligatoriiTimpul efectiv de lucru este de 2 ore. Subiectul I (60 de puncte) Subiectul al II-lea (30 de puncte)Se acord 10 puncte din oficiu

5.4.2. Rezultate obinute:

5.4. Analiza i interpretarea rezultatelor obinutePe grupe de note: 9 - 10 = 6 elevi8 9 = 3 elev7 - 8 = 4 elevi6 7 = 4 elevi5 6 = 4 elevi4 5 = 2 elev3 4 = 1 elevMedia clasei: 6, 66 3, 4, 4, 5, 5, 5, 5, 6, 6, 6, 6, 7, 7, 7,7, 8, 8, 8, 9, 9, 9, 9, 10, 10Mediana: 7Procent de promovabilitate: 87,5%

5.4. Analiza i interpretarea rezultatelor obinute5.4.3. Matricea pe itemi

Analiza rezultatelor pe itemi: - cei mai bine realizai explicaii - cei mai slab realizai - explicaii

5.4. Analiza i interpretarea rezultatelor obinute5.4.4. Matricea pe itemi/elev

5.4. Analiza i interpretarea rezultatelor obinute5.4.5.Matricea obiective/elev

5.4. Analiza i interpretarea rezultatelor obinute5.4.6. Concluzii. Msuri de optimizareDin analiza gradului de realizare a itemilor/obiectivelor i, respectiv, a realizrii acestora de ctre elevi se formuleaz concluzii asupra calitii activitii didactice dar i asupra nvrii elevilor i a dificultilor ntmpinate n raport de toate acestea se formuleaz propuneri de optimizarea situaiei, cu msuri de redresare pentru ntrega clas, dac este cazul, cu msuri pentru anumite greeli tipice prezente la anumite categorii de elevi i cu msuri individuale pentru elevii cu probleme deosebite

Teme de reflecie i evaluare/autoevaluareElaborati, n domeniul de specializare cte 2 itemi din fiecare variant a tipologiilor cunoscute. Elaborai o prob de evaluare n care s utilizai diferitele tipuri de itemi.Interpretai si evaluai probe de evaluare elaborate.

BibliografieBloom, B.S., Hastings, J.Th., Madaus, G.F., (1971), Handbook on Formative and Summative Evaluation of Student Learning, Mc. Grawn-hill Book Company.Boco, M., (2004), Evalurea n nvmnmtul primar. Aplicaii practice, Casa Crii de tiin, Cluj-Napoca.Holban, I., (1995), Testele de cunotine, EDP, Bucureti. Mileman, J., Hammond, L.D., (1990), The New Handbook of Teacher Evaluation. Assessing Elementary and Secondary School Teachers, CORWIN PRESS, INC, Newbury Park, California.Morissette, D., (1996), Guide pratique de lvaluation sommative, ditions du Renouveau Pdagogique Inc., Montral.Panuru, S. (coord.) (2008). Teoria i metodologia instruirii. Teoria i metodologia evalurii. Braov: Ed. Universitii Transilvania. Potolea, D., Manolescu, M. (2005). Teoria i practica evalurii educaionale. MEC: Proiectul pentru nvmntul Rural. Pu, V., (1999), Ghid de evaluare pentru nvmntul primar, editat de Trithemius Media, Bucureti.Radu, I.T., (2000), Evaluarea n procesul didactic, Editura Didactic i Pedagogic, Bucureti.8. Sanders, N.M., (1969), Classroom Questions: What Kinds?, New York, Harper and RowStronge, J.H., (1997), Evaluating Teaching. A Guide to Current Thinking and Best Practice, CORWIN PRESS, INC, California.Stoica, A. (coord.) (2001). Evaluarea curent i examenele. Ghid pentru profesori. Bucureti: Ed. ProGnosis. Stoica, A. (2007). Evaluarea progresului colar. De la teorie la practic. Bucureti: Ed. Humanitas Educaional. * * * Teze cu subiect unic: http://www.examene.edu.ro. Detalieri ale matricei de specificaii: : http://www.examene.edu.ro Barem de corectare i de notare: : http://www.examene.edu.ro Programa colar revizuit Limba i literatura romn, clasele a VII-a i a VIII-a. Bucureti: MECT, 2003: http://www.edu.ro.

Tme5 Elab Probei de Ev

Documents