Test ų kūrimo procesas Testo aprašas Užduotys

1. Testų kūrimo procesasTesto aprašasUžduotys Joana Pribušauskaitė, VU Lituanistinių studijų katedra, 2006-06-29 joana.pribusauskaite@flf.vu.lt EUROPOSSÀJUNGA

2. Testo kūrimo etapai (ciklas) • Naujo testo poreikis • Planavimas • Projekto rengimas (pirminis aprašas) • Parengiamieji darbai • Bandymas • Pirminis testavimas • Įvertinimas/patikrinimas • Testo veikimas • Stebėjimas Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

3. Planavimas ir projekto rengimas • Kandidatai • Pirminis testo aprašas • Testo forma • Sudedamosios dalys (sandai) • Užduočių skaičius ir tipai, jų tikrinimo židiniai • Temos • Vertinimas (kriterijai) • Rezultatų apskaičiavimas • Materialinė bazė Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

4. Parengiamieji darbai • Bandymas • Pirminis testavimas • “tikri” kandidatai • statistiškai reikšmingas duomenų kiekis • visų testo elementų tikrinimas (punktų, užduočių formuluočių, vertinimo kriterijų ir pan.) • Rezultatų analizė • Pirminio aprašo taisymas Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

5. “Veikiantis” testas, stebėjimas • Kandidatų ir testo vykdytojų komentarų kaupimas • Peržiūrėtinų ir keistinų dalykų nustatymas • Naujos patirties ir testavimo teorijos pasiekimų taikymas Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

6. Kalbos mokėjimas Bachmano ir Palmerio modelis • Organizacinės žinios • Gramatikos mokėjimas (sintaksė, morfologija, fonetika, rašyba ir skyryba) • Teksto supratimas (retorinė organizacija, kohezija) • Žodyno mokėjimas (reikšminės ypatybės, denotacija, konotacija) Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

7. Praktinės žinios (pragmatika) • Funkcinės žinios (ideacinės – idėjų, žinių perteikimas, manipuliacinės – poveikis aplinkai, euristinės – bendrųjų žinių plėtimas, kalbinės vaizduotės – kūryba) • Sociolingvistinės žinios (kalbos vartojimo normos, tarmės, registrai, funkciniai stiliai, natūralumas) Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

8. Testo modelis • Sandų skaičius • Sando vertė (viso testo atžvilgiu) • Bendras taškų skaičius • Kiekvieno sando užduočių skaičius (jei reikia – ir pirminiai taškai) • Užduočių židiniai • Užduočių ir punktų tipai • Visų užduočių įvestys (tekstai, grafinė medžiaga) Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

9. Testo modelį ir užduočių tipus lemia: • Profesiniai motyvai • Kokiose gyvenimo situacijose kandidatui reikia vartoti kalbą • Kokio kalbos mokėjimo lygio reikia kandidatų atliekamiems socialiniams vaidmenims • Kokie įvykiai būdingi tokioms situacijoms ir tokiems socialiniams vaidmenims • Kokią informaciją turi gauti socialiniai partneriai Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

10. Praktiniai motyvai • Egzaminuotojų ir auditorijų kiekis • Kandidatų skaičius ir trukmė • Egzaminuotojų ir vertintojų rengimas • Pageidaujami užduočių tipai • Rezultatų skelbimo būdas • Kokybės kontrolės būdas Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

11. Ribojantys veiksniai • Egzamino priimtinumas socialiniams partneriams • Egzamino ir mokymo programų bei viso proceso dermė • Egzamino sunkumas • Visuomenės samprata, koks turi būti tokios rūšies egzaminas • Egzamino rengimo, vykdymo ir rezultatų skelbimo tinkamumas Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

12. Galutiniame egzamino apraše nurodoma • Bendra trukmė, kiekvieno sando atlikimo laikas • Iš kiek dalių susideda • Kiek punktų kiekvienoje dalyje • Punktų ir užduočių tipai • Punktų ir užduočių židiniai Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

13. Įvesties tekstų tipai • Iš kur imami tekstai (periodika, enciklopedijos, kelionių žurnalai, interneto straipsniai ir pan.) • Bendras žodžių skaičius, atskirų užduoties dalių apimtis (pasirinkčių, įvesties ir pan.) • Užduočių pateikimo forma • Temų parinkimas Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

14. Taškų skaičius: bendras ir kiekvienos užduoties • Taškų perskaičiavimas (jei už kurią dalį skiriami pirminiai taškai) • Rašymo ir kalbėjimo vertinimo kriterijai • Kaip vertinama: teisingų atsakymų lapas, tikrintojų darbo koordinavimas, rezultatų žymėjimas Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

15. Kiek yra egzaminuotojų ir vertintojų, pvz., kiek specialiai parengtų žmonių vertina kalbėjimo ir rašymo atliktis • Kalbėjimo užduočių stimulai • Rezultatų skelbimas kandidatams ir socialiniams partneriams (žemiausių reikalavimų rinkinys, vertimas pažymiais ir pan.) Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

16. Egzamino data, sąlygos • Galimybė kandidatams peržiūrėti įvertintą darbą • Pasirengimas egzaminui: per kiek laiko galima pasirengti, pagal kokias programas ir vadovėlius ir pan. Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

17. Testų ypatybės • Pagrįstumas: ar matuojama tai, kas numatyta matuoti? • Patikimumas: Ar galima pasitikėti testo rezultatais? • Užduočių skiriamoji geba: ar užduotys atskiria stipresniuosius kandidatus nuo silpnesniųjų? • Užduočių sunkumas: ar buvo užduočių ir stipresniems, ir silpnesniems? • Objektyvumas: ar rezultatai nepriklauso nuo vertintojų? • Praktiškumas: kiek kainuoja parengimas ir vykdymas? Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

18. Pagrįstumas • Turinio pagrįstumas • kiek išsamiai ir visapusiškai tikrinami mokymo programose numatyti dalykai; • kiek apimamas mokomosios medžiagos turinys • kiek atspindimi mokymo tikslai • ar užduotys sudaro tikrinamų žinių ar gebėjimų srities reprezentatyvią imtį Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

19. Kriterinis pagrįstumas kiek testo rezultatai koreliuoja su kitokiais tų pačių gebėjimų matavimais (kitų testų, praktinės veiklos rezultatais) • Konstrukto pagrįstumas Kiek testas atspindi esminius teorijos aspektus (pvz., tikrinant komunikacinę kompetenciją - ar aiškūs užduočių komunikaciniai tikslai, ar tikrinama vartosena realiose gyvenimo situacijose) • Išvaizdos pagrįstumas Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

20. Užduotys • Susideda iš užduoties formuluotės, punktų ir numatomų atsakymų. • Pateikiamas tipiškas pavyzdys, nurodantis užduoties židinį. Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

21. Punktų rengimo taisyklės • Tikrinama svarbi informacija • Turi būti laikomasi gramatikos taisyklių • Jei naujas punktų tipas, pateikiamas tipiškas pavyzdys • Tekstu grindžiami punktai: netinka, jei galima atsakyti iš patirties ar bendro išsilavinimo • Tikrinant bendrą teksto supratimą, punktai pateikiami prieš tekstą, tikrinant detales - po Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

22. Užduočių (punktų) tipai A. Rinkimosi užduotys (punktai) • Rinkimasis iš kelių pasirinkčių • “Teisingų/neteisingų” teiginių parinkimas (teiginių įvertinimas) • Tarpų užpildymas renkantis iš kelių pasirinkčių • Tarpų užpildymas renkantis iš sąrašo (arba – pastraipos lygiu) • Siejimo užduotis (atitikmenų parinkimas) • Daugkartinis atitikmenų siejimas • Klaidų radimas Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

23. Rinkimosi (A tipo) užduočių trūkumai • Tikrina atpažinimą, ne produkavimą • Negalima patikrinti visų gebėjimų • Riboja kandidatų saviraišką • Dažnai priklauso nuo skaitymo gebėjimų • Leidžia spėti • Daug laiko reikia sukurti • Skurdina mokymo procesą (atgalinis testų poveikis) Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

24. Reikalavimai kelių pasirinkčių užduotims • Teisingas turi būti tik vienas atsakymas – kiti be jokių išlygų neteisingi • Turi būti pateikiamas minimalus reikalingas kontekstas – kad jo nereikėtų susikurti • Teisingasis atsakymas neturi išsiskirti išoriškai nei ilgumu, nei sakinio sudėtimi • Gramatiškai turi tikti visi atsakymai • Jei atsakymą galima pateikti neskaičius/ neklausius teksto, vadinasi, jis netikrina teksto supratimo Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

25. Atsakymai neturi būti daugiaprasmiai, vertinamieji (pvz., lengva išmokti, norėjo padaryti gražiau...) • Trukdžiai turi būti patrauklūs – kad nebūtų galima atlikti atmetant aiškiai netinkamus • Netinkamos pasirinktys neturi būti siauresnės reikšmės sinonimai • Klaidingos pasirinktys neturi specialiai painioti – tikrinamos žinios, o ne orientacija • Reikia vengti dvigubų neiginių • Jei 2 pasirinktys yra absoliučiai priešingos reikšmės, tai riboja rinkimąsi (arba abu atmestini, arba renkamasi tik iš dviejų) Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

26. B. Punktai, kurių atsakymus pateikia kandidatas • Trumpų atsakymų punktai • Sakinių baigimas • Laisvasis tarpų užpildymas • Sakinių keitimas • Žodžių sudarymas • Keitimas ir tarpų užpildymas • Užrašų išplėtimas • Klaidų taisymas • Informacijos perkėlimas Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

27. C. Punktais neskirstomos užduotys • Rašymas (rašinys, esė) • Kalbėjimo užduotys • Temos pasakojimas • Pasakojimas remiantis paveikslėliais • Kalbėjimas remiantis rašytiniais tekstais • Sankaita Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

28. Tekstai: autentiškumas ir natūralumas • Autentiškumas • tekstai – “gyvenimiško” kalbos vartojimo pavyzdžiai (iš laikraščių, žurnalų, knygų, skirtų gimtakalbiams) • teksto ir skaitytojo tarpusavio sąveika (kiek skaitytojui suprantami faktai ir kultūros reiškiniai Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

29. Tekstų ir užduočių natūralumas • Situacijų natūralumas Atliekant užduotį reikia vartoti tokią pat kalbą, kaip gyvenime Situacijų būdingų bruožų išskyrimas ir atkūrimas teste Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

30. Tarpusavio sąveikos natūralumas • Tekstai, situaciniai kontekstai ir užduotys turi mėgdžioti tikrovę, o ne kopijuoti • Situacijos turi būti pažįstamos ir svarbios tam tikro lygio testuojamiesiems • Aiškus užduoties tikslas ir kontekstas • Aiškūs vertinimo kriterijai Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

31. Tekstų sunkumas • Kalbos sudėtingumas • Kontekstas • lengviau suprantamas tiesioginis kreipimasis į skaitytoją ar klausytoją, o ne kitų veikėjų sąveika • padeda suprasti iliustracijos ir vaizdas • neribojamas laikas • gerai motyvuota užduotis • teksto turinys: veikėjai, siužeto linijos ir pan. • tarpusavio sąveikos tipas: oficialus, neutralus, neoficialus Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

32. Klausymo tekstai • Lengviau suprantamas monologinis tiesioginis kreipimasis; dialogai: kai skirtingi veikėjai, jų socialiniai vaidmenys ir pan. • Aiškus kontekstas • Kalbos perteklius • Neutralus stilius • Natūralus tempas, tolygus kalbėjimas Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA

33. Ačiū už kantrybę – ir gero vakaro! ☺ Pribušauskaitė, 2006-06-29 EUROPOSSÀJUNGA