Osa A1: Raamdokumendi keeleoskustasemete põhitunnused (peatükk 1)
ÜLDINE EKSAMI KIRJELDUS 1. Üldinfo
11. Kuidas tulemus
Põhivaldkond (põhivaldkonnad) Testiosad Soorituskünnist iseloomustavad
standarditud sooritused raamatukaupluses eksamikeskuses nõudmisel
Muu ________________________________
11. Kuidas tulemus esitatakse?
Üldhinne
Iga testiosa hinded
Üldhinne koos kirjeldusega Iga testiosa kirjeldus Vorm A1: Üldine eksami kirjeldus (jätk)
Eksamiarendus Lühikirjeldus ja/või viited
1. Milline organisatsioon otsustas, et eksam on vajalik?
Teie oma organisatsioon/kool Kultuuriinstituut
Haridusministeerium Justiitsministeerium
Muu: täpsustage: _________________
2. Kui otsus tuli väljastpoolt, siis kuivõrd mõjutas see eksami ülesehitust ja
arendustegevust?
Määrati üldised eesmärgid Määrati keeleoskustase
Määrati eksamitöö valdkonnad või sisu Määrati eksami formaat ja ülesandetüübid Muu: täpsustage: _________________
3. Kui otsus ei tulnud väljastpoolt, siis millised muud asjaolud määrasid eksamitöö ülesehituse ja arendustegevuse?
Vajaduste analüüs
Eksami eesmärkide kirjeldamine asutuse sees Keeleoskustaseme kirjeldamine asutuse sees Õppe- või ainekava
Sihtrühma kirjeldus 4. Kas ülesandeid koostades arvestatakse Keeleline taust (1. keel)
130
sihtrühma iseärasustega? Keeleõppetaust Vanus
Haridustase
Sotsiaalmajanduslik taust Sotsiaalkultuurilised tegurid Rahvuslik taust
Sugu 5. Kes koostab küsimusi või tegeleb
testiarendusega?
6. Kas kvaliteedi tagamiseks
eksamiülesannete koostajaid juhendatakse?
Koolitus
Juhendmaterjalid Kontroll-lehed
Valiidsete, usaldusväärsete ja sobivate ülesannete näidised:
Kalibreeritud vastavalt raamdokumendi tasemekirjeldustele
Kalibreeritud vastavalt mõnele muule tasemekirjeldusele:
_________________________________
7. Kas ülesannete koostajatele korraldatakse koolitusi?
Jah Ei 8. Kas enne ülesannete kasutamist toimub
arutelu nende üle?
Jah Ei
9. Kui jah, siis kellega? Mõne kolleegiga individuaalselt Rühmaarutelu asutuse sees Asutuse väline eksamikomisjon Võtmeisikud asutuse sees Võtmeisikud väljastpoolt asutust 10. Kas eksamiülesandeid eeltestitakse? Jah
Ei 11. Kui jah, siis kuidas?
12. Kui ei, siis miks?
13. Kas antakse hinnang testi reliaablusele? Jah Ei
14. Kui jah, siis kuidas? Andmete kogumine ja psühhomeetrilised toimingud Muu: täpsustage: _________________
15. Kas antakse hinnang erinevatele valiidsusaspektidele? 16. Kui jah, siis kirjeldage, kuidas.
Vorm A2: Eksamiarendus
131 Hindepunktide andmine (ing k marking):
Testiosa
Täitke see vorm iga testiosa kohta.
Lühikirjeldus ja/või viited 1. Kuidas testiülesandeid hinnatakse? Retseptiivsed ülesanded:
Optilise märgiselugejaga Võtmehindamisega
Produktiivsed või lõimitud ülesanded:
Koolituse saanud eksamineerijad Õpetajad
2. Kus testiülesandeid hinnatakse? Keskuses Kohtadel:
Kohalike töörühmade poolt
Individuaalsete eksamineerijate poolt 3. Milliste kriteeriumite alusel valitakse
hindajaid?
4. Kuidas tagatakse hindamise täpsus? Koordineerija kontrollib regulaarselt Hindajate (ingl markers/raters) koolitamine Otsuste standardimine hinnete korrigeerimise sessioonidel
Testiülesannete standarditud näidete kasutamine:
Kalibreeritud vastavalt raamdokumendi tasemekirjeldustele
Kalibreeritud vastavalt mõnele muule tasemekirjeldusele
Kalibreerimata 5. Kirjeldage produktiivsete ja/või lõimitud
testiülesannete hindamispõhimõtteid
Üldskoor (ingl holistic score) iga ülesande eest Hindepunktid (ingl marks) iga ülesande erinevate aspektide eest
Hindamisskaala (ingl rating scale) testi kui terviku soorituse hindamiseks
Hindamistabel (ingl rating grid) testi iga aspekti soorituse hindamiseks
Hindamisskaala iga ülesande hindamiseks
Hindamistabel iga ülesande aspektide hindamiseks Hindamisskaala vahemikud on määratletud, kuid mitte kooskõlas keeleõppe raamdokumendiga
Hindamisskaala vahemikud on määratletud kooskõlas keeleõppe raamdokumendiga 6. Kas produktiivseid ja/või lõimitud
testiülesandeid hinnatakse üks või kaks korda?
Üks eksamineerija Kaks eksamineerijat
Kirjutise/salvestise kahekordne hindamine Muu: täpsustage:________________
7. Kui toimub kahekordne hindamine, siis mida tehakse, kui hindajate antud punktid on erinevad?
Kasutatakse kolmandat hindajat ja tema otsus on määrav
Kasutatakse kolmandat hindajat ja lõpptulemuseks saab kahe teineteisele lähima hinde keskmine
Kahe hinde keskmine
Kaks hindajat jõuavad omavahel arutluse teel kokkuleppele
Muu: täpsustage:________________
8. Kas arvutatakse hindamise kokkulangevus (ingl inter-rater agreement)?
Jah Ei 9. Kas arvutatakse hindaja kokkulangevus
(ingl intra-rater agreement)?
Jah Ei
Vorm A3: Hindamine
132 Hinde panemine (ingl grading): Testiosa
______________________
Täitke see vorm iga testiosa kohta.
Lühikirjeldus ja/või viited 1. Kas määratakse soorituskünnis (ingl
pass mark) ja/või -hinne (ingl pass grade)?
Soorituskünnis Sooritushinne 2. Kirjeldage toiminguid, mida kasutatakse
soorituskünnise ja/või -hinde ning taseme alampiiri (ingl cut scores) määramiseks
3. Kui kasutatakse ainult ‘sooritatud/
mittesooritatud’, siis kuidas positiivse soorituse alampiir määratakse?
4. Kui pannakse hinne, siis kuidas hindepiirid (ingl grade boundaries) määratakse?
5. Kuidas tagatakse nende standardite järjepidevus?
Vorm A4: Hinde panemine
133
Tulemused Lühikirjeldus ja/või viited
1. Millised tulemused esitatakse eksaminandidele?
Üldhinne või sooritatud/mittesooritatud Iga testiosa hinne või sooritatud/
mittesooritatud iga testiosa kohta Üldhinne ja testiosade kirjeldus
Iga testiosa soorituse kirjeldus aspektide kaupa
2. Millisel kujul tulemused esitatakse? Toorpunktid
Defineerimata hinded (nt “C”) Tase defineeritud skaalal Diagnostilised kirjeldused 3. Millisel dokumendil tulemused esitatakse? Kiri või e-kiri
Tulemuste leht Tunnistus/diplom Veebipõhiselt 4. Kas antakse eksaminandidele teavet, kuidas
tulemusi tõlgendada? Selgitage täpsemalt.
5. Kas eksaminandidel on võimalik näha parandatud ja hindeskoori saanud eksamitöid 6. Kas eksaminandidel on võimalik taotleda ümberhindamist?
Vorm A5: Tulemuste esitamine
134
Andmeanalüüs Lühikirjeldus ja/või viited
1. Kas eksamite kohta kogutakse tagasisidet? Jah Ei
2. Kui jah, siis kes seda teeb? Võtmeisikud asutuse sees (kolleegid) Võtmeisikud väljastpoolt asutust Kohalik(ud) eksamikeskus(ed) Testi läbiviijad
Õpetajad Eksaminandid 3. Kas eksami uuendamisel arvestatakse
tagasisidega?
Jah Ei 4. Kas testide analüüsimiseks kogutakse
andmeid?
Kõikide testide kohta
Eksaminandide valimi põhiselt:
Valimi suurus?: ______. Kui sageli?:_______
Ei 5. Kui jah, siis selgitage, kuidas andmeid
kogutakse
Eeltestimise ajal Eksamite ajal
Pärast eksamite toimumist 6. Mida kogutud andmetes analüüsitakse? Raskus
Eristusjõud Reliaablus Valiidsus 7. Selgitage, milliseid analüütilisi meetodeid
(psühhomeetrilisi toiminguid) kasutatakse.
8. Kas analüüsitakse eksaminandide eri rühmade sooritusi? Kui jah, siis kirjeldage, kuidas.
9. Kirjeldage tegevuskorda andmete konfidentsiaalsuse kaitsmiseks.
10. Kas testi kasutajatele selgitatakse rakendatud mõõtmiskäsitust? Kui jah, siis selgitage, kuidas.
Vorm A6: Andmeanalüüs
Otsuste (ja otsuste muutmise) põhjendus Lühikirjeldus ja/või viited Esitage põhjendus, mille alusel tehti otsused antud
eksami või testi kohta.
Kas eksamit vaadatakse aegajalt üle? (Kui sageli?
Kes seda korraldab? Otsuste ülevaatamise tegevuskord?)
Vorm A7: Otsuste põhjendamine
135 Esialgne hinnang eksami üldtaseme kohta RD põhjal
A1 A2
B1 B2
C1 C2 Lühidalt määratlemise alus, viide RD-le
Vorm A8: Esialgne hinnang eksami üldtaseme kohta
136
Osa A3: Eristuskiri: Suhtluse keeletoimingud (peatükk 4) A3.1 Vastuvõtmine
Kuulamisoskus
Lühikirjeldus ja/või viited 1 Millistes kontekstides (valdkondades,
situatsioonides jne) peavad eksaminandid oma keeleoskust näitama?
Viitena võib abiks olla tabel 5 RD osas 4.1.
2 Milliste teemadega peavad eksaminandid toime tulema?
Viitena võivad abiks olla loetelud RD osas 4.2.
3 Milliste suhtlusülesannete, keeletoimingute ja strateegiatega peavad eksaminandid toime tulema?
Viitena võivad abiks olla loetelud RD osades 4.3, 4.4.2.1, 7.1, 7.2 ja 7.3.
4 Kui pikkade ja millist tüüpi tekstidega peavad eksaminandid toime tulema?
Viitena võivad abiks olla loetelud RD osades 4.6.2 ja 4.6.3.
5 Pärast allpool toodud üldise kuulamisoskuse skaalaga tutvumist märkige ja põhjendage, millis(t)el skaalataseme(te)l peab kuulamistest olema.
Viitena võivad abiks olla kuulamisoskuse skaalatabelid RD osas 4.4.2.1.
Tase:
Põhjendus (k.a viide RD-le)
Vorm A9: Kuulamisoskus