Kiss Margit: Mérési módszerek a pedagógiai értékelésben



Hasonló dokumentumok
A pedagógiai értékelés Pedagógia I. Neveléselméleti és didaktikai alapok NBÁA-003 A prezentációt összeállította: Marton Eszter

Az értékelés során következtetést fogalmazhatunk meg a

OKM ISKOLAI EREDMÉNYEK

Gyakorlatias tanácsok PLA fejlesztőknek

MÉRÉSMETODIKAI ALAPISMERETEK FIZIKA. kétszintű érettségire felkészítő. tanfolyamhoz

7. 1. A formatív értékelés és lehetséges módjai (szóbeli, feladatlapos, számítógépes) az oktatásban. - valamilyen jelenségről, ill.

A 2002/2003-AS TANÉVBEN SZERVEZETT

Gaskó Krisztina április 13. A könyvtár-pedagógia módszertana képzés. Készült Golnhofer Erzsébet anyagainak felhasználásával

A STANDARDFEJLESZTÉS LEHETŐSÉGEI MAGYARORSZÁGON

Iskolai jelentés. 10. évfolyam szövegértés

STATISZTIKA. András hármas. Éva ötös. Nóri négyes. 5 4,5 4 3,5 3 2,5 2 1,5 ANNA BÉLA CILI 0,5 MAGY. MAT. TÖRT. KÉM.

Képesség. Beszámoló Verify képességtesztek eredményéről. Név László Hammer. Dátum 2018 szeptember 28. SHL.com

KÖZLEKEDÉSI ALAPISMERETEK ÉRETTSÉGI VIZSGA II. A VIZSGA LEÍRÁSA

ELEMZŐ SZOFTVEREK. A tanárok elemző munkáját támogatja három, egyszerűen használható, minimális alkalmazói ismereteket igénylő Excel állomány.

Takács Katalin - Elvárások két értékelési területen. Az értékelés alapját képező általános elvárások. Az értékelés konkrét intézményi elvárásai

Rövid összefoglaló a pszichológia BA szak zárásához

A telephely létszámadatai:

Tájékoztató a református szaktanácsadó rendszerről. Budapest, január 21.

Mérési eredmények adatai, elemzése (országos mérések, kompetenciamérés eredménye öt tanévre visszamenőleg):

A mérés problémája a pedagógiában. Dr. Nyéki Lajos 2015

A pedagógiai kutatás metodológiai alapjai. Dr. Nyéki Lajos 2015

A 2012-es kompetenciamérés elemzése a FIT-jelentés alapján

Képesség. Beszámoló Verify képességtesztek eredményéről. Név Mr. Jelölt. Dátum.

Acta Acad. Paed. Agriensis, Sectio Mathematicae 27 (2000) Szepessy Bálint (Eger, Hungary)

AZ ORSZÁGOS KOMPETENCIAMÉRÉS

dr. Makádi Mariann A FÖLDRAJZI TUDÁS ELLENŐRZÉSE ÉS MÉRÉSE

AZ ORSZÁGOS KOMPETENCIAMÉRÉS INTÉZMÉNYI EREDMÉNYEINEK ELEMZÉSE tanév

2.1. Az oktatási folyamat tervezésének rendszerszemléletű modellje.

ELŐTERJESZTÉS a HUMÁN ÜGYEK Bizottságának augusztus 23-ai ülésére

MÓRICZ ZSIGMOND ÁLTALÁNOS ISKOLA

HELYZETELEMZÉS A TELEPHELYI KÉRDŐÍV KÉRDÉSEIRE ADOTT VÁLASZOK ALAPJÁN

Kompetencia alapú oktatás (tanári kompetenciák) NyME- SEK- MNSK N.T.Á

Általános tájékoztató a hétvégi házi feladatok és az iskolai dolgozatok szabályairól. Részlet az intézmény Helyi tantervéből

A SZAKTANÁCSADÓK FELADATAI A 48/2012. (XII.12.) EMMI RENDELET ALAPJÁN

A tanulmányi munka értékelése Az iskolai beszámoltatás, az ismeretek számonkérésének követelményei és formái

Módszertani segédlet az intézmények országos pedagógiai-szakmai ellenőrzése során az elvárások értékeléséhez

PEDAGÓGUSKÉPZÉS TÁMOGATÁSA TÁMOP-3.1.5/

VENDÉGLÁTÓIPARI ISMERETEK ÁGAZATI SZAKMAI ÉRETTSÉGI VIZSGA II. A VIZSGA LEÍRÁSA

VENDÉGLÁTÓ-IDEGENFORGALMI ÉRETTSÉGI VIZSGA II. A VIZSGA LEÍRÁSA

Idegen nyelvi mérés 2016

Iskolai jelentés. 10. évfolyam szövegértés

KERESKEDELMI ÉS MARKETING ALAPISMERETEK ÉRETTSÉGI VIZSGA II. A VIZSGA LEÍRÁSA

A pedagógia mint tudomány. Dr. Nyéki Lajos 2015

A szaktanácsadás szerepe ma

ELŐTERJESZTÉS. a Képviselő-testület június 24.-i ülésére

IV. AZ ISKOLAI BESZÁMOLTATÁS, AZ ISMERETEK SZÁMONKÉRÉSÉNEK KÖVETELMÉNYEI ÉS FORMÁI

Statisztika I. 8. előadás. Előadó: Dr. Ertsey Imre

A SIOK Beszédes József Általános Iskola évi kompetenciamérés eredményeinek elemzése és hasznosítása

A Diagnosztikus mérések fejlesztése c. program átfogó bemutatása

A VIZSGA LEÍRÁSA KÖZÉPSZINTEN. Középszint. Szöveges adatok tárolására és megjelenítésére nem alkalmas zsebszámológép KÖZÉPSZINTŰ VIZSGA

Matematikai geodéziai számítások 6.

Tanulmányi standardok a tanulói fejlesztés szolgálatában

BEVEZETŐ. Grúber György igazgató

Az új érettségi rendszer bevezetésének tapasztalatai

A SPORTISKOLAI PROGRAM MONITORINGJA ÉS A SZAKÉRTŐI MUNKA LEHMANN LÁSZLÓ

A ÉVI TANFELÜGYELETI LÁTOGATÁSOK ELŐKÉSZÍTÉSE (TÁMOP-3.1.8)

Matematikai geodéziai számítások 6.

INTÉZMÉNYI ÖNÉRTÉKELÉS ÖTÉVES MUNKATERV EGRI DOBÓ ISTVÁN GIMNÁZIUM Eger, Széchenyi u. 19.

JA45 Cserkeszőlői Petőfi Sándor Általános Iskola (OM: ) 5465 Cserkeszőlő, Ady Endre utca 1.

Eredmény rögzítésének dátuma: Teljesítmény: 97% Kompetenciák értékelése

A BEREGSZÁSZI PÁL SZAKKÖZÉPISKOLA ÉS SZAKISKOLA SZERVEZETI ÉS MŰKÖDÉSI SZABÁLYZATA 10. SZÁMÚ MELLÉKLETE

Követelmények. Pedagógiai tervezés és értékelés Tantárgy kódja. Dr. Szabó Antal főiskolai tanár A tantárgy oktatója

Országos kompetenciamérés eredményeinek kiértékelése 6. és 8. évfolyamokon 2012

ÉRETTSÉGI VIZSGA október 19. PEDAGÓGIA ISMERETEK KÖZÉPSZINTŰ ÍRÁSBELI VIZSGA október 19. 8:00. Időtartam: 120 perc

es országos kompetenciamérés eredményeinek összehasonlítása intézményünkben

A tanári mesterképzés portfóliója

A köznevelés aktuális feladatai a köznevelés-fejlesztési stratégia tükrében Sipos Imre köznevelésért felelős helyettes államtitkár

ÉRETTSÉGI VIZSGA május 16. PEDAGÓGIA ISMERETEK KÖZÉPSZINTŰ ÍRÁSBELI VIZSGA május 16. 8:00. Időtartam: 120 perc

Önértékelési szabályzat

TÁMOP 3.1.5/ PEDAGÓGUSKÉPZÉS TÁMOGATÁSA MEGVÁLTOZOTT SZAKTANÁCSADÓI SZEREPEK ÚJ TÍPUSÚ SZAKTANÁCSADÁS

AZ ORSZÁGOS KOMPETENCIAMÉRÉS EREDMÉNYEI 2016/2017-ES TANÉV

Ápolás Betegellátás Alapszak PEDAGÓGIA I/8. Deutsch Krisztina szakoktató

SNI, BTMN tanulók értékelése az együttnevelésben, együttoktatásban. Csibi Enikő

JAVÍTÁSI-ÉRTÉKELÉSI ÚTMUTATÓ

ÉRTÉKELÉSI SZABÁLYZAT

A portfólió szerepe a pedagógusok minősítési rendszerében

A Gyakorlóiskolai tanítási-nevelési gyakorlat c. tanegység részletes követelményei v. 1.0

A nevelés-oktatás tervezése I.

A pedagógus önértékelő kérdőíve

Az értékelés rendszere - hasznos tanácsok az akkreditált képzési programokhoz

PEDAGÓGIA ISMERETEK ÁGAZATI SZAKMAI ÉRETTSÉGI VIZSGA A VIZSGA LEÍRÁSA KÖZÉPSZINTEN

Méréselmélet MI BSc 1

BAGME11NNF Munkavédelmi mérnökasszisztens Galla Jánosné, 2011.

Mérési hibák

MÉRÉSI EREDMÉNYEK PONTOSSÁGA, A HIBASZÁMÍTÁS ELEMEI

6. Előadás. Vereb György, DE OEC BSI, október 12.

Az országos pedagógiai-szakmai ellenőrzés, a tanfelügyelet standardjai

HOGYAN JELEZHETŐ ELŐRE A

Az Országos kompetenciamérés

Nemzeti tananyagfejlesztés és országos referenciaiskola hálózat kialakítása digitális kiegészítő oktatási anyagok létrehozása az új NAT hoz

Kísérlettervezés a kémia tanításában a természettudományos gondolkodás fejlesztéséért

Hétvégi házi feladatok és az iskolai dolgozatok szabályai

Orvosi szociológia (1. szeminárium) KUTATÁSMÓDSZERTAN

SZENT ISTVÁN RÓMAI KATOLIKUS ÁLTALÁNOS ISKOLA

Önértékelési szabályzat

A TANTÁRGY ADATLAPJA

y ij = µ + α i + e ij

A hétvégi házi feladatok és az iskolai dolgozatok szabályai:

Szakmai szolgáltatások az új szaktanácsadói rendszer felépítése PEDAGÓGUSKÉPZÉS TÁMOGATÁSA TÁMOP-3.1.5/

Kelemen Gabriella Pedagógiai szakértő RPI RPI ORSZÁGJÁRÓ MÁJUS

Átírás:

TOVÁBBKÉPZÉSI FÜZETEK 62. Kiss Margit: Mérési módszerek a pedagógiai értékelésben EGÉSZSÉGÜGYI SZAKKÉPZÕ ÉS TOVÁBBKÉPZÕ INTÉZET 2005.

2 TOVÁBBKÉPZÉSI FÜZETEK Szerzõ: Kiss Margit Szerkesztette: Feigl Ágnes Véleményezte: Horváth Károlyné Egészségügyi Szakképzõ és Továbbképzõ Intézet, 2005 Felelõs kiadó: Vízvári László fõigazgató Szedés, tördelés: Hegyi Gergely Minden jog fenntartva, beleértve a sokszorosítás, a mû bõvített, illetve rövidített változata kiadásának jogát is. A kiadó írásbeli hozzájárulása nélkül sem a teljes mû, sem annak része semmiféle formában (fotokópia, mikrofilm vagy más hordozó) nem sokszorosítható.

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 3 TARTALOMJEGYZÉK Bevezetõ 04 Jogszabályi háttér 04 A tananyag struktúrája 05 A tananyag célja 06 Követelmények 06 Fogalomgyûjtemény 06 Méréses módszerek a pedagógiai értékelésben 08 1. A mérési folyamat fõbb lépései 09 1.1. Céltételezés 09 1.2. Feladatlap szerkesztés 10 1.3. A feladatlap jóságmutatói - (próbamérés) 11 2. A mérés 12 2.1. Az adatok (pontszámok) statisztikai feldolgozása 12 2.2. A mérés adatainak elemzése 13 2.3. A teljesítmények háttere 14 Összefoglalás 15 Gyakorló/önellenõrzõ feladatok és megoldások 15 Ellenõrzõ feladatok és értékelési szempontok 17 Irodalomjegyzék 20 Melléklet 21

4 TOVÁBBKÉPZÉSI FÜZETEK BEVEZETÕ A szakértõk, szaktanácsadók, tantárgygondozók, vizsgaelnökök alkotják azt a szakmai grémiumot, akik akár az iskolarendszerû oktatásban, akár más képzési formában fejlesztõ, elemzõ, esetenként ellenõrzõ és értékelõ tevékenységükkel segíthetik az oktatás, a képzés szakszerûségét, hatékonyságát. Ezek a szakemberek számos - törvények és rendeletek (lásd: 3. sz. melléklet) által szabályozott - területen kaphatnak felkérést és megbízást valamely munka elvégzésére. Ilyenek pl.: - Tanácsadás iskolai dokumentumok elkészítésében (Pedagógiai Program, Helyi Tanterv, Minõségügyi Kézikönyv, stb.) - E dokumentumok szakértõi véleményezése az iskolafenntartó számára - Egyes pedagógusok, vagy a pedagógusok nagyobb csoportja szakmai munkájának véleményezése, szakmai tanácsadás (pl. az osztályozás, értékelés nehézségeirõl). - Közremûködés adott iskolában (tágabb régióban) folyó szakmai, pedagógiai munka színvonalának értékelésében. - Részvétel különféle állami vizsgák lebonyolításában (vizsgaelnökként a törvényesség felügyelete és biztosítása). E feladatok színvonalas elvégzése nem nélkülözheti a méréses módszerek szakszerû, hozzáértõ alkalmazását. JOGSZABÁLYI HÁTTÉR A közoktatásról szóló 1993. évi LXXIX. Törvény - amelyet kihirdetése óta szinte minden évben módosított az Országgyûlés - több ponton érinti az oktatási intézmények pedagógiai értékelésével kapcsolatos kérdéseket. Ezen törvénynek a téma szempontjából a legfontosabb elemei: 99. (1) A közoktatás országos mérési feladatai különösen: az országos vizsgarendszer mûködtetése, összehangolása, az alapmûveltségi vizsga és az érettségi vizsga követelményeinek meghatározása és felülvizsgálata, az országos vizsgarendszer fejlesztése és korszerûsítése, az értékelési tevékenység fejlesztése. 101. (1) Az Országos szakértõi névjegyzék tartalmazza azok nevét, szakterületét, lakcímét és munkahelyét, akik a nevelési-oktatási intézményben szakmai ellenõrzésben vehetnek részt. (2) Az Országos vizsgáztatási névjegyzék az (1) bekezdésben szabályozottak szerint tartalmazza azok adatait, akik alapmûveltségi vizsga vagy érettségi vizsga vizsgaelnöki megbízást kaphatnak. (3) (4) (Az országos szakértõi, illetve az Országos vizsgáztatási névjegyzékbe való bekerülés feltételei)

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 5 (5) Az (1) -(2) bekezdésben említett névjegyzékbe való felvétel az elsõ alkalommal öt évre szól, amely ismételten meghosszabbítható. A meghosszabbítást külön jogszabály továbbképzéshez, szakvizsga letételéhez kötheti. 102. (2) A fenntartó f) értékeli a nevelési oktatási intézmény foglalkozási, illetve pedagógiai programjában meghatározott feladatok végrehajtását, a pedagógiai-szakmai munka eredményességét. 104. (4) A fenntartó a nevelési, illetve pedagógiai program végrehajtását, a közoktatási intézményben folyó szakmai munka eredményességét a) az önkormányzati pedagógiai-szakmai szolgáltatást ellátó intézmény által végzett pedagógiai mérések, értékelések, illetõleg az Országos szakértõi névjegyzékben szereplõ szakértõ által készített szakértõi vélemény, továbbá az alapmûveltségi vizsga és az érettségi vizsga eredményei, illetve b) a közoktatási intézmény által készített beszámoló; c) az iskolaszék véleményezése alapján értékelheti. 107. (1) A közoktatási intézmény szakmai ellenõrzésében az vehet részt, aki szerepel az Országos szakértõi névjegyzékben. (2) - (9) (A szakmai ellenõrzés szabályai.) (10) A közoktatási intézményben szakmai ellenõrzést végzõ személynek, illetve a törvényességi ellenõrzést végzõ személynek, szervezetnek nincs döntési, intézkedési jogköre. A TANANYAG STRUKTÚRÁJA

6 TOVÁBBKÉPZÉSI FÜZETEK A TANANYAG CÉLJA Megismertetni a tanulót a pedagógiai folyamat jelentõs és kritikus állomását jelentõ mérési folyamat fõbb lépéseivel és a kapott adatok feldolgozásával, elemzésével. KÖVETELMÉNYEK A tananyag feldolgozása után a tanuló képes lesz: a saját szakterületén-feladatlap és megoldólap, azaz mérõeszköz - készítésére, - alkalmazására, - a mért eredmények feldolgozására, elemzésére. FOGALOMGYÛJTEMÉNY Alkalmazás: A tudás olyan szintje, amelyben a tanult ismereteken alapuló, sokféle tevékenység végzésére vagyunk képesek meghatározott szabályok szerint. Átlag (számított középérték): A mintaelemek értékeibõl számított érték, amely egyetlen számmal jellemzi a mintát. Diagnosztikus értékelés: A pedagógiai folyamat adott szakasza eredményeinek, problémáinak feltárása. Érvényesség (validitás): Megfelelés (a teszt mennyire azt méri, aminek a mérésére felhasználni szándékoznak). Fogalom: Olyan gondolatforma, amely a dolgok, viszonyok, tulajdonságok stb. ismertetõjegyei alapján történõ általánosítás eredménye. Fogalomstruktúra: Fogalmak - tartalmuk, jelentésük, formai jellemzõik, jelentéstani és nyelvi ismérveik alapján kialakított, feltárt - kapcsolatai, összefüggései. Formatív (formáló, fejlesztõ) értékelés: Célja, hogy a folyamat minél több pontján kapjunk információt a tanulók elõrehaladásának mértékérõl, a tipikus és egyéni hibákról, a célszerû továbblépés, a szükséges korrekciók érdekében. Gyakorisági eloszlás: Megmutatja az adatoknak az egyes osztályok közötti megoszlását, vagyis, hogy hány adat jut az egyes osztályokba.

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 7 Ismeret: Az objektív valóságról - a megismerés folyamata eredményeként, az emberi pszichikumban képzõdõ - képmások. Item: Egység, elem (a tesztek legkisebb önállóan értékelhetõ egysége). Korreláció: Szükségszerûen érvényesülõ kölcsönösség, összefüggés a létezõ dolgok, rendszerek között. Kritériumorientált értékelés: Olyan eljárás, amelyben a tanuló teljesítményének értékét a tanulási követelményekbõl kiindulva, azokhoz viszonyítva határozzák meg. Megbízhatóság (reliabilitás): Azt a tényt jelenti, hogy valamely esemény változatlan körülmények közötti ismétlés alkalmával az esetek nagy hányadában azonos eredményt vált ki (a teszt mennyire jól méri az adott tulajdonságot). Megértés: A dolgok lényegének, legfontosabb összefüggéseinek gondolati úton történõ feldolgozása. Minta: A népességnek (populációnak) az a része, amelyen a vizsgálatot végezzük, s amelyen mért adatokból az egész populációra vonunk le következtetéseket. Módusz: A legnagyobb gyakoriságú érték az eloszlásban. Normális eloszlás: Általában sok, egymástól független hatásra bekövetkezõ esemény valószínûségeloszlása (a maximális értéknél szimmetriatengelye van). Normaorientált: Olyan eljárás, amelyben a tanuló teljesítményét egy kiválasztott népesség teljesítményének átlagához (norma) viszonyítják. Objektivitás: Tárgyszerûség (mennyire független a teszt eredménye a felvétel körülményeitõl, ill. a tesztet felvevõ, az adatokat elemzõ személyektõl). Összefüggés: Dolgok közötti viszony, kapcsolat.

8 TOVÁBBKÉPZÉSI FÜZETEK Reliabilitás: Megbízhatóság. Standardizált teszt: Kipróbált, általános használatra alkalmas, viszonyítási alapokkal bíró teszt. Szórás: A várható érték körüli ingadozás, az attól való eltérés. Taxonómia (rendezés, rendszer): Események, jelenségek, tárgyak - belsõ rendezõ elv szerinti - osztályozása. Tény: A valóságnak megfelelõ, egyszerû kijelentés konkrétumokról. Validitás: Érvényesség. Visszajelentés (visszacsatolás): A visszajelentés során szerzett információt az irányítás a szabályozási folyamat korrekciójára használja fel. MÉRÉSES MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN A tanítási-tanulási folyamat eredménye Az eredmények hiteles, korrekt ismerete visszahat a folyamat elemeire: hatással van magára a tanulóra, beavatkozást generálhat a folyamat egyes részeibe, sõt a célrendszerbe is.

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 9 1. A MÉRÉSI FOLYAMAT FÕBB LÉPÉSEI 1.1. Céltételezés Miért mérünk? (A mérés funkciójának eldöntése) Formatív értékelés: Célja a tanulási folyamat menet közbeni szabályozása. Olyan kérdésekre keresi a választ, hogy helyes úton halad-e a tanuló, meddig jutott el, szükséges-e, hogy a pedagógus valamit korrigáljon, megerõsítsen stb. Kritériumorientált (a tantervi követelményekhez viszonyított) ellenõrzés, értékelés. Megfontolandó a tudás korai minõsítése. Szummatív értékelés: Hosszabb, összefüggõ tananyagegységek végén történõ lezáró, összegezõ értékelés. Határozott célja a minõsítés is. Normaorientált (nagyobb minta teljesítményéhez viszonyított). Diagnosztikus értékelés: Jellegzetesen helyzetfeltáró szándékkal végezzük. A helyzetfeltárás szolgálhatja a visszatekintést (retrospektív diagnózis) és az elõretekintést (prospektív diagnózis) is. Struktúrált, az alkotóelemekre és ezek összefüggéseire vonatkozó információkkal szolgál. Elõsegíti a hosszabbtávú, komplexebb, összetettebb döntések meghozatalát. Rendszerint háttérvizsgálattal párosul. Kikkel mérünk? (Mintaválasztás) Teljes körû a minta, ha az adott célpopuláció minden tagja részt vesz a mérésben. A reprezentatív minta olyan részhalmaza a teljes populációnak, amely ugyanazokkal a paraméterekkel rendelkezik, mint a teljes minta. Az ilyen mintaválasztásban jelentõs szerepe van a véletlenszerû kiválasztásnak. A reprezentativitás miatt a minta teljesítményébõl - bizonyos korlátok között - a teljes populáció teljesítményére következtethetünk. Mit mérünk? (A mérendõ tananyag- és tudástartalmak meghatározása) Tantárgy - tantárgycsoport meghatározása. A lefedni kívánt tananyag mennyiségének, a mérendõ készségek, képességek körének és típusainak eldöntése. A fogalomstruktúra és a tények struktúrájának elkészítésekor rendszerbe helyezzük, majd feltárjuk az aktuális fogalmak tartalmát.

10 TOVÁBBKÉPZÉSI FÜZETEK A tantervi követelmények operacionalizálásakor azt tisztázzuk, hogy a fenti tartalmakból az adott iskolafokozat, évfolyam számára hány és milyen követelményt fogalmaz meg a tanterv. A tantervi követelményekrõl tudnunk kell azt is, hogy: - mi a tartalmuk; - milyen szintet írnak elõ; - csak a minimumot fogalmazzák meg, vagy afeletti elvárásokat; - milyen körülmények között és milyen tevékenység keretében teljesítendõk. 1.2. Feladatlapszerkesztés Feladattipológia A feladatok mind szerkesztés, mind értékelés szempontjából lehetnek zárt és nyílt végûek. A feladatok válogatásakor, konstruálásakor elsõsorban az adott tantervi követelmény teljesülésének mérésére való alkalmasságot kell figyelembe venni. A feladatok pontszáma Elsõ megközelítésben a szükséges elemi lépések, elemi döntések - itemek - száma. Késõbbiekben (a többi feladattal való összehasonlításkor) a pontszám változhat: nem minden lépés minõsül tényleges döntésnek, szummatív mérés esetén a pontszámnak a feladat nehézségét is kifejezésre kell juttatnia. A feladatlap (teszt) összeállítása A feladatlapváltozatok (A - B - C - stb.) száma a mérés funkciójától függ: - Szummatív méréskor minél kevesebb - és az összemérhetõség miatt eléggé ekvivalens - változat készüljön. - Diagnosztikus méréskor a tananyag minél teljesebb lefedése érdekében egyenesen szükséges lehet a több (egyébként nem ekvivalens) változat használata.

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 11 A majdani mérés adatainak minél célszerûbb feldolgozása érdekében érdemes bizonyos formai megoldásokat alkalmazni (tanulói kódszám; itemenkénti 1 vagy 0 pont adása; az itemek sorszámozása; stb.) Javítókulcs A javítókulcsot a feladatlappal párhuzamosan érdemes elkészíteni. Gyakran elég, ha a javítókulcs csak a válaszokat, megoldásokat tartalmazza, néha azonban célszerû az adott lépés szöveges megfogalmazása is. Nagyon fontos, hogy az egyes itemek a javítókulcsban ugyanazt a sorszámot kapják, mint amely sorszám alatt a feladatlapon 1 vagy 0 pontot adtunk a megoldásukért. (1, 2.sz. melléklet) 1.3. A feladatlap jóságmutatói - próbamérés A legnagyobb odafigyeléssel készített feladatlappal is elõfordulhat, hogy a felhasználásakor kapott információk ( mért tudás ) nem közelítik meg elég jól a valódi tudást. Nem felelnek meg elég jól a három legfõbb mérésmetodikai alapelvnek: az objektivitás, a validitás és a reliabilitás követelményeinek. Ha a feladatlap megfelel ezeknek, akkor a klasszikus tesztelmélet alapképletében az a komponens, amelyik a hibát jelenti, kicsi. A képlet a következõ: M = V + H. Azaz: a méréskor kapott információ ( mért tudás ) a valódi tudás -ból és a mérés hibájából áll össze. A jóságmutatóknak való megfelelést - a tényleges mérés elõtt - vizsgálnunk kell! Objektivitás (tárgyszerûség) A feladatlap akkor objektív, ha utasításai, a feladatok megfogalmazása egyértelmûek, világosak. A mérés akkor objektív, ha a lebonyolításakor szubjektív elemek nem befolyásolják a teljesítményt. Biztosítása odafigyelés és szervezés kérdése. Validitás (érvényesség) A mérõeszköz akkor valid, ha ténylegesen azt méri, aminek a mérésére szerkesztettük (pl.: jól határoztuk meg a tantervi követelmény tartalmi és a szintet meghatározó dimenzióját). A feladatlap validitását szakértõi csoport többségi véleménye alapján szokták eldönteni. Reliabilitás (megbízhatóság) Leginkább matematikai statisztikai eszközökkel vizsgálható. Ezért a feladatlapot próbamérésnek kell alávetni, majd az eredmények feldolgozása során kapott bizonyos statisztikai paraméterek (korrelációs együttható;

12 TOVÁBBKÉPZÉSI FÜZETEK reliabilitás mutató; Cronbach α; stb.) ismeretében ítélhetõ meg, hogy jól mérie meg az egyébként valid és objektív módon megfogalmazott tartalmakat. A jóságmutatók -ra vonatkozó vizsgálódásunk után kétféle helyzet állhat elõ: - mérõeszközünk megfelel a követelményeknek, tehát használhatjuk; - mérõeszközünk korrigálásra szorul. 2. A MÉRÉS A mérés lebonyolítása jószerével szervezési kérdés. Ennek kifejtését itt mellõzzük. A feladatlapok javítása, az elért pontszámok megállapítása fontos, de elég egyértelmû tevékenység (különösen, ha a javítókulcs is szakszerûen készült), ezért errõl sem szólunk itt részletesen. 2.1. Az adatok (pontszámok) statisztikai feldolgozása A feladatlapokon már megállapított pontszámokkal különféle számításokat elvégezve olyan mutatókhoz juthatunk, amelyek ismeretében értékelni, minõsíteni tudjuk az eredményeket és a teljesítményeket. A legfõbb statisztikai mutatók: a teljesítmények átlaga(i), szórása, eloszlása. Átlag(ok): Számtani átlag: pontban kifejezve: Az összpontszámot annyi felé osztjuk, ahány elemet összegeztünk; %-ban kifejezve:megállapítjuk, hogy az elért pontszám hány százaléka a maximálisan elérhetõ pontszámnak.

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 13 Medián: Annak a - csoporton belüli - teljesítménynek az értéke, amely alatt is és amely felett is a csoport fele teljesített. Módusz: A leggyakoribb egyéni teljesítmények értéke. Terjedelem, szórás: Sokatmondó lehet, ha tudjuk, hogy mekkora a különbség (a távolság, a terjedelem) a legjobb egyedi teljesítmény és a leggyengébb között. Még ennél is jellemzõbb adat, ha azt tudjuk, hogy a mérésben résztvevõk többségének teljesítménye - a csoportátlag körül - mekkora intervallumban helyezkedik el, mennyire szóródik. A teljesítmények eloszlása: A teljesítmények eloszlásának vizsgálata több adat összehasonlítását jelenti. Annak megfigyelését, hogy mennyien vannak azok, akik nagyon gyenge, közepes vagy nagyon jó teljesítményt értek el. Ezeket a teljesítménysávokat természetesen érdemes ennél sokkal pontosabban körülhatárolni (pl.: a 0-5 pont között teljesítõk; az 5-10 pont között teljesítõk; stb.). A helyzetet leginkább egy grafikon teszi átláthatóvá. Ez az eloszlásgrafikon. Az eloszlásgrafikon (azaz a helyzet) lehet normális és lehet attól eltérõ. Különbözõ eloszlásoknál más és más módon viselkednek az átlagok (a számtani, a medián és a módusz). A statisztikai mutatók eltérõ értékei más és más gondolatokat ébresztenek bennünk. Másként értékelünk egy magas átlag körül alig szóródó csoportteljesítményt, mást gondolunk akkor, ha egy csoportnak a fele 30 % alatt teljesített, vagy, ha egy csoportban a leggyakoribb teljesítmény 80 % volt, stb. Ezeknek a gondolatoknak a megfogalmazása és rendszerezése az elemzés. 2.2. A mérés adatainak elemzése Az elemzéskor kiemeljük, csoportosítjuk, összevetjük azokat az adatokat és tapasztalatokat, amelyek a legfontosabb információkat hordozzák. Megállapítunk tényeket, megfogalmazunk következtetéseket.

14 TOVÁBBKÉPZÉSI FÜZETEK Egy tantárgyi tudást mérõ feladatlap adatainak feldolgozása történhet pl. az alábbi szempontok szerint: A különféle mérések során gyakran felmerülõ igény egy tanuló, egy tanulócsoport, egy iskola munkájának értékelése (nem teljesen azonos az eredménnyel, a minõsítéssel!). Akkor járunk el helyesen, ha értékítéletünk megfogalmazásakor azokra a körülményekre is tekintettel vagyunk, amely körülmények között az adott eredmények létrejöttek. Ebben az esetben háttérvizsgálatot is kell végeznünk. 2.3. A telejsítmények háttere A tanulás körülményeinek leginkább a tanuló személyisége, a családi és az iskolai háttér tekinthetõ. Ezeken belül a tanuló tanuláshoz való viszonya, tanulási szokásai, érdeklõdési köre, a szülõk iskolázottsága, a tanulás otthoni tárgyi feltételei, a családi motiváció, az iskola szellemisége, tárgyi és személyi feltételei a leginkább befolyásoló tényezõk. A háttérkörülmények felderítésére leggyakrabban kérdõívet használunk. A kérdõív megszerkesztésére nagyjából ugyanazok a szakmai követelmények vonatkoznak, mint a feladatlap vagy teszt elkészítésére (jóságmutatók). Figyelni kell azonban olyan szempontokra is mint diszkréció, befolyás mentesség, önkéntesség, stb. A háttér ismeretét felhasználhatjuk arra: - hogy összefüggést keressünk bizonyos körülmények és bizonyos teljesítmények között (mely körülmények vannak leginkább negatív hatással a mérési eredményekre, és fordítva); - hogy az eredményeket ne csupán önmagukban, hanem a körülményekhez képest értékeljük. (3.sz. melléklet)

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 15 ÖSSZEFOGLALÁS A mérés eseménye megszakítja az oktatás természetes folyamatát. Fontos a mérés funkciójának helyes megválasztása és az is, hogy maga a mérõeszköz azt mérje, amit mérni szeretnénk vele. Ehhez szervesen kapcsolódik az adatok elemzése-értékelése, mind a tanulókról szerzett információk szempontjából, mind a tantervre vonatkoztatható visszajelzéseket tekintve. GYAKORLÓ/ÖNELLENÕRZÕ FELADATOK ÉS MEGOLDÁSOK Feladatok: 1.) Ismertesse a formatív értékelés célját! 2.) Ismertesse a szummatív értékelés célját! 3.) Ismertesse a diagnosztikus értékelés célját! 4.) Mit kell tudni mérés esetén a tantervi követelményekrõl? 5.) Mirõl tájékoztat a feladatlap jóságmutatója?

16 TOVÁBBKÉPZÉSI FÜZETEK Megoldások: 1.) Ismertesse a formatív értékelés célját! Válasz: célja a tanulási folyamat menet közbeni szabályozása. 2.) Ismertesse a szummatív értékelés célját! Válasz: célja az összegzõ értékelés és minõsítés. 3.) Ismertesse a diagnosztikus értékelés célját! Válasz: célja a helyzetfeltárás, úgy a vissza-mint az elõretekintés. 4.) Mit kell tudni mérés esetén a tantervi követelményekrõl? Válasz: A méréshez ismerni kell: - mi a tanterv tartalma - milyen szintet ír elõ - csak a minimumot fogalmazza meg vagy afeletti elvárásokat - milyen körülmények között és milyen tevékenység keretében teljesítendõ. 5.) Mirõl tájékoztat a feladatlap jóságmutatója? Válasz: A jóságmutató arról tájékoztat, hogy a feladatlap megfelel-e a követelményeknek, illetve, hogy korrigálásra szorul.

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 17 ELLENÕRZÕ FELADATOK ÉS ÉRTÉKELÉSI SZEMPONTOK Feladat: 1) Kösse össze a megfelelõ értékelési funkciót annak lényegével! funkció: FORMATÍV SZUMMATÍV DIAGNOSZTIKUS lényege: LEÍR FELISMER MEGÁLLAPÍT 2) Sorszámozással rakja sorrendbe az alábbi értelmi mûveleteket! (Kezdje a legszûkebb kategóriával!) O megértés; O alkalmazás; O ismeret; O magasabb rendû mûveletek 3) Soroljon fel három magasabb rendû értelmi mûveletet! 4) Mit jelent az, hogy a tesztelés normaorientált:. kritériumorientált: 5) Mit fejez ki a klasszikus tesztelmélet alapképlete: M = V + H?..... 6) Írja le más szóval! objektivitás:.. validitás: reliabilitás: 7) Mi a próbamérés szerepe?......

18 TOVÁBBKÉPZÉSI FÜZETEK 8) Az alábbi állítások elé írjon I betût, ha azok igazak, írjon H betût, ha hamisak!.... A feladat megoldásához szükséges elemi lépések tényleges döntések. Az elemi lépéseket itemeknek is nevezzük. Egy feladat pontszám mindig annyi, ahány elemi lépésbõl áll. Van olyan eset, amikor egy feladat pontszáma annyi, ahány elemi lépésbõl áll. 9) Mely teljesítményre mondjuk, hogy az a csoport (számtani) átlagteljesítménye:.. módusza:.. mediánja:.. 10) Mirõl informál a teljesítmények szórásának adata?...... 11) Általában mivel zárulnak a vizsgálati (mérési) elemzések? (Írjon három elemet!)......

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 19 Megoldás: 1) funkció FORMATÍV SZUMMATÍV DIAGNOSZTIKUS lényege LEÍR FELISMER MEGÁLLAPÍT 2) 3) Pl.: analízis; szintézis; értékelõ kritikai viszonyulás; kreativitás; problémafelismerés; problémamegoldás; stb. 4) Normaorientált: nagyobb minta teljesítményével összemért Kritériumorientált: a tantervi követelményekhez viszonyított 5) A mért tudás (M) a mérési hiba (H) mértékével tér el a valódi tudástól (V). 6) Objektivitás Validitás Reliabilitás tárgyszerûség; érvényesség megbízhatóság 7) A próbamérés eredményeinek elemzése útján állapítható meg egy mérõeszközrõl (nagy valószínûséggel), hogy alkalmas-e mérésre. 8) I; I; H; I 9) (számtani) átlagteljesítmény: az egyéni teljesítmények összegének és a csoport létszámának a hányadosa. módusz: a leggyakoribb egyéni teljesítmény (csoportközép). medián: az a teljesítményérték, amely megfelezi a csoportot. 10) Annak mértékérõl, hogy a csoport többségének a teljesítménye mennyire tér el a csoport átlagteljesítményétõl. 11) Pl.: következtetés(ek); összegezés; általánosítás(ok); ajánlás(ok); stb.

20 TOVÁBBKÉPZÉSI FÜZETEK IRODALOMJEGYZÉK SZAKIRODALOM I. Felhasznált irodalom A közoktatásról szóló 1993. évi LXXIX. Törvény és módosításai Az iskolai tudás. (Szerk.: Csapó Benõ) OSIRIS Kiadó, Budapest, 1998. Báthory Zoltán: Tanulók, iskolák - különbségek. OKKER Kiadó, Budapest, 1997. Bevezetés a pedagógiai kutatás módszereibe. (Szerk.: Falus Iván) Keraban Kiadó, Budapest, 1993. Pavlik Oszkárné - Szilágyi Imréné: Szaktanácsadók kézikönyve. Fõvárosi Pedagógiai Intézet, Budapest, 2000. Vajtó Erik: A szaktanácsadók pedagógiai vizsgálatának módszerei. Országos Pedagógiai Intézet, Budapest, 1987. II. Ajánlott irodalom Báthory Zoltán: Tanítás és tanulás. Tankönyvkiadó, Budapest, 1987. Falus Iván - Ollé János: Statisztikai módszerek pedagógusok számára. OKKER Kiadó, Budapest, 2000. Kiss Margit - Mezõsi Károly - Pavlik Oszkárné: Értékelés a pedagógiában. Fõvárosi Pedagógiai Intézet, Budapest, 1998. Kósáné Ormai Vera: A mi iskolánk. OKI, Budapest, 1998. ELKÖSZÖNÉS A pedagógus munkájának izgalmas állomása a mérés akár a tanítás közbülsõ állomása, akár a végállomás. Fontos, hogy a körülményre is megfelelõ hangsúlyt helyezzünk. Soha ne tévesszük szem elõl: lehet, hogy a tanítványainknak mérföldkõ ez az esemény az életében. Még ha sikertelenül végzõdik is számukra, kínáljunk mindig alternatívát, perspektívát. Kevés olyan szakma létezik, amelyik képes motiválni, a pedagógusé ilyen. Éljünk bátran ezzel az eszközzel!

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 21 MELLÉKLETEK: 1.sz. melléklet

22 TOVÁBBKÉPZÉSI FÜZETEK

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 23

24 TOVÁBBKÉPZÉSI FÜZETEK

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 25

26 TOVÁBBKÉPZÉSI FÜZETEK

MÉRÉSI MÓDSZEREK A PEDAGÓGIAI ÉRTÉKELÉSBEN 27

28 TOVÁBBKÉPZÉSI FÜZETEK