Kocsis Mihály Meddig érvényes a PISA-látlelet?

Kocsis Mihály Meddig érvényes a PISA-látlelet? - Az I. évfolyamos hallgatók akadémiai képességeinek vizsgálata - Egy méréssel-értékeléssel foglalkozó konferencián egy felsőoktatási téma kakukktojásnak számít, hiszen nem tudjuk, hogy a felsőoktatásban lesznek-e hasonló jellegű mérések, mint a közoktatásban. Ebben a pillanatban úgy tűnik, hogy igen. Az OECD mellett szerveződik egy nagy projekt, amely négy területen tervezi mérni a felsőoktatásba bekerülő, majd onnan kikerülő hallgatókat. Ez az AHELLO-program. Az első ilyen mérési terület az akadémia képességek, kompetenciák állapota a hallgatóknál a felsőoktatásba bekerülés pillanatában. Szakmai kompetenciákat egyelőre két területen vizsgálnának, a közgazdaságtudományi és a műszaki-tudományi területen, ez a második terület. A harmadik vizsgálandó terület a hozzáadott pedagógiai érték, bár ez általában igen nehezen mérhető, és a felsőoktatásban véleményem szerint különösen nehezen lesz majd mérhető, azonban a mérés tervezetében jelenleg benne van. A negyedik a tanulási környezet vizsgálata. Ez könnyebbnek tűnik ugyan, de jelenleg nincsenek mutatói a felsőoktatásban. A felsőoktatási rendszerben az elmúlt két évtizedben hatalmas változások következtek be. A felsőoktatási intézmények általában lassabban reagálnak minden új helyzetre. Hajlamosak vagyunk mindent a bolognai folyamat számlájára írni, holott gyakorlatilag a nagy átalakulások sokkal korábban kezdődtek. 1988-ig érdemes visszamenni. A Bolognai Egyetem 900. születésnapján összejöttek a rektorok Európából és a világ minden tájáról, és elfogadták a Magna Karta nyilatkozatot. Ez arról szól, hogy az egyetemek álljanak a társadalmi fejlődés élére, és ennek érdekében tapasztalatcserék, oktató- és hallgatócserék segítsék ezt a társadalmi átalakulást. Ezt követően valóban elindult az a nagy változás, amely az egyetemek életében megmozgatta a hallgatókat és az oktatókat. Tíz évvel később a Sorbonne Egyetem volt 800 éves, ez 1998-ban volt. Ott szintén összejöttek a rektorok, és elfogadták a Sorbonne-i Nyilatkozatot. Ebben van egy kitétel: négy ország, Anglia, Franciaország, Németország és Olaszország úgy döntött, hogy egységesíti felsőoktatási rendszerét, és felhívta Európa többi államát, hogy csatlakozzon ehhez. Ez egy évvel később megtörtént a Bolognai Nyilatkozat aláírásával, és elindult a bolognai folyamat. Magyarország késve szállt be a fejlesztésekbe, 2003-tól kezdtünk felkészülni a 2006-os bevezetésre. Bár akkor még azt gondoltuk, hogy 2005-ben kezdjük, de a felsőoktatási törvényünk többszöri alkotmánybírósági útja nem tette 1

ezt lehetővé, így 2006-ban indultunk. A felkészítés azonban 2003 őszétől, 2004-től gőzerővel folyt. Ebben az időszakban volt 16 olyan felsőoktatási intézmény, amely korábban művelődésszervező, személyügyi szervező, humánszervező és munkavállalási tanácsadó szakokon képzett hallgatókat. Ezek konzorciumot hoztak létre annak érdekében, hogy megalakítsák az andragógia szakot. Ez a konzorcium úgy döntött, hogy az oktatási folyamatot mérni fogják. Tehát abban a pillanatban, amikor a hallgatók belépnek az első évfolyamra, akkor valamilyen méréssel minden hallgatót megvizsgálnak. Ahhoz, hogy az andragógia szakra jelentkező első évfolyamosokat valamihez viszonyítani tudjuk, 2005-ben, a még művelődésszervező, személyügyi szervező, humánszervező munkavállalási tanácsadó szakra jelentkező hallgató körében szintén végeztünk egy mérést. Ezek a mérések a szövegértésre, a matematikai gondolkodásra, a pszichológiai immunrendszer vizsgálatára és a szociokulturális háttér feltárására irányultak. 2001-2002-ben a holland-magyar államközi szerződés keretében a hollandiai CITO, a Pécsi Egyetem és az akkori OKI munkatársai elindítottak egy vizsgálatot, ami arra irányult, hogy tudjuk-e előre jelezni az egyetemre felvételt nyert hallgatók tanulmányi sikereit. A vizsgálat hozott részeredményeket, létrejöttek olyan tesztek, kérdőívek, amelyek valamit tudtak jelezni ezen a területen. Ezeket használtuk 2005-től máig. Tehát négy éve minden belépő hallgatót megvizsgálunk ezekkel a tesztekkel. Jelen pillanatban 8000 hallgató adatairól tudok beszámolni. Az egyetem tömegessé válásával ugyanazok a tendenciák megjelentek az egyetemeken is, mint amelyek a közoktatásban voltak tapasztalhatók. A lejtőeffektusok ugyanúgy érvényesülnek a felsőoktatásban, mint a közoktatásban. A települési lejtő, a szülők végzettségével kapcsolatos lejtő. A szövegértést négy nagy területen vizsgáltuk. Ismeretterjesztő szöveget, szakszöveget, nyelvhelyességi feladatokat és fogalommagyarázat feladatokat kaptak a hallgatók. Az ismeretterjesztő szövegeket az egyetemre bekerülő hallgatók nagy biztonsággal értik meg, 75-80%-os a megoldottság. A szakszöveggel baj van, a nyelvhelyesség megoldottsága a legrosszabb. 2

Feladat Első kísérletükben a kutatók nyolc napon át nem adtak vizet a tevének. A teve súlyának mintegy 22%-át veszítette el, körülbelül 100 kilót. A szöveg alapján körülbelül mennyire becsülhető egy teve súlya? A) 100 kg-ra. B) 500 kg-ra. C) 2200 kg-ra. D) Erre nem találunk utalást. A fenti feladat nagyon egyszerű szövegértési feladat. A kérdés az, hogy milyen súlyú lehet a teve, ha durván 100 liter vizet iszik. A hallgatók nagy biztonsággal oldják ezt meg. Akik nem az 500 kg-t jelölik meg, azok szerint nincs utalás a szövegben erre. A következő feladat már bonyolultabb szituációt jelenít meg. Zavaró információk vannak a szövegben. A légy röpte elterelő inger, semmi köze az eredményhez. A hallgatók teljesítménye drasztikusan csökken: 21 %-os az eredmény. Feladat Az A és B közötti távolság 30 km. Egy biciklista indul A-ból B-be 15km/h sebességgel. Vele egyidőben egy légy indul B-ből A irányába 30 km/h sebességgel. Amikor találkoznak, a légy egy pillanatra megpihen a biciklista orrán, majd rögtön visszafordul B-be, változatlanul 30km/h sebességgel. Amikor B-be érkezik, azonnal visszafordul a biciklista irányába és így tovább, mindaddig, amíg a biciklista B-be nem érkezik. Hány kilométert repült ez alatt a légy? A 15 km B 30 km C 45 km D 60 km E Egyik fenti válasz sem jó. A következő feladat egyszerű szöveg, amelybe absztrakt adatok szerepelnek. Az absztrakt adatok idegessé teszik a hallgatókat. A hallgatók sokszor fel is adják, miközben az első osztályosok matematikai logikai játékokkal folytatott tevékenysége egyszerűen és gyorsan megoldhatóvá teszi. Itt a teljesítmény 10 %-ra esik vissza. Ez az eredmény azonban a mérésmetodikát ismerők körében nem váratlan. Ha absztrakt adat jelenik meg a feladatban, akkor iszonyatosan gyenge a megértés szintje. Feladat A következőket tudjuk: Minden DUDU egyben PUPU is. Bizonyos DADÁ-k egyben DUDU-k is. - Ha egy DADA nem DUDU, akkor ő PUPU. Az alábbi állítások közül melyek igazak? 3

- (i) Minden PUPU, aki DADA, egyben DUDU is. - (ii) Minden PUPU, aki nem DADA, egyben DUDU is. - (iii) Bizonyos PUPU-k egyben DUDU-k is. - (iv) Minden DUDU egyben DADA is. - (v) Minden DADA egyben PUPU is. A csak (iii) B csak (iv) C csak (i) és (iii) D csak (ii) és (v) E csak (iii) és (v) A pécsi egyetem lehetővé tette, hogy ne csak az andragógiai szakosokat vizsgáljuk, hanem minden hallgatót. Szövegértési feladatok átlagai szakcsoportonként Sok egyetem csatlakozott hozzánk a felmérésben, és láthatjuk, hogy például az orvostudományi, illetve a jogi kar hallgatói hogyan teljesítenek ezeken a feladatokon. A pedagógusképzés valamely szintjére jelentkező hallgatók kumulált adatai szerepelnek itt, tehát vannak köztük tanárképző főiskolák, egyetemen mesterszakra jelentkező pedagógusjelöltek, tanító- és óvóképzős hallgatók. Az ő kumulált adataik a felsőfokú szakképzésben tanulók szintje alatt marad. Ez nagyon szomorú. A különböző felsőoktatás hallgatóira nem reprezentatív ez a minta. 4

Műhelykonferencia a nemzetközi zi tanulói i teljesítm tménymérések hatékony hazai felhasználása sa érdekében Meddig érvényes a PISA-látlelet? Az I. évfolyamos hallgatók akadémiai képessk pességeinek vizsgálata Dr. Kocsis Mihály Oktatáskutat skutató és s Fejlesztő Intézet, KKEK Pécsi Tudományegyetem, FEEK Budapest, OPKM, 2009. május m 15.

Az iskolai mérésekm leggyakoribb területei - szöveg vegértés; - matematika; - természettudom szettudomány; - problémamegold mamegoldó gondolkodás; - a tanulók k szocio-kultur kulturális lis háttere; h - tantárgyi attitűdvizsg dvizsgálatok.

PISA szöveg vegértési teljesítm tmények 2006-ban 550 540 530 520 nyerspont átlag 510 500 490 480 470 460 450 440 Finnország Dánia Svédország Magyarország

Vizsgálati területek - a szocio-kulturális lis hátth ttér r feltárása sa; - a szöveg vegértés s vizsgálata (publicisztikai szöveg, szakszöveg, nyelvhelyességi feladatok, fogalommagyarázat zat); - a matematim atematikai és s a logikai i készsk szségek vizsgálata lata; - a pszi zichológiai immunrendszer vizsgálata lata.

Egyetemi hallgatók szöveg vegértési teljesítm tményei 80 70 teljesítmény %-ban 60 50 40 30 20 10 0 ny elv - hely esség ismeretterjesző szakszöveg fogalomértés egy ütt a szövegértés f eladatai

Feladattípusok a szöveg vegértés s vizsgálat latában - konkrét t adatok egyszerű szöveg veg- struktúrában ban; - konkrét t adatok összetett szöveg veg- struktúrában ban; - absztra trakt t adaa datok egyszerű szöveg veg- struktúrában.

Konkrét t adatok egyszerű szövegstrukt vegstruktúrában Első kísérletükben a kutatók k nyolc napon át t nem adtak vizet a tevének. A teve súlys lyának mintegy 22%-át veszítette el, körülbelk lbelül l 100 kilót. A szöveg alapján n körülbelk lbelül l mennyire becsülhet lhető egy teve súlya? s A) 100 kg-ra. B) 500 kg-ra. C) 2200 kg-ra. D) Erre nem találunk lunk utalást.

Konkrét t adatok összetett szövegstrukt vegstruktúrában Az A és s B közötti k távolst volság g 30 km. Egy biciklista indul A-ból A B-be 15km/h sebességgel. Vele egyidőben egy légy l indul B-B ből l A irány nyába 30 km/h sebességgel. Amikor találkoznak, lkoznak, a légy egy pillanatra megpihen a biciklista orrán, majd rögtr gtön visszafordul B-be, B változatlanul v 30km/h sebességgel. Amikor B-be érkezik, azonnal visszafordul a biciklista irány nyába és így tovább, mindaddig, amíg g a biciklista B-be B nem érkezik. Hány kilométert repült ez alatt a légy? l A 15 km B 30 km C 45 km D 60 km E Egyik fenti válasz v sem jó. j

Absztrakt t adaa datok egyszerű szövegstrukt vegstruktúrában A következk vetkezőket ket tudjuk: Minden DUDU egyben PUPU is. Bizonyos DADÁ-k k egyben DUDU-k k is. Ha egy DADA nem DUDU, akkor ő PUPU. Az alábbi állítások közül k l melyek igazak? - (i) Minden PUPU, aki DADA, egyben DUDU is. - (ii) Minden PUPU, aki nem DADA, egyben DUDU is. - (iii) Bizonyos PUPU-k k egyben DUDU-k k is. - (iv) Minden DUDU egyben DADA is. - (v) Minden DADA egyben PUPU is. A csak (iii) B csak (iv) C csak (i) és s (iii) D csak (ii) és s (v) E csak (iii) és s (v)

Wason pragmatikus szabálya lya - A kártyk rtyán n magánhangz nhangzó csak páratlan p számmal szerepelhet. - A kártya k egyik oldalán n betű, a másikon m szám m szerepel. - 18 éves életkor alatt szeszes ital nem fogyasztható. - A kártya k egyik oldalán n az ital, a másikon m a fogyasztó életkora szerepel. E K 2 7 Sör Kóla 22 16 - Hány kártyk rtyát t kell megfordítani a szabály ellenőrz rzéséhez? - Hány kártyk rtyát t kell megfordítani a szabály ellenőrz rzéséhez?

Hallgatói i teljesítm tmények az eltérő feladatokban Teljesítményszintek eltérő feladatokban 80 70 teljesítmény (%) 60 50 40 30 20 10 0 Teve Sör Légy Kártya Pupu Feladatok

Szöveg vegért rtési feladatok átlagai szakcsoportonként nt 16 14 12 10 8 6 4 2 0 orvostud. jogtud. bölcsészettud. gazdaságtud. társadalomtud. f.sz. ped.képzés

Köszönöm m figyelmüket! Kocsis Mihály: Az I. évfolyamos hallgatók akadémiai képessk pességeinek vizsgálata Budapest, OPKM, 2009. május m 15.