Pilot kutatás 2016 Kognitív játékok, feladatsorok és kompetenciamérések eredményeinek kapcsolatai Faragó Boglárka Kovács Kristóf Sarkadi-Nagy Szilvia 2016. június 14.
Az előadás céljai A Kognitos Kft. által vezetett pilot kutatás bemutatása - 2016 tavasz. A kutatás során kapott mérési eredmények értelmezése. A kutatás eredményei alapján a további feladatok és projekt javaslatok megfogalmazása.
A vizsgálat fókuszában álló kérdések 1. Lehet-e a játékok eredményeiből jósolni a kompetenciamérések eredményeit? (kognitív játékok és kompetenciamérések közötti korrelációk) 2. Jósolhatók-e a játékokon elért eredmények alapján az iskolai osztályzatok? (kognitív játékok és osztályzatok közötti korrelációk) 3. Tantárgyi feladatsorok eredményei alapján jósolhatók-e a kompetenciamérések eredményei? (random feladatsorok eredményei és a kompetenciamérések eredményei közötti korrelációk) 4. Megjósolhatók-e a feladatsorokon elért eredmények alapján e az iskolai osztályzatok? (feladatsorok eredményei és osztályzatok közötti korrelációk) 5. Egyes játékokon elért eredmények hogyan változnak az életkori előre haladással?
Résztvevők A pilot kutatás részletei Baár Madas Református Gimnázium ELTE Radnóti Miklós Gyakorlóiskola Molnár Ferenc Általános Iskola (86 fő) (238 fő) (168 fő) Eszterházy Károly Főiskola Gyakorló Iskola (201 fő) 694 diák az 1-11. évfolyamokból, több min 40 ezer játék és feladatsor megoldáson dolgozott március 15 és május 15 között! Egy diák átlagosan több min 200 percet gyakorolt/játszott! Eszközök a KIOP.HU oldalon 5 tantárgyból feladatsorok: irodalom, nyelvtan, matematika, biológia, fizika (sikeres végrehatásukhoz tárgyi ismeretek és kognitív képességek szükségesek) 15 kognitív játék ( a jó eredményhez nem kell lényeges iskolai tudás) Adatok, amelyeket az iskoláktól kaptunk kompetenciamérések eredményei (szövegértés, matematika) iskolai osztályzatok
Vizsgálatban szereplő kognitív játékok Képességterület Képesség Vizsgálatban szereplő játék Fluid / nem verbális gondolkodás Kvantitatív / numerikus gondolkodás Emlékezet Téri / vizuális gondolkodás Gyorsaság Figyelem Perceptuális képességek Induktív logika / Szabályfelismerés Deduktív logika / Szabályalkalmazás Kognitív gátlás Tervezés Kognitív flexibilitás Mennyiségbecslés Téri-vizuális rövid távú emlékezet Munkamemória Mentális forgatás Téri navigáció Pszichomotoros gyorsaság Számolási sebesség Figyelmi váltás Szelektív figyelem vizuális keresés A bűvész kártyái A bűvész kártyái Versenyfutás a büféhez Öcsi uzsonnája A tojásszállítmány A bűvész kártyái Moszkvai Matrjoska babák Paradicsompalánta Főtéri csengettyűs Esküvői fotózás Az újonc Főtéri csengettyűs A tervezőprogram Építkezés a kengurufarmon Versenyfutás a büféhez Paradicsompalánta Öcsi uzsonnája Nehezített számháború Lomtalanítás Az amnéziás igazgató Esküvői fotózás Etióp elsősegélycsomagok Etióp elsősegélycsomagok Lomtalanítás
Szövegértés Kognitív játékok eredményei és kompetenciamérés eredményei 0,4 feletti korreláció 0 0,3 feletti korreláció 5 0,2 feletti korreláció 5 szövegértés játékok fejlesztése szükséges! Matematika 0,4 feletti korreláció 4 0,3 feletti korreláció 4 0,2 feletti korreláció 4 jól jósolják a kompetenciát
Kognitív játékok eredményei és osztályzatok A kognitív játékok az osztályzatokkal csak kevéssé korrelálnak, csak egy 0,2 feletti korreláció van, az is negatív. Lehetséges okok: szubjektív, egyénre szabott, motivációs célú osztályzási rendszer kevert képesség igények
Feladatsorokon elért eredmények és kompetenciamérés eredményei Igen magas korrelációk találhatóak, általában 0,3 fölötti értéket mutatnak: 0,5 feletti korreláció: matematika feladatsor matematika kompetenciamérés 0,4 feletti korreláció: fizika feladatsor szövegértés és matematika kompetenciamérés irodalom feladatsor szövegértés és matematika kompetenciamérés nyelvtan feladatsor szövegértés kompetenciamérés matematika feladatsor szövegértés kompetenciamérés 0,3 feletti korreláció: biológia feladatsor szövegértés és matematika kompetenciamérés nyelvtan feladatsor matematika kompetenciamérés A kompetenciamérés eredményeivel csak a környezetismeret és a természetismeret feladatsorok nem korrelálnak szignifikánsan.
Feladatsorokon elért eredmények és iskolai osztályzatok a feladatsorokon elért eredmények általában jól korreláltak az osztályzatokkal (egy 0,2 feletti korreláció, a többi 0,3 feletti) 0,4 feletti korreláció: a fizika feladatsor és matematika osztályzat, a környezetismeret feladatsor és irodalom osztályzat, matematika feladatsor és a matematika osztályzat között. biológia és a természetismeret feladatsorok egyik iskolai osztályzattal sem mutattak szignifikáns korrelációt
Képességek korcsoportok szerinti különbségei Három életkori csoport: 1-4. osztály 5-8. osztály 9-11. osztály Nincs szignifikáns növekedés a 8. osztályos kor után már : Az esküvői fotózás (Figyelem, Emlékezet) Fejlődési ugrás 8. osztály után: A bűvész kártyái (Fluid/ nem verbális gondolkodás) A tojásszállítmány (Fluid/ nem verbális gondolkodás) Nehezített számháború (Matematikai ismeretek, Gyorsaság) Lomtalanítás (Matematikai ismeretek, Gyorsaság, Perceptuális képességek) Építkezés a kengurufarmon (Téri/ vizuális gondolkodás) A tervezőprogram (Téri/ vizuális gondolkodás) Nincs szignifikáns növekedés az 1-11. osztály időszakban: Moszkvai matrjoska babák (Kvantitatív/ numerikus gondolkodás: mennyiségbecslés) Versenyfutás a büféhez (Téri navigáció, Kognitív gátlás)
További fejlesztések Játékkészlet módosítása, javítása, bővítése Szövegértéssel és matematikával kapcsolatos relevánsabb játékok Algoritmikus gondolkodást fejlesztő játékok Szociális kompetencia játékok Élvezetesebb és adaptív játékok További feladatsorok, magyarázó videók készítése folyamatosan változó nehézséggel, témakörönként Keretrendszer fejlesztése Eredmények informatívabb és motiválóbb prezentációja, a versengést támogató eszközök beépítése Adaptív mérő és tanító algoritmusok alkalmazása Oktatás módszertani kísérletek támogatása: játékok, feladatok kiosztásának, gyakorlásának, magyarázatának különböző formái
Pedagógiai célkitűzések longitudinális kutatás hosszabb távú hatásokra más mérőeszközökkel, standardizált tesztekkel összevetés képesség profilok azonosítása kognitív képesség profilokkal kapcsolatban a pedagógiai alkalmazások elősegítése képességdeficit kompenzációja problémamegoldási stratégiák tanítása játékok, grafikus feladatok, animációs ismertetők együttes pedagógiai alkalmazásának módszertana