OH Tények és tévhitek az Országos kompetenciamérés adatairól Oktatási Hivatal Köznevelési Programok Főosztálya
OH Sokan hiányoznak!
A hiányzók arányának alakulása 2010-2015 között I. 14% 12% 12,0% 12,1% 10,8% 10% 9,8% 10,1% 8,8% 8% 6% 6,8% 6,2% 6,2% 7,0% 6,0% 7,4% 6,4% 8,0% 6,6% 7,7% 6,4% 7,5% 4% 2% 0% 6 8 10 6 8 10 6 8 10 6 8 10 6 8 10 6 8 10 2010 2011 2012 2013 2014 2015
A hiányzók arányának alakulása 2010-2015 között II. 100% 90% 80% 70% 60% 50% Sajnos nincs statisztikai adat egy átlagos tanítási napon a hiányzók arányáról. 40% 30% 20% 10% 9,8% 6,2% 6,8% 6,2% 7,0% 10,1% 6,0% 7,4% 10,8% 6,4% 8,0% 12,0% 6,6% 7,7% 12,1% 6,4% 7,5% 8,8% 0% 6 8 10 6 8 10 6 8 10 6 8 10 6 8 10 6 8 10 2010 2011 2012 2013 2014 2015
OH A ketteseket hazaküldik!
OH 45,0% 6. évfolyam osztályzatok és hiányzás 40,0% 35,0% 30,0% 25,0% 20,0% 15,0% 10,0% 5,0% 0,0% 0 1 2 3 4 5 A hiányzók osztályzat eloszlása A teljes osztályzat eloszlás
OH A kettesek a mérésről hiányzók között valóban felülreprezentáltak! DE: a hétköznapi hiányzók között vajon nem ugyanez-e a helyzet? A matematika osztályzatok eloszlása markánsan változik az évfolyamok között 40% 35% 30% 25% 20% 15% 10% 5% 0% Jegyeloszlás középszint 1 2 3 4 5
OH Hogyan kezeli a mérés a hiányzás jelenséget?
A hiányzás kezelése I. a statisztika Az átlageredmény számításakor egy-egy osztályon belül a hiányzó tanulók eredményét az osztályban mérési eredménnyel rendelkező tanulók átlagos teljesítményével pótoljuk. Következmény: az így korrigált eredmények természetesen az osztály átlagán nem módosítanak, ám az aggregált adatokban (telephely, iskola, fenntartó, megye, ország) hitelesebb átlagokat adnak. Azaz ezek az átlagok rendszerint alacsonyabbak annál, mintha nem alkalmaznánk ezt a becslést. Országos átlag
A hiányzás kezelése II. a nyilvánosság
OH A jegyek különben sem ugyanannyit érnek!
Község Város Megyeszék hely Budapest Standardizált képességpont Ötös tanulók átlagos teljesítménye I. 1 800,00 6. évfolyam Átlag 2013 Konfidencia intervallum alsó széle Konfidencia intervallum felső széle 1 700,00 7. szint alsó határa 6. szint alsó határa 1 600,00 5. szint alsó határa 4. szint alsó határa 3. szint alsó határa 1 500,00 2. szint alsó határa 1. szint alsó határa
Község Város Megyeszék hely Budapest Standardizált képességpont Ötös tanulók átlagos teljesítménye II. 1 800,00 6. évfolyam Átlag 2013 1 700,00 1 600,00 1 500,00 1 400,00 Konfidencia intervallum alsó széle Konfidencia intervallum felső széle 7. szint alsó határa 6. szint alsó határa 5. szint alsó határa 1 300,00 4. szint alsó határa 1 200,00 3. szint alsó határa 1 100,00 2. szint alsó határa 1. szint alsó határa
OH Hozzáadott érték tanulói szinten (komplex modell)
Az iskola saját fejlesztő hatása (az egyéb, ismert tényezők hatását kiküszöbölve)
A szülők iskolai végzettsége Kulturális háttér A tanuló eredményét befolyásoló tényezők Alapvető képességek, IQ, tehetség Szociális helyzet Nem A tanuló eredménye Motiváció, önbizalom, attitűdök A pedagógusok munkája Az iskolai környezet Egyéb környezeti hatások
Az iskolától független eredményt befolyásoló tényezők, A két érték amelyek különbsége ismertek a A 2014. évi A kulturális tényezőktől független része Az iskola eredmény háttér típusa és a az eredménynek (könyvek településtípus száma) A vele egy A tanuló Nem A család anyagi A osztályban tanuló és tényleges helyzete telephelyen becsült tanulók 2016. (vagyontárgyak évi 2016. szüleinek évi száma) végzettsége A szülők iskolai végzettsége modellben figyelembe vett eredménye eredménye A vele egy osztályban és telephelyen tanulók 2014-es eredménye
Finomítás A tényleges eredmény jobb, mint a modell alapján becsült A tényleges eredmény gyengébb, mint a modell alapján becsült A becsült értéktől szignifikánsan nem különbözik
Egy iskola és egy tanuló példája
Az iskola
Teljesítmény és családi háttér
Fejlesztő hatás
Finomítás Komplex modell
A tanuló abszolút eredménye
A tanuló eredménye a komplex modell kontextusában
OH Egy makacs tévhit A vidék-város színvonalkülönbség
Ki a jobb??? A városi diákok teljesítménye jobb, mint a községi diákoké! A városokban jobbak az iskolák, mint a községekben?
Mire alapozzák? Mit bizonyít? Azt, hogy a városi tanulók átlageredménye jobb, mint a községi tanulóké!
Ez a teljesítményt jelenti? 8. évfolyam, matematika
Matematika képesség (8.) 1900 1800 1700 1600 1500 1400 1300 1200 1100 Ez a teljesítményt jelenti? Az átlagok széles intervallumokat takarnak! Országos Ált. isk. Ált. isk. község Ált. isk. város Ált. isk. megyeszh. Ált. isk. Budapest 8 évf. gimn. 6 évf. gimn. A diákok teljesítménye gyakorlatilag független a település típusától CSH-index -3-2 -1 0 1 2 3
Tehát Az átlagteljesítmények közötti különbségek csak az egyes településtípusok közötti szociokulturális összetételbeli különbségeket tükrözik.
OH A rangsorok készítésének kockázatáról Egy valóságos példán bemutatva
1 4 7 10 13 16 19 22 25 28 31 34 37 40 43 46 49 52 55 58 61 64 67 70 73 76 79 82 85 88 91 94 97 100 Miért csábító? 'Top 100 iskola' 8. évfolyamos összegzett képességpontjai 4000,00 3900,00 3800,00 3700,00 Azaz összeadja a matematika és a szövegértés képességpontokat De miért??? 3600,00 3500,00 3400,00 3300,00 3200,00 3100,00 3000,00
1 4 7 10 13 16 19 22 25 28 31 34 37 40 43 46 49 52 55 58 61 64 67 70 73 76 79 82 85 88 91 94 97 100 Miért nem? 4000,00 3900,00 3800,00 3700,00 3600,00 3500,00 3400,00 3300,00 3200,00 3100,00 3000,00 'Top 100 iskola' 8. évfolyamos összegzett képességpontjai és azok konfidencia intervallumai Ők szinte bárhol lehetnének 1-12. 12 40. 40 70. 70 100.
1 3 5 7 9 11 13 15 17 19 21 23 25 27 29 31 33 35 37 39 41 43 45 47 49 51 53 55 57 59 61 63 65 67 69 71 73 75 77 79 81 83 85 87 89 91 93 95 97 99 Miért nem? 4000,00 'Top 100 iskola' 8. évfolyamos összegzett képességpontjai és azok konfidenciaintervallumai 3900,00 3800,00 3700,00 3600,00 3500,00 3400,00 3300,00 3200,00 3100,00 Az OH hozzáadott érték listáiban szerepelő iskolák 3000,00
1 3 5 7 9 11 13 15 17 19 21 23 25 27 29 31 33 35 37 39 41 43 45 47 49 51 53 55 57 59 61 63 65 67 69 71 73 75 77 79 81 83 85 87 89 91 93 95 97 99 Miért nem? 4000,00 3900,00 3800,00 'Top 100 iskola' 8. évfolyamos összegzett képességpontjai és azok konfidenciaintervallumai Gyanús eredményű iskolák 3700,00 3600,00 3500,00 3400,00 3300,00 3200,00 3100,00 Az OH hozzáadott érték listáiban szerepelő iskolák 3000,00
Azaz Az OKM-eredményekből előállított nyers erősorrend-alapú 100-as lista azt a hamis képet kelti, hogy itt 100 különböző teljesítményű iskola szerepel, holott 1. A 100 iskola legfeljebb négy azonos teljesítményű halmazba sorolható. 2. Semmit nem mond az iskolák valódi értékeiről, azaz az általuk létrehozott hozzáadott értékekről.
Ehelyett Az igazi értéket a társadalmi hátrány kompenzációja és/vagy a fejlesztő hatás szempontjából kiemelkedő teljesítményű iskolák képviselik. Listáik megtalálhatók a Hivatal honlapján. A 2015. évi kiemelkedő iskolák már elérhetők. A 2016. évi kiemelkedő iskolák áprilisban elérhetők lesznek.
Használjuk egyre jobban a mérési rendszer szolgáltatásait! Érdemes! OH