SZEGEDI TUDOMÁNYEGYETEM BÖLCSÉSZETTUDOMÁNYI KAR NEVELÉSTUDOMÁNYI DOKTORI ISKOLA INFORMÁCIÓS ÉS KOMMUNIKÁCIÓS TECHNOLÓGIÁK AZ OKTATÁSBAN DOKTORI PROGRAM TONGORI ÁGOTA 5-11 ÉVFOLYAMOS TANULÓK IKT MŰVELTSÉGÉNEK MÉRÉSE: AZ INFORMÁCIÓHOZ VALÓ HOZZÁFÉRÉS MAGABIZTOSSÁGA A PHD ÉRTEKEZÉS TÉZISEI TÉMAVEZETŐ: MOLNÁR GYÖNGYVÉR DSc, EGYETEMI TANÁR SZEGED 2018 1
BEVEZETÉS ÉS ELMÉLETI HÁTTÉR Huszonegyedik századi társadalmunk olyan technológiai fejlődéssel néz szembe, amely szükségképpen magával hozza az értékesnek számító tudás átértékelődését. Előtérbe kerülnek a tudás felhasználását elősegítő képességek, s ezzel együtt a műveltség meghatározása is új fogalmi kereteket kap (Csapó, 2008; Greenhow, & Robelia, 2009; Griffin, McGaw, & Care, 2012; Koltay, 2010; Kondor, 2003; Molnár, 2011; OECD, 2010). A tudástársadalom által megkívánt folyamatos tanuláshoz, a munkához, a mindennapi élethez már nem elegendőek az írni, olvasni, számolni tudás alapvető műveltségelemei (Binkley et al., 2010; Griffin et al., 2012; UNESCO & Microsoft, 2011; NAGB, 2013). A munka egyre inkább számítógéphasználaton alapuló világában a teljesítményorientált munkáltatók mind magasabb elvárásai között szerepel a hatékony információkeresés általi problémamegoldás képessége (Leu, Kinzer, Coiro, Castek, & Henry, 2017). Az új műveltség koncepció magába foglalja az online keresési stratégiák magabiztos alkalmazását (Leu et al., 2017). Az interneten való hatékony eligazodás és a digitális műveltség további elemei (például technológia-használat) nélkül a 21. században napi tevékenységeink mint bankolás, egészségügyi, utazási, jogi vagy bármely más szolgáltatások felderítése, foglalása, a számtalan munkahelyi szoftver alkalmazása, élethosszig tartó tanulmányaink során való projekt- és kurzusregisztrációk, teljesítések és kapcsolattartás nem valósulhatnak meg eredményesen (Australian Curriculum, Assessment and Reporting Authority [ACARA], 2015; Commission of the European Countries, 2005). Az információs és kommunikációs technológia használata a felelős állampolgári létnek és döntéshozatalnak is alapvető kelléke (Czirfusz, Habók, Lévai, & Papp-Danka, 2015; Commission of the European Countries, 2005). A világháló exponenciális növekedésének (Nelliyullathil, 2013) köszönhetően az információ-áradat kritikus kezelése is nélkülözhetetlen képességgé vált (Metzger & Flanagin, 2013). Az egyre gyorsuló technológiai fejlődés következtében szükségessé váló digitális műveltség az oktatás területén is változásokat eredményezett, új mérési és fejlesztési megoldásokat indukált a 21. századi készségek, képességek vonatkozásában (Molnár, 2011). Az IKT műveltség komponensei az oktatás kiemelt tényezőivé váltak (Educational Testing Service [ETS], 2002; Organisation for Economic Co-operation and Development [OECD], 2010; Oktatás és képzés, 2004; 2
R. Tóth, & Molnár, 2009; United Nations Educational, Scientific and Cultural Organization [UNESCO], 2008; UNESCO, & Microsoft, 2011). Mind a technológiai alapú mérés-értékelés (Csapó, Molnár, & R. Tóth, 2008), mind a fejlesztés és alkalmazhatóság kutatása terén számos példával szemléltethető, gyors fejlődés tapasztalható nemcsak nemzetközi, de hazai viszonylatban is a számítógépesjáték-alapú fejlesztéstől (Pásztor, 2014) a digitális történetmesélésen, (Karakoyun & Kuzu, 2013; Lanszki & Papp-Danka, 2017), mobiltanuláson (mlearning, Abonyi-Tóth & Turcsányi- Szabó, 2015) vagy a virtuális valóság (Ollé, 2012) bevonásán át a gyógypedagógiában (Szili, 2014) való felhasználásig. Az IKT műveltség digitális műveltségen belüli meghatározásához a hazait is magába foglaló nemzetközi szakirodalom áttekintése jelentette az elméleti alapot. Az információs műveltséget részben magába foglaló digitális (informatikai) műveltségen belül, a médiaműveltséggel és technológiai műveltséggel is közös metszetet képező konstruktumként határozható meg az IKT műveltségterület (Molnár, Tongori & Pluhár, 2015). Az e területtel foglalkozó kutatók, illetve kutatócsoportok a változatos elnevezésekkel jelölt IKT, információs vagy digitális műveltség, avagy digitális kompetencia meghatározásakor az elemek egyre bővülő körét vonták be az IKT műveltségről alkotott fogalmi keretükbe (Tongori, 2012). A kutatási irányokat összegezve, az információkezelés lépéseihez (American Library Association, 2000; Association of College and Research Libraries, 2016) kapcsolódóan, az azok alapjául szolgáló írni, olvasni, számolni tudást, a technológiahasználatot, valamint a gondolkodási képességeket (Partnership for 21st Century Skills, 2008; Catts & Lau, 2008), társas kapcsolattartási kompetenciákat (Commission of the European Countries, 2005), egészségügyi (Partnership for 21 st Century Skills, 2008), személyes biztonsághoz kapcsolódó (Aoyama, Barnard-Brak, & Talbert, 2011), jogi (American Library Association, 2000) és etikai (Eurydice, 2002) vonatkozásokat mint aspektusokat is figyelembe véve egy olyan komplex konstruktumot kapunk, amelynek hét alapvető komponense az információ meghatározása, ahhoz való hozzáférés, információkezelés, meglévő tudásba integrálás, értékelés, létrehozás és kommunikáció útján történő megosztás. Ezen konstruktum vizsgálatát, elsősorban e konstruktumnak a mindennapokban való eligazodás szempontjából legalapvetőbb komponensét, az információhoz való hozzáférést állítottuk kutatásunk fókuszába. A szakirodalmi áttekintéskor, mérőeszközök tekintetében a technológia-, illetve 3
számítógép-alapúak közül a harmadik generációs, valódi szoftverek szimulációját alkalmazó mérőeszközök (Csapó, Ainley, Bennett, Latour, & Law, 2012; Molnár, Greiff, Wüstenberg, & Fischer, 2017) bizonyultak a legautentikusabbnak az IKT konstruktum és annak információkeresési komponense mérésére. Ennek oka az, hogy az itemek jellege ezekben a tesztekben áll a legközelebb az online tevékenységek során megtapasztalt, dinamikusan változó, interaktív alkalmazásokhoz (Fu, Zapata, & Mavronikolas, 2014). A tanulói IKT műveltség elsajátításában központi szerepet játszik a számítógép és a technológia, ami szintén indokolja azok bevonását az IKT műveltségi teljesítményvizsgálatokba (Bennet et al., 2007 as cited in Csapó et al., 2012, p. 147). Ezen a felismerésen alapulnak a nemzetközi viszonylatban is jelentős, oktatási vonatkozású méréseket ezen belül IKT műveltségi méréseket lebonyolító kutatócsoportok által alkalmazott, szimulációt is magukba foglaló mérőeszközök, mint az ausztrál oktatási tárcához köthető IKT műveltségi mérés (ACARA, 2015; Fraillon, Schulz, Gebhardt, & Ainley, 2015) vagy az oktatási eredmények nemzetközi összehasonlító vizsgálatát végző IEA (International Association for the Evaluation of Educational Achievement) számítógépes és információs műveltségi mérése (The International Computer and Information Literacy Study (ICILS), 2014). Más kutatások mellett mint például a Hong Kongi Egyetem égisze alatt működő Centre for Information in Education (CITE, Law et al., 2009) 5. és 8. évfolyamosok információs műveltségi mérése további például szolgál az amerikai ETS (Educational Testing Service) IKT műveltségi mérése felsőoktatási kontextusban (Katz & Macklin, 2007), valamint a szintén Egyesült Államok-beli országos közoktatási szintű mérésekért felelős National Assessment Governing Board 2014-es, technológiai és mérnöki műveltséget fókuszába állító vizsgálatán belül az IKT műveltség mérése (NAGB, 2013; The Nation s Report Card, n. d.). Módszerek tekintetében az alkalmazott mérőeszköz szimulációs jellege mellett az ETS tesztet kivéve a mérések másik közös vonása, hogy minta tekintetében hasonló korosztályt, illetve évfolyamokat összességében 5-10. évfolyamosokat vizsgáltak. Eredmények vonatkozásában a több évfolyamot felölelő mérések közös vonása, hogy IKT műveltség terén a fejlődésben bekövetkező jelentős változást a vizsgált évfolyamok közötti időszakra állapítják meg (ACARA, 2012, 2015). Összességében a mérések további közös jellegzetessége eredmények terén, hogy a fiúk és a lányok teljesítménye között szignifikáns eltérést tapasztaltak (ACARA, 2015; ICILS, 2014; NAGB, 2013). A mérések további oktatási célkitűzések 4
szempontból megfontolásra érdemes eredménye, hogy a gyakori használat nem feltétlenül jelent IKT műveltségi teljesítmény növekedést (ACARA, 2012, 2015; Katz & Macklin, 2007). CÉLOK ÉS HIPOTÉZISEK A kutatás célja kettős. Egyrészt egy megbízható, valid, az 5-11. évfolyamos tanulók digitális közegben való magabiztos információkeresési képességei méréséhez megfelelő mérőeszköz fejlesztése, másrészt a kidolgozott mérőeszköz segítségével 5-11. évfolyamos diákok digitális információkeresési hatékonyságában történő fejlődés, változás azonosítása, a különbségek okainak feltérképezése. A célok megvalósítása érdekében egy négy fázisból álló kutatás-sorozat kivitelezésére került sor, amely három pilot mérésre és egy nagymintás mérésre alapoz. A négy fázis egymásra épülését és a közöttük lévő kapcsolatot az IKT műveltség információhoz való hozzáférés komponensének 5-től 11. évfolyamos diákok körében való feltérképezésére irányuló tesztfejlesztés, valamint a mérőeszköz általi vizsgálat céljai, módszerei és eredményei biztosították. A kutatás első fázisa: kérdőívfejlesztés és kérdőíves kutatás Az információhoz való hozzáférés magabiztosságára vonatkozó, a kutatás-sorozat első fázisa során fejlesztett kérdőívvel célunk a 7. és 10. évfolyamos tanulók számítógéphez és internethasználathoz ezen belül a technológia-használathoz köthető, továbbá az online, illetve offline információk értelmezése terén való magabiztosságának, használatának, attitűdjeinek különféle változók mentén történő, önbevalláson alapuló felmérése volt. A kérdőív feltérképezte a tanulók számítógép- és internethasználati gyakoriságát, a szakirodalom alapján az e tevékenységhez köthető affektív és szocio-ökonómiai háttérváltozókat és az esetleges nemenkénti eltéréseket. A kérdőíven alapuló, önbevallásos kutatás hipotézisei a következők voltak: (H1.1) Az online közösségi oldalak látogatásának köszönhetően a tanulók teljesen magabiztosnak ítélik meg a közösségi oldalakon való tevékenységüket, valamint az ezen tevékenységgel bevallottan töltött idő jelentősen több lesz, mint más tevékenységek esetén. (H1.2) Magasabb lesz azon tanulók aránya, akik az online vizuális, illetve hallott információk értelmezésében magabiztosnak vallják magukat, mint azoké, akik a nyomtatott információk értelmezésében magabiztosak. 5
(H1.3) A leggyakoribb online tevékenység 7-esek körében várhatóan az online játék, azonban a 10-esek körében a közösségi oldalakon való tevékenység és az iskolai feladatokhoz való információkeresés. (H1.4) A lányok várhatóan magabiztosabbak lesznek a digitális olvasás és billentyűzethasználata terén, ugyanakkor a fiúk magabiztossága inkább a játék célú technológiahasználatban várható. (H1.5) Az alacsonyabb évfolyamos tanulok es lányok feltevéseink szerint kevésbé pozitívnak ítélik meg a számítógéphez es az internethez való attitűdjeiket, es feltehetően több félelmük lesz a számítógép, illetve internet használattal szemben. (H1.6) A kidolgozott kérdőív empirikus mutatói alátámasztják a kérdőív megbízhatóságát. A kutatás második fázisa: részben szimulációs teljesítménymérő teszt A kutatás második fázisában egy IKT műveltség területén való magabiztosságot felmérő képességteszt fejlesztése volt a cél. A korábbi fázisban kidolgozott kérdőív után, a tesztfejlesztés folyamatában első lepésként egy részben imitált, részben szimulált weboldalakat megjelenítő online tesztet kívántunk fejleszteni annak érdekében, hogy feltérképezhessük a tanulók IKT műveltségét, pontosabban annak egy komponensét, az információhoz való hozzáférés magabiztosságát. (Ezek részletesebb tárgyalását lásd a módszereknél.) Célunk az volt, hogy közvetlenül mérhessük, milyen teljesítményt érnek el a tanulók Az IKT műveltség információhoz való hozzáférés komponense terén, s ehhez kapcsolódóan, mennyire magabiztosak az online technológiahasználatban. Ugyanakkor a fejlesztési folyamatban a teszt reliabilitását, validitását, elméleti modellünkhöz illeszkedését és itemeinek viselkedését is vizsgálni kívántuk (Tongori, 2016a) nehézség, időráfordítás és azok kapcsolata tekintetében, amely szempontok a közoktatási környezetben való alkalmazhatóság szempontjából is vizsgálandók voltak. Célul tűztük ki az itemek diszkrimináló erejének vizsgálatát is. Hipotéziseink szerint: (H2.1) tesztünkben a feladatok sorrendje amely az információ kezelés egymásra épülő fázisait (Bawden, 2008) követte tükrözi az itemek növekedő nehézségi sorrendjét, melyet 6
feltételezésünk szerint a tesztben elért tanulói átlageredmények jelezte nehézségi sorrend nagyrészt igazol. (H2.2) Kapcsolat áll fenn a képességszintek és feladatnehézséggel kapcsolatban álló sikeres feladatmegoldás és a ráfordított idő között összességében valamennyi szint és mindkét nem tekintetében. (H2.3) Az adott évfolyamok és mindkét nem IKT műveltsége hozzáférés komponensének 45 perces időintervallumban való tesztelésére alkalmasak a pilot teszt feladatai. (H2.4) Tesztünk megbízhatóan méri a tanulók IKT műveltségen belüli információkeresési magabiztosságát. Validitás tekintetében igazolható a konstruktum validitás az önbevallásos kérdőív és a teljesítménymérő teszt azonos területre vonatkozó válaszai között meglévő, avagy nem fennálló korrelációk vizsgálatával (Sommerville, Smith, & Macklin, 2008; Katz & Macklin, 2007). (H2.5) A nemek és évfolyamok teljesítménye között szignifikáns eltérések vannak. (H2.6) Itemek vonatkozásában a megfelelő diszkrimináló erő és (H2.7) a tanulók képességskáláját többnyire lefedő itemnehézségek igazolását feltételeztünk tesztünkben. (H2.8) A teszt pilotmérést követő itemszelekciója nyomán itemszerte jó illeszkedési paramétereket vártunk. A kutatás harmadik fázisa: teljes mértékben szimuláción alapuló teljesítménymérő teszt A szakirodalmi ajánlások következtében a harmadik fázis legfőbb célkitűzése az autenticitás elérése: a valódi webes közegben való navigáció szimulálása volt. Ezért a tesztfejlesztés korábbi fázisában kialakított szimulációs feladatok szimulált webes közegének felhasználásával a teszt kifejezetten információkeresés-fókuszú továbbfejlesztését céloztuk meg. Az edia online platform jelentős mértékű, egyidejű fejlesztése (Molnár & Csapó, 2013; Molnár et al., 2015a) a korábbinál még egységesebb, újszerű keret-szerkezetet biztosított a mérőeszközünk számra, aminek következtében a teszt belső konzisztenciájának növekedését vártuk. A mérőeszköz teljes egészében szimulációra alapozott megújításának következtében ismét fontos kutatási kérdés volt a teszt megbízhatósági mutatóinak megismerése, valamint a teszt 7
itemei viselkedésének (pl. diszkrimináló erő) 5, 6, 8. és 10. évfolyamos diákok körében történő feltérképezése. Oktatási környezetben használható mérőeszköz létrehozását tűztük ki célul, ezért az elemzések során hangsúlyt fektettünk a teszt megoldásához szükséges idő felmérésére is. A tesztfejlesztést szolgáló adatfelvételek lehetőséget teremtettek a különböző évfolyamos diákok között detektálható fejlettségbeli különbségek azonosítására is, igaz figyelembe véve a kutatás mintájából adódó korlátokat. Strukturális egyenletek alkalmazásával teszteltük az adatok modellilleszkedését. Hipotéziseink szerint: (H3.1) a teszt belső konzisztenciája a korábbi fázisban tapasztaltnál magasabb értéket ér el. (H3.2) Minden évfolyam számára várhatóan elegendő a 45 perces időkeret a teszt megoldásához. (H3.3) A magasabb évfolyamos tanulóktól jobb teljesítményt feltételeztünk, mint az alacsonyabb évfolyamosoktól. (H3.4) A magasabb évfolyamos tanulók a felmérés mindkét részében (teszt és kérdőív) kisebb időráfordítást igényelnek, mint az alacsonyabb évfolyamosok. (H3.5) A strukturális egyenleteken alapuló módszerekkel (SEM) igazolhatjuk az adatok illeszkedését egydimenziós elméleti modellünkhöz, ami a teszt validitását támasztja alá. A kutatás negyedik fázisa: nagymintás, szimulációs teljesítménymérő teszt A kutatás negyedik fázisában a harmadik fázis empirikus eredményeire építve véglegesítettük a tág életkori intervallumban, közoktatási keretek között alkalmazható, a hatékony információkeresés mérésére számítógépes, szimulált környezetben kidolgozott tesztet. A teszt mind a tanuló, mind a pedagógus számára azonnali visszajelzést biztosít a tanulók teljesítményéről a tanulói információkeresés mint IKT műveltség komponense terén. A teszt megbízhatósági mutatói mellett vizsgálni kívántuk a tesztben szereplő feladatok nehézségi indexeinek eloszlását, valamint az adatok elméleti modellünkhöz való illeszkedését. Az elemzések mögött húzódó, tesztfejlesztésen túlmutató fő kutatási kérdések a következőek voltak: más képességeket mozgósít-e a könnyebben (egy-két kattintással), illetve a nehezebben 8
hozzáférhető (több weblapon több kattintással megszerezhető információk esetleges összehasonlításával kinyerhető), komplex információk elérését kívánó keresések; hogyan jellemezhető a 6-11. évfolyamos tanulók vonatkozó képességfejlődése; mely háttérváltozók (pl.: nem, iskolatípus) van hatással a képesség fejlettségi szintjére. Hipotéziseink szerint: (H4.1) Megerősíthetjük, hogy tesztünk harmadik generációs, azonnali visszajelzést nyújtó, online teljesítménymérő teszt, amely megbízhatóan méri a 6-11. évfolyamos tanulók böngészési tevékenységének információkeresési hatékonyságát. (H4.2) Az itemnehézségek a különböző évfolyamos tanulók képességszintjének megfelelőek. (H4.3) Valószínűsíthető, hogy az IKT műveltség információhoz való hozzáférés komponense nem egy, hanem kétdimenziós modellel írható le, amelyen belül az elsődleges, rövid keresési útvonallal rendelkező információk más képességek működését feltételezik, mint a hosszabb keresési útvonallal rendelkező, komplexebb módon (például több információ összehasonlításával) hozzáférhető információk. (H4.4) Jelentős fejlődés figyelhető meg a 6. és 11. évfolyam között. (H4.5) A sikeres online információkereséshez szükséges képesség fejlődése más képességek fejlődéséhez hasonlóan leírható egy logisztikus görbével (H4.6) Az évfolyamokon belül is jelentős képességszintbeli különbségek figyelhetők meg. (H4.7) A magabiztos és hatékony online információkereséshez szükséges képességek terén a lányok előnye valószínűsíthető. (H4.8) Az iskolatípusok közötti teljesítménykülönbségek feltételezhetők. (H4.9) Szignifikáns összefüggések feltételezhetők a tanulók informatika tantárgyból szerzett osztályzata és a teszten mutatott teljesítményük között. (4.10) További összefüggések feltételezhetők a tanulók teszteredménye mint függő változó és a kérdőívre adott válaszaik mint független változók között. 9
MÓDSZEREK A kutatás negyedik fázisában zajlott nagymintás vizsgálatot (N 4 =10 064) három kismintás mérés előzte meg (N 1 =65, N 2 =106 and N 3 =94). A harmadikgenerációs feladatokat tartalmazó tesztfejlesztés mellett a kutatás célja az 5-11. évfolyamos tanulók IKT műveltsége információhoz való hozzáférés komponense terén mutatott fejlődésének és az azt befolyásoló háttérváltozók feltérképezése volt. A kutatás egymásra épülő, különböző fázisaiban fokozaton növeltük a bevont évfolyamok körét. Az első fázisban 7. és 10., a másodikban 5., 8. és 10., a harmadikban 5., 6. 8. és 10., a negyedik fázisban 5-11. évfolyamos tanulók alkották a mintát. A nemek aránya az első pilot vizsgálat kivételével ahol a fiúk lényegesen felülreprezentáltak voltak 61%-ukkal kiegyensúlyozott volt, a fiúk aránya fázisonként 46%, 52%, illetve 48% volt. Mérőeszközeink mindegyike saját fejlesztésű, ennek következtében mindegyik fázisban kettős szerepet töltöttek be egyszerre: a cél és eszköz szerepét. Célunk volt az IKT műveltség főként annak legjelentősebb, hozzáférés komponense területén való tanulói magabiztosság mérése, amelynek érdekében a mérésre alkalmas eszköz kifejlesztését is vállaltuk. Az első fázis önbevallásos, online kérdőíve IKT vonatkozású eszközök használatában és tevékenységek végzésében való magabiztosságra, gyakoriságra, attitűdökre kérdezett rá a demográfiai háttérinformációk mellett. A második fázisban a kérdőív ismételt alkalmazása mellett egy részben imitált, részben szimulált weboldalakat megjelenítő teljesítménymérő teszt létrehozására és kipróbálására került sor. Az imitált oldalak statikusan megjelenített weboldal képernyőképek voltak az edia online platformon (Molnár, Papp, Makay, & Ancsin, 2015a) belül, amelyek azonban interaktivitást is lehetővé tettek bizonyos akció gombok beiktatásával, melyekre kattintva a tanuló változást idézhetett elő a megjelenített tartalomban, például az imitált weboldal újabb lapját jeleníthette meg. Ezzel szemben, a szimulált weboldalak működése megegyezett a valódi internetes oldalak működésével. Menüik és almenüik rendszerén belül a tartalmak a weboldalakon szokásos szöveges, képi, táblázatos, grafikonos, ábrákkal kiegészített megoldásokon keresztül jelentek meg, ahol a tanulók a mérőeszköz platformjáról kilépve szabadon navigálhattak az információ elérése céljából. Az információt megtalálva, a mérőeszköz feladataihoz visszalépve adhatták meg válaszaikat. Tematikailag a célkorosztály számára a mindennapi életből ismert élethelyzetekbe 10
ágyazva jelentek meg a feladatok, például hajzselé választása, iskolai programhoz dekorációs anyagok vásárlása, prezentáció kivetítése, illetve információ kinyomtatása, családi programhoz információ (ár, nyitva tartás) keresése. A harmadik fázisban az előző szakasz teljesítménymérő tesztje legautentikusabb, szimuláción alapuló feladatainak weboldalait felhasználva, azokra újabb, egységes itemeket fejlesztve, ugyanakkor a mérés fókuszát minden item esetében szigorúan az IKT műveltség hozzáférés komponensére szűkítve léptünk tovább a harmadik generációs, IKT-műveltséget illetve annak egy komponensét feltérképező, nagyobb belső konzisztenciájú teljesítménymérés irányába. Ennek során megtörtént a szimulált weboldalak teljes mértékű beágyazása is az edia online platformba, ami a korábbi fázisban alkalmazott megoldással szemben formailag is teljesen egységes keretrendszert biztosított, valamint lehetővé tette a tanulók minden egyes, a szimulált weboldalakon navigálás közben tett lépésének rögzítését. Ez annak volt köszönhető, hogy a tanulóknak már nem kellett elhagyniuk a mérőeszköz felületét a szimulált weboldalakon való navigáláshoz. A négy tematikai szálat a tanulók érdeklődési körének várhatóan megfelelő négy szimulált honlap (dekorációs stúdió, ejtőernyős egyesület, élményfürdő és kalandpark, hazai sípályák) témája jelentette. A negyedik fázisban alkalmazott mérőeszköz nagymértékben megegyezett a korábbi fázisban alkalmazottal. A különbséget az jelentette, hogy a tesztfejlesztésre vonatkozó elemzések hatására a nem megfelelőnek bizonyult itemek a tesztből törlésre kerültek. Az eljárások tekintetében mind a négy fázis közös vonása, hogy az adatgyűjtéshez használt, lineáris szerkezetű tesztek, illetve a kérdőív, online kerültek kiközvetítésre (a három teszt az edia online platformon), és a tanulók egy adott kód segítségével férhettek hozzá az iskolai számítógépeket használva. Elemzések terén az első fázisban alkalmazott leíró statisztika és a matematikai statisztikai (Mann-Whitney Test, ANOVA) módszerekhez járult a második és negyedik fázisban a valószínűségi tesztelmélet, a harmadik és negyedik fázisban a strukturális egyenleteken alapuló módszerek. FŐBB EREDMÉNYEK Az első kutatási fázis 1.1. hipotézise beigazolódott. A tanulók mintegy 80%-a teljesen 11
magabiztosnak érezte magát a közösségi oldalakon való információkeresésben és eligazodásban, 70%-uk bevallottan heti többszöri alkalommal látogatja azokat. A 1.2. hipotézis a tekintetben megerősítésre került, hogy nagyobb számban vallották magukat teljesen biztosnak a tanulók a képi információk dekódolásában (60%), mint a nyomtatott szöveges információk értelmezésében (56,9%). A 1.3. hipotézis beigazolódott: a 7. évfolyamos tanulók gyakrabban játszanak számítógépes játékokat, mint a 10. évfolyamosok, akik azonban gyakrabban tevékenykednek közösségi oldalakon. A 1.4. hipotézis egyrészt a lányok nagyobb gépelési magabiztosságára vonatkozott a fiúkéval szemben, amit a vizsgálatok megerősítettek (Z= -2,29; p<0,01). Ezzel szemben a fiúk technológia játék célú alkalmazásában feltételezett nagyobb magabiztossága nem igazolódott, javukra különbség az online számítógépes játékok gyakoriságában mutatkozott (Z=- 4,11; p<0,01). További nemek közötti különbség mutatkozott az olvasási tevékenységekben: a lányok gyakoribb blogolvasóknak mutatkoztak, mint a fiúk (Z=-3,14; p<0,01). Az 1.5. hipotézis szerint az alacsonyabb évfolyamosoknak és a lányoknak köszönhetően jelentős számban várhatóak a számítógép- és internethasználat iránti kevésbé pozitív attitűddel rendelkező tanulók, és nagyobb számban lesznek azok, akik tartanak az internethasználat negatív következményeitől. Ez a feltételezés megerősítést nyert: a tanulók közel 85%-a számolt be negatív tapasztalatokról e téren, és jelentős számban nyilatkoztak úgy, hogy néha vagy ha nem is rendszeresen, de alkalmanként ( nem igazán ) tartanak a negatív következményektől. A 1.6. hipotézis a kérdőív mint mérőeszköz megbízhatóságára vonatkozott, amelyet beigazoltnak tekinthetünk (Cronbach α= 0,85). A második kutatási fázis 2.1. hipotézise részben nyert megerősítést. Feltevésünk szerint a feladatonkénti tanulói átlageredmények által tükrözött növekvő feladatnehézségi sorrend 70 %- ban megegyezik a feladatok tesztbeli sorrendjével. A feladatnehézségi sorrend kevesebb, mint 70%-ban egyezett meg a tanulói átlageredmények szerinti sorrenddel, ugyanakkor a teszt összeállításakor könnyűnek, illetve nehéznek ítélt feladatok többsége a feladatonkénti átlageredmények alapján is a teszt elején, illetve végén helyezkedett el (a legalacsonyabb átlagteljesítményt a 8. és 11-14. feladatokban, a teszt második felében értek el a tanulók). Következtetésünk szerint a feladatnehézségre vonatkozó sorrend iránya jó volt. A valószínűségi tesztelmélet függvényeivel történt itemanalízis eredménye alapján az itemnehézségi indexek szerint az itemnehézség nagyrészt megegyezett azzal, amit a feladatonkénti átlageredmények 12
mutattak. Azonban a teszt végén némely feladat több itemet is tartalmazott, ezért a feladatok nehézségi sorrendje nem azonosítható az itemnehézségi sorrenddel a teszt végi feladatok esetében. A 2.2. hipotézis részben igazolódott: a feladatteljesítés és az időráfordítás között feltételezett kapcsolat a három vizsgált évfolyamból kettőben bebizonyosodott. Az átlag feladatidő és az átlageredmények között szignifikáns kapcsolatot volt megállapítható. A 8. (r=0,775; p<0,01) és az 5. évfolyam esetében. Az 5. évfolyamon negatív korrelációt (r=-0,269; p<0,05) detektáltunk. Ennek oka lehet az alacsonyabb évfolyam esetében a gyakorlottág alacsonyabb fokából adódó bizonytalanság vagy a felső tagozatba lépés okozta teljesítménykényszer miatti nagyobb időráfordítás, ami a bizonytalanabb vagy teljesítmény-orientáltabb tanulók nagyobb igénybevételét és végső soron gyengébb eredményét jelenthette. Ennek felderítése további kutatásokat igényel. 2.3. igazolt hipotézisünk az IKT műveltség hozzáférés komponensének 45 perc alatti mérhetőségére vonatkozott. Az átlag időráfordítás 10 perc körül, a leghosszabb tesztben töltött idő 25 perc volt. 2.4. hipotézisünk a teszt megbízhatóságára és érvényességére vonatkozott, ami részben nyert megerősítést. A kérdőív reliabilitása magas volt (Cronbach α= 0,91). A teljesítményteszt reliabilitása a tesztfejlesztésre vonatkozó elemzések alapján helytelen működés miatt kiszűrt itemek pl.: amelyek diszkriminációs indexe 0,2 alatti volt utáni 16 itemre a várakozáshoz képest alacsonyabb, de az alacsonyabb mintaelemszám miatt elfogadható (Cronbach α=0,74) volt. A törlésre került itemek főbb jellemzője, hogy alacsony point biserial értékkel is rendelkeztek amely a tanulók teljes teszteredménye és az itemen elért eredménye közti korrelációt mutatja, és az ezen itemeken helyes választ adó tanulók WLE Avg. indexe (képességparaméter átlaga) is alig különbözött a helytelen választ adókétól. Mindez az itemek nem jó, várt és elvárt működésére utal. További itemek létrehozásával, illetve a meglévők továbbfejlesztésével növelhető a teszt belső konzisztenciája. A konstruktumvaliditást a konvergens és diszkrimináns validitás igazolásával nem tudtuk megerősíteni, mivel nem tudtunk kimutatni minden elvárt esetben a teszt és a kérdőív azonos területre vonatkozó válaszai között korrelációkat. Azonban a 2.8. hipotézisnél feltételezett modellilleszkedés igazolására alkalmazott konfirmatív faktoranalízissel empirikusan igazoltuk a modellilleszkedést. Ezáltal a konstruktumról alkotott előzetes elképzeléseinkkel konzisztensnek bizonyult a konstruktum. Előzetes hipotézisünket részben igazoltnak tekinthetjük. A nemek és évfolyamok közötti IKT műveltségi 13
teljesítménykülönbségekre vonatkozó, 2.5. hipotézisünk részben igazolást nyert. A lányok átlageredménye a feladatok többségében jobb volt, mint a fiúké, azonban nem volt kimutatható szignifikáns különbség. A rutin információkeresési feladatokban a vizsgált évfolyamok közt kevés különbség volt kimutatható. A 2.6. hipotézisünket az itemek diszkriminációs ereje tekintetében igazoltnak tekinthetjük: a teszt 16 kiválasztott itemének mindegyike a megfelelő 0,2-es diszkriminációs paramétert elérte, az itemek túlnyomó többsége (14 a 16-ból) a mérsékelten diszkrimináló jelzővel volt jellemezhető. A 2.7. Hipotézisben azt a feltevést fogalmaztuk meg, hogy az itemek lefedik a tanulók képességskáláját. A személy-item térképek tanúsága szerint, a -3 és +3 közötti képességskálából a -2 és +2 logit közötti képesség intervallumot fedték le az itemek. Ennek következtében a hipotézisünk részben igazolódott. További itemek fejlesztése vált szükségessé a magasabb és alacsonyabb képességszintek lefedéséhez. A jó modellilleszkedésre vonatkozó, 2.8. hipotézisünk beigazolódott: a MNSQ illeszkedésindex minden item esetében a konfidencia intervallumon belül volt, valamint az alacsony mintaelemszám miatti 0,8 és 1,2 közötti várható értékek között mozgott. A harmadik kutatási fázis 3.1. hipotézise, amely szerint a továbbfejlesztett, egységesített teszt belső konzisztenciája nagyobb lesz a korábbi teszténél, igazolást nyert. Ismételten az itemtotal korrelációs analízis elvégzésével a 61 új item 45-re szűkítésével a reliabilitásmutató magas lett (Chronbach α= 0,92). A 3.2. hipotézisben valószínűsített időszükséglet részben igazolódott. A feltevés szerint kétszer 45 perces időintervallum elegendő a teljes (teljesítménytesztet és háttérkérdőívet magába foglaló) mérés elvégzéséhez valamennyi évfolyamon. Összességében a tanulók 90 %-a kevesebb, mint 90 percet töltött a 61 itemet tartalmazó, teljes tesztben történő válaszadással. Ez megerősíti a feltevést, hogy az IKT műveltség hozzáférés komponensét, azaz a hatékony és magabiztos információkeresést a fejlesztés során kialakított autentikus teljesítménymérő teszttel 45 perces tanóra időtartamában, a hozzá tartozó kérdőívvel együtt kétszer 45 perc időtartamban lehetséges mérni a vizsgált korosztályban. A 3.3. hipotézis, amely a magasabb évfolyamos tanulók előnyét feltételezte a teljesítmények terén az alacsonyabb évfolyamosokéval szemben, beigazolódott. A 6. évfolyamosok átlageredménye 41%, a 11. évfolyamosoké 72% volt. Feltehetően a hatodik és 11. évfolyam között jelentős fejlődés ment végbe azon képességek terén, melyek az IKT műveltségen belüli hatékony információkeresést 14
lehetővé teszik a vizsgált minta vonatkozásában. A 3.4. hipotézis a tesztidőszükséglet tekintetében (a teljes teszt esetén) a magasabb évfolyamosoknál várható előnyt fogalmazta meg, amely valósnak bizonyult. A magasabb évfolyamos tanulók többsége rövidebb idő alatt teljesítette a tesztet. A feladatokra fordított átlagidő az évfolyamok között 72 és 88 perc között mozgott. A kutatásnak ebben a fázisában, az 3.5. hipotézisben azt feltételeztük, hogy a strukturális egyenleteken alapuló vizsgálattal az egydimenziós modellünk igazolást nyer, ami megvalósult: RMSEA 0,028 (C. I. 0,001, 0,040; valószínűségi RMSEA<= 0,05; CFI 0,970; TLI 0,969). A kutatás negyedik fázisában, a nagymintás mérésünket megelőzően megfogalmazott 4.1. hipotézisünk, amely a pilotvizsgálat eredményének megerősítésére vonatkozott az autentikus, harmadik generációs, 6-11. évfolyam mérésére alkalmazható IKT műveltségi mérőeszköz megbízhatósága terén, beigazolódott. A teljes teszt reliabilitásmutatója Cronbach α= 0,94 volt 51%-os tanulói átlageredménnyel (SD= 19,8% pont). Minden évfolyamon megbízhatónak bizonyult a teszt (Cronbach α= 0,8 és 0,9 között), és képességük szerint diszkriminálta a tanulókat, amit az átlageredmények és a szórás mutattak. A 4.2. az itemnehézségek adott képességszinteknek való megfelelésére vonatkozó hipotézisünk részben igazolást nyert. Összességében a teszt a vizsgált évfolyamok által behatárolt korosztály számára az itemnehézségi skála tekintetében megfelelő itemeket tartalmazott. Esetleges továbbfejlesztéskor a képességskála egyenletesebb lefedésére kell törekedni az adott évfolyamokon meghatározott képességszinteknek megfelelően biztosítandó további itemekkel, figyelembe véve az évfolyamok közötti detektált jelentős képességszintbeli különbségeket (χ 2 =33353,63; df=5, p<0,001). A kutatásnak ebben a fázisában újra megvizsgáltuk a modell dimenzionalitását, feltételezve (4.3. hipotézis), hogy az IKT műveltség hozzáférés komponense mégsem egy, hanem kétdimenziós: a rövid keresési útvonalon, 1-2 kattintással elérhető, elsődleges információk eléréséhez más képességek mozgósítását feltételeztük, mint a bonyolultabb keresési útvonalon, több kattintással elérhető, komplexebb, esetleg származtatott információk eléréséhez. A dimenzionalitás-vizsgálat során az adatok mind az egy- (CFI=0,936, TLI=0,933, RMSEA=0,037), mind a kétdimenziós (CFI=0,939, TLI=0,935, RMSEA=0,037) elméleti modellhez jól illeszkedtek. Ezt követően a speciális, egymásba ágyazott modellek esetében alkalmazott c2 teszt elvégzése a kétdimenziós modell-illeszkedést szignifikánsan jobbnak mutatta (Tongori & Molnár, 2018). A 4.4. hipotézis szerint jelentős mértékű 15
fejlődés valószínűsíthető a 6-11. évfolyam között, amely feltételezés beigazolódott. A képességszintek évente egyharmad szórásnyit növekedtek, ami gyorsabb fejlődés, mint más, az iskolában explicit módon nem fejlesztett képességek esetben (Molnár et al., 2013). A legjelentősebb (az éves fejlődés kétszeresével egyenértékű, 12,4% pontnyi) fejlődés a 8. és 9. évfolyam közötti időre esik, amit a fejlődést ábrázoló görbe inflexiós pontja mutat (8.84). Az átlagteljesítmény 6. évfolyamon 41%, 11. évfolyamon 72%. Az 4.5. hipotézisben azt feltételezzük, hogy az IKT műveltség hozzáférés komponens területén való fejlődés más képességek fejlődéséhez hasonlóan leírható egy logisztikus görbével. A négy paraméteres logisztikus görbe megfelelően illeszkedett az empirikus adatokra, és jól ábrázolta az információhoz való hozzáféréshez szükséges képesség fejlődését. Ez igazolta hipotézisünket. A 4.6. hipotézis az évfolyamokon belüli jelentős képességbeli eltérésekre vonatkozott, amely feltevés szintén beigazolódott. A tapasztalt képességszintbeli különbség mértéke több évnyivel volt egyenértékű. A 4.7. hipotézis szerint szignifikánsan jobb teljesítményt vártunk a lányoktól a magabiztos és hatékony információkeresés terén, mint a fiúktól. A teljes minta vonatkozásában a lányok szignifikánsan jobb eredményt értek el, mint a fiúk (M_lány=53,97, SD_lány=19,58, M_fiú=48,71, SD_fiú=20,20; t=-13,19, p<0,001). A fiúk eredményeiben nagyobb volt a szórás. A 4.8. hipotézisben azt fogalmaztuk meg, hogy a különböző iskolatípusok tanulóinak képességszintre visszavezethető teljesítménye eltéréseket fog mutatni. Erről közvetett megerősítést nyújtott, hogy a 9-10. évfolyam közötti szokatlan változásra a gimnáziumi részmintában nem találtunk magyarázatot, ezeken az évfolyamokon a gimnáziumi tanulók eredményeiben nem volt kimutatható szignifikáns eltérés (t=0,517, p>0,05). A szakgimnáziumi azonos évfolyamok közötti képességszintbeli eltérésre volt visszavezethető a teljes mintában detektálható változás. A háttérváltozók és a teljesítményteszten elért eredmények közötti kapcsolatokat vizsgálva a 4.9. hipotézisben a tanulók informatika osztályzata és az IKT műveltségi teszten elért eredménye között feltételeztünk kapcsolatot, ami beigazolódott: Az informatika osztályzat szignifikánsan (p<0,001) korrelált az IKT teszteredményekkel. A kérdőívre adott további válaszok és a teszteredmények kapcsolatára vonatkozó 4.10. hipotézis vizsgálatára regresszióanalízist végeztünk. Azonos változók magyarázzák az összes ismert hatást 6-8. évfolyamokon, az utóbbin a legerőteljesebben (31.5%-ot). Az IKT műveltség információkeresési komponense területén való sikeresség legjelentősebb előrejelzőinek 16
a különféle források olvasása terén való magabiztosság, a menükezelési magabiztosság, magabiztosság a források értékelése terén a célnak megfelelőség szempontjából és az online közegben való biztonságérzet. ÖSSZEFOGLALÁS A technológiai fejlődés, és ennek következtében a digitális műveltség szükségessége az oktatás számára is új kihívásokat jelentett, amelyekre az a 21. századi készségek, képességek definiálásával, valamint újszerű, fejlesztésére, mérés-értékelése alkalmas módszerekkel és eszközökkel válaszolt. Definíció tekintetében a terminológiai változatosság mellett a 21. századi új műveltség magába foglalja a digitális, és ezen belül az IKT műveltséget, amely az alapvető írni, olvasni, számolni tudás és gondolkodási képességekre épülő, az információkezelés lépéseinek megfelelő komponenseket (meghatározás, hozzáférés, kezelés, integrálás, értékelés, létrehozás, kommunikáció), technológiai, szociális, felelősségteljes használati, és kognitív aspektusokat tartalmazó konstruktum. A mérőeszközök tekintetében a technológia-, illetve számítógép-alapúak, ezen belül a harmadik generációs, valódi szoftverek szimulációját alkalmazók bizonyultak a legautentikusabbnak az IKT konstruktum és annak információkeresési komponense mérésére. Információs társadalmunkban a 21. századi műveltség megszerzése, fenntartása, az élethosszig tartó tanulás szempontjából az IKT műveltség legfontosabb komponense az információhoz való hozzáférés. E komponens, másfelől megközelítve a digitális információkeresés, önmagában is számos kutatás fókuszában áll. Ezen kutatások egymással szintén szoros kapcsolatba állítják az információkezelés lépéseinek megfelelő IKT műveltségi komponenseket. Nemzetközi kontextusban ma már az oktatási vonatkozású tanulói IKT műveltségi jellemzően a teljes IKT műveltségi konstruktumra vonatkozó méréseket szimuláción alapuló feladatok széleskörű alkalmazásával végzik. A szimuláció ez esetben azt jelenti, hogy a létező szoftver alkalmazásokkal azonos működésű, azokhoz hasonló jellegű, de egyedi, adatgyűjtésre és rögzítésre alkalmas mérőeszközbe ágyazott szoftverekkel, a mérendő konstruktum szempontjából a lehető legautentikusabb felületeken és módon tesztelik a tanulók IKT műveltségét. Az oktatási vonatkozású méréseket lebonyolító legjelentősebb központok az 5-10. évfolyamos korosztály mérése során az IKT műveltség terén a legnagyobb fejlődést a 8-10. 17
évfolyam közötti időszakra állapítják meg. Több mérés közös konklúziója, hogy összességében a lányok jobb eredményt érnek el, valamint, hogy az IKT alkalmazási gyakoriság nem feltétlenül jár együtt a magasabb IKT műveltségi eredménnyel. Mindezek az eredmények az oktatás számára üzenetet hordoznak a fejlesztendő műveltségterületek és a célcsoportok tekintetében. Ezért állítottuk kutatásunk középpontjába az 5-11. évfolyamos tanulók IKT műveltsége információkeresési komponensének mérését. Összességében, valamennyi megfogalmazott hipotézisünk empirikus úton bizonyítható és szakirodalmi beágyazottságát tekintve megalapozott célkitűzéseinknek és feltételezéseinknek köszönhetően legalább részben (huszonnyolc hipotézisünkből tizennyolc esetében teljes mértékben) beigazolódott. Az eredmény egy érvényes, megbízható, autentikus, szimuláción alapuló, harmadik generációs, hazai fejlesztésű mérőeszköz, amely alkalmas az IKT műveltség legalapvetőbb komponensének, az információhoz való hozzáférésnek 6-11. évfolyamos tanulók körében, a hazai tanórai keretben való feltérképezésére. A kutatás egyedisége, hogy hazai viszonylatban korábban nem történt meg közoktatási kontextusban ilyen széles életkori spektrumot magába foglaló csoport IKT műveltségének, illetve az azon belüli információkeresési magabiztosságának feltérképezésére alkalmas, szimulációs teljesítménymérő eszköz létrehozása, illetve azzal való nagymintás mérése. A hazai mérés a nemzetközi viszonylatú mérésekkel összhangban (5-10. évfolyam között), de azon túlmutatóan (8-9. évfolyam közötti időszakra) állapította meg a mért terület vonatkozásában a képességfejlődés legintenzívebb időszakát, illetve a képességekben bekövetkező legnagyobb változás időszakát. A mért IKT komponens tekintetében a kutatás további egyedisége, hogy empirikus úton igazolta, hogy kétdimenziós modellel jellemezhető az információhoz való hatékony és magabiztos hozzáférés. Más képességek működtetése szükséges a rövid keresési útvonalon, 1-2 kattintással, könnyebben elérhető, elsődleges információk eléréséhez, mint a nehezebben hozzáférhető (például több weblapon több kattintással megszerezhető információk esetleges összehasonlításával kinyerhető), komplex (esetleg származtatott) információk elérése. Kutatásunk jelentősége továbbá, hogy a pedagógusok a mérés tárgya jellegének megfelelő autentikus közegben végzett teszt által egyértelmű képet kaphatnak arról, milyen diákjaik fejlettségi szintje ezen, a 21. században kulcsfontosságúnak tartott képességnek a terén. 18
A kutatási eredmények általánosíthatóságának korlátja, hogy mintavételkor a rendelkezésre álló, illetve az arra vállalkozó iskolák tanulói kerültek be a kutatásba. Ennek következtében a mintavételi keret a minta tízezres nagyságrendje ellenére nem volt reprezentatív a régióra, az iskolatípusra, évfolyamra, nemre vonatkozóan. További korlátnak tekinthető, hogy vizsgálatunk az IKT műveltség hét komponenséből mindössze egyre, az online információhoz való, keresési tevékenység általi hozzáférés hatékonyságra irányult, nem a tanulók IKT műveltsége egészének feltérképezésére az adott évfolyamokon. IRODALOM Abonyi-Tóth, A., & Turcsányi-Szabó, M. (Eds., 2015). A mobiltechnológiával támogatott tanulás és tanítás módszerei. Budapest: Educatio Társadalmi Szolgáltató Nonprofit Kft. American Library association. (2000). Information Literacy Competency Standards for Higher Education. Retrieved from http://www.ala.org/template.cfm?section=home&template=/contentmanagement/cont entdisplay.cfm&contentid=33553 Aoyama, I., Barnard-Brak, L., & Talbert, T. L. (2011): Cyberbullying among high school students: Cluster analysis of sex and age differences and the level of parental monitoring. International Journal of Cyber Behavior, Psychology and Learning, 1(1), 1 11. doi: 10.4018/ijcbpl.2011010103 Association of College and Research Libraries. (2016). Framework for Information Literacy for Higher Education. Association of College and Research Libraries. Retrieved from http://www.ala.org/acrl/sites/ala.org.acrl/files/content/issues/infolit/framework_ilhe.pd f Australian Curriculum, Assessment and Reporting Authority (ACARA) (2012). National assessment program ICT literacy years 6 & 10 report. Sydney: Australian Curriculum, Assessment and Reporting Authority. Retrieved from http://www.nap.edu.au/_resources/nap_ictl_2011_public_report_final.pdf Australian Curriculum, Assessment and Reporting Authority [ACARA] (2015). National Assessment Program ICT Literacy Years 6 & 10 Report 2014. Sydney: Australian Curriculum, Assessment and Reporting Authority. Retrieved from https://www.nap.edu.au/_resources/d15_8761 NAP-ICT_2014_Public_Report_Final.pdf Bawden, D. (2008). Origins and concepts of digital literacy. In: Lankshear, C. & Knobel, M. (Eds.), Digital literacies: concepts, policies and practices (pp. 17 32). New York. NY: Peter Lang. Binkley, M., Erstad, O., Herman, J., Raizen, S., Ripley, M. & Rumble, M. (2010). ATC 21. Assessment and teaching of 21 st century skills. Draft White Paper 1. Defining 21 st century skills. Melbourne: The University of Melbourne. 19
Commission of the European Countries (2005). Proposal for a recommendation of the European Parliament and of the Council on key competences for lifelong learning. Brussels: Commission of the European Communities. Retrieved from http://www.europarl.europa.eu/meetdocs/2004_2009/documents/com/com_com(2005) 0548_/com_com(2005)0548_en.pdf on 21.01.2017 Czirfusz, D., Habók, L., Lévai, D., & Papp-Danka, A. (2015). Digitális állampolgárság kutatás 2014. Digitális részkompetenciák vizsgálata a tanfelügyeleti és pedagógusminősítési szakértők körében. Budapest: Oktatási Hivatal. Retrieved from: http://www.oktatas.hu/pub_bin/dload/unios_projektek/tamop315/dak_tanulmanykotet _T315.pdf Csapó, B. (2008). A tanulás dimenziói és a tudás szerveződése. Educatio. 2, 207 217. Csapó, B., Ainley, J., Bennet, R.E., Latour, T., & Law, N. (2012). Technological issues for computerbased assessment. In P. Griffin. B. McGaw. & E. Care (Eds.), Assessment and teaching of 21st Century skills (pp. 143 230). Dordrecht Heidelberg London New York: Springer Science + Business Media B.V. Csapó, B., Molnár, G., & R. Tóth, K. (2008). A papíralapú tesztektől a számítógépes adaptív tesztelésig. Iskolakultúra, 3(4), 3 16. Eurydice (2002). Key competences: A developing concept in general compulsory education. Brussels: Eurydice. Fraillon, J., Schulz, W., Gebhardt, E. and Ainley, J. (2015). National Assessment Program: ICT Literacy Years 6 & 10 Report 2014. Sydney NSW: Australian Curriculum, Assessment and Reporting Authority (ACARA). Retrieved from http://www.nap.edu.au/_resources/d15_8761 NAP-ICT_2014_Public_Report_Final.pdf Fu, J., Zapata, D. And Mavronikolas, E. (2014). Statistical Methods for Assessments in Simulations and Serious Games. ETS Research Report. Series ISSN 2330-8516 Princeton, NJ: Educational Testing Service. Retrieved from https://files.eric.ed.gov/fulltext/ej1109282.pdf Greenhow, C., & Robelia, B. (2009). Old communication, new literacies: Social network sites as social learning resources. Journal of Computer-Mediated Communication, 14, 1130 1161. doi: 10.1111/j.1083-6101.2009.01484.x Griffin, P., McGaw, B., & Care, E. (2012). The changing role of education and schools. In Griffin, P., McGaw, B., & Care. E. (Eds.), Assessment and teaching 21st century skills (pp 1 16). Dordrecht, Heidelberg, London, New York: Springer. The International Computer and Information Literacy Study (ICILS). Main findings and implications for education policies in Europe (2014). European Commission. Retrieved from http://ec.europa.eu/dgs/education_culture/repository/education/library/study/2014/ecicils_en.pdf Karakoyun, F., & Kuzu, A. (2013). Examining digital storytelling in terms of the 21st century skills development. Singapore: Technology-enhanced Learning (TeL2013). Retrieved from 20
http://www.cdtl.nus.edu.sg/tel2013/abstracts/track%204- Technologies%20&%20Strategies%20for%20the%2021st%20Century%20Digital%20Learn er/4-feritkarakoyun.pdf Katz, I. R., & Macklin, A. S. (2007). Information and communication technology (ICT) literacy: Integration and assessment in higher education. Systemics Cybernetics and Informatics, 5(4), 50 55. Koltay, T. (2010). Az új média és az írástudás új formái. Magyar Pedagógia, 110(4), 301 309. Kondor, Zs. (2003). A kultúra fogalmának változása Cicerótól Carey-ig. In Nyíri, K. & Kovács G. (Eds.), Virtuális egyetem Magyarországon (pp. 337 344). Budapest: Typotex. Lanszki, A., & Papp-Danka, A. (2017). Digitális történetmesélés alkalmazása természettudományos témájú tantárgyi tartalmak feldolgozásában. Neveléstudomány: Oktatás kutatás - innováció, 5(2), 26 44. doi: 10.21549/NTNY.18.2017.2.3 Law, N., Lee, Y., & Yuen, H. K. (2009). The impact of ICT in education policies on teacher practices and student outcomes in Hong Kong. In Scheuermann, F. & Pedro, F. (Eds.), Assessing the effects of ICT in education (pp. 143 164). Luxembourg: The European Commission Publication. doi: 10.2788/27419 Leu, D. J., Kinzer, C. K., Coiro, J., Castek, J., & Henry, L. A. (2017). New Literacies: A Dual-Level Theory of the Changing Nature of Literacy, Instruction, and Assessment. Journal of Education, 197(2), 1 18. [PDF document]. Retrieved from http://journals.sagepub.com/doi/pdf/10.1177/002205741719700202 Metzger, M. J., & Flanagin, A. J. (2013). Credibility and trust of information in online environments: The use of cognitive heuristics. Journal of Pragmatics 59(2013), 210 220 Molnár, G. (2011). Az információs-kommunikációs technológiák hatása a tanulásra és az oktatásra. Magyar Tudomány, 172(9), 1038 1047. Molnár, G., & Csapó, B. (2013). Az edia online diagnosztikus mérési rendszer. XI. Pedagógiai Értékelési Konferencia, Szeged, 2013.04.11-13. 82. Molnár, G., Greiff, S., Wüstenberg, S., & Fischer, A. (2017). Empirical study of computer-based assessment of domain-general dynamic problem solving skills. In Csapó, B. & Funke, J. (Eds.), The nature of problem solving (pp. 123 143). Paris: OECD. doi: 10.1787/9789264273955-en Molnár, G., Papp, Z., Makay, G., & Ancsin, G. (2015a). edia 2.3 Online mérési platform feladatfelviteli kézikönyv. Szeged: SZTE Oktatáselméleti Kutatócsoport. Molnár, G., Tongori, Á., & Pluhár, Zs. (2015). Az informatikai műveltség online mérése. In Csapó, B. & Zsolnai, A. (Eds.), Online diagnosztikus mérések az iskola kezdő szakaszában (pp. 295 317). Budapest: Oktatáskutató és Fejlesztő Intézet. National Assessment Governing Board (NAGB) (2013). Technology and engineering literacy framework for the 2014 national assessment of educational progress. Washington DC: National Assessment Governing Board. Retrieved from http://files.eric.ed.gov/fulltext/ed563947.pdf 21
The Nation s Report Card. (n.d.). 2014 Technology and Engineering Literacy (TEL). Overall Results. Retrieved from https://www.nationsreportcard.gov/tel_2014/#results/overall Nelliyullathil, M. (2013). Impact of Credibility Assessment Competency on The Use of Web Information for Academic Research. In: Abdul Azeez T. A. et al. (Eds.), E-Resources and E- Learning: Challenges and Opportunities for Libraries. (pp. 204 211). Kerala, Publication Division University of Calicut. Oktatás és képzés 2010 munkaprogram végrehajtása. B munkacsoport: Kulcskompetenciák. Európai Tanács. 2004. november. (Implementation of Education and training 2010 Work Programme. Working Group B Key Competences. Key Competences for Lifelong Learning. A European Reference Framework. November 2004.) http://www.ofi.hu/tudastar/nemzetkozi-kitekintes/egesz-eleten-at-tarto OECD (2010). PISA 2009 Results: What students know and can do Student performance in reading, mathematics and science (Volume I). Paris: OECD Publishing. doi: 10.1787/9789264091450-en Ollé, J. (2012). Virtuális környezet, virtuális oktatás. Budapest: ELTE Eötvös Kiadó. Partnership for 21 st Century Skills (2008). Overview: Framework for 21 st century learning. Washington DC: Partnership for 21 st Century Skills. Retrieved from http://www.p21.org/overview Pásztor, A. (2014). Lehetőségek és kihívások a digitális játék alapú tanulásban: egy induktív gondolkodást fejlesztő program hatásvizsgálata. Magyar Pedagógia, 114(4), 281 302. R. Tóth, K. & Molnár, G. (2009): A jövő tanárainak IKT ismeretei és elvárásai. Pedagógusképzés, 7(36), 25 41. Szili, K. (2014). Az IKT alkalmazása a gyógypedagógiában. Retrieved from http://www.jgypk.hu/mentorhalo/tananyag/az_ikt_alkalmazasa_a_gyogypedagogiaban_v 2/index.html Tongori, Á. (2012). Az IKT műveltség fogalmi keretének változása. Iskolakultúra, 22(11), 34 47. Tongori, Á. (2016a). Conclusions and results of an item development process concerning ICT literacy. In Molnár, G., & Bús, E. (Eds.), CEA 2016 14th Conference on Educational Assessment Program Abstracts (p. 65). Szeged: University of Szeged. Tongori, Á. & Molnár, G. (2018). Az interneten való böngészés hatékonyságának vizsgálata 6-11. évfolyamos diákok körében. Magyar Pedagógia. In Press. UNESCO (2008). Information for all programme (IFAP): Towards information literacy indicators. Paris: UNESCO. UNESCO & Microsoft (2011). UNESCO ICT competency framework for teachers. Paris: UNESCO. 22