Az életpálya-tanácsadási on-line és off-line szolgáltatások hatékonyság-mérési módszertana a Nemzeti Pályaorientációs Portálon keresztül

TÁMOP 2.2.2-12/1-2012-0001 pályázati azonosítószámú A pályaorientáció rendszerének tartalmi és módszertani fejlesztése című kiemelt projekt Az életpálya-tanácsadási on-line és off-line szolgáltatások hatékonyság-mérési módszertana a Nemzeti Pályaorientációs Portálon keresztül szakmai javaslattétel Pallasz Group Kft. Szerző: Ádám Eszter 2015. 1

Tartalom Bevezetés... 3 A pályaorientáció értelmezése és jelentősége... 4 Pályaorientáció felnőttek száa... 4 Pályaorientáció a közoktatásban... 4 A hatékonyságvizsgálat módszertana...7 A hatékonyságmérés kidolgozásának módszertana... 8 A hatékonyságvizsgálathoz kapcsolódó statisztikai módszerek...11 A hatékonyságmérés során alkalmazott statisztikai módszerekkel szembeni elvárások és ezek érvényesítésének főbb elvei... 11 A kérdőívek kitöltésének motiválása... 22 A regisztráció előmozdítása... 23 A kérdőív-kitöltés népszerűsítése... 24 Összefoglalás... 25 Indikátorok... 26 Irodalomjegyzék...27 Melléklet... 28 2

BEVEZETÉS Az életpálya-tanácsadás hatékonyságmérésének módszertanát feltáró és meghatározó szakmai javaslattétel a Nemzeti Munkaügyi Hivatal (NMH) jogutódjaként a Nemzetgazdasági Minisztérium (NGM) Új Széchenyi Tervhez kapcsolódó TÁMOP 2.2.2-12/1-2012-0001 azonosítószámú, A pályaorientáció rendszerének tartalmi és módszertani fejlesztése című kiemelt projektjén belül valósult meg. A Szellemi Tulajdon Nemzeti KF1300002/3 számú határozata alapján kutatási és fejlesztési szolgáltatásnak minősített feladat, a hazai rendszer eszközfejlesztése, szöveges és filmes foglalkozás-bemutató anyagok tartalmi és formai fejlesztése kapcsán készült. A pályaorientáció értelmezése és jelentősége Az egyén szakmai pályafutása és annak minősége kulcsfontosságú önmaga és a szűkebb/tágabb környezete száa; ugyanis a társadalmi hasznosság mellett nemcsak a megélhetést és az életmódot határozza meg, hanem determinálja az egyéni képességek kibontakoztatásának képességét, az öndefiníció és önbecsülés kialakulását, illetve azok fejlődését. Az egyén sikeres szakmai pályafutásához komplex, a munkaerő világát, a szakmához kapcsolódó pályát és önmaga képességét / tudását / kompetenciáját (önismeret) is egyaránt magában foglaló ismeretekre van szükség. Az egyén elégedettségének, boldogulásának alapfeltétele az egyéni személyiségtulajdonságok alaposabb megismerése, és a szakmai pályafutáshoz szükséges tudás folyamatos fejlesztése. A fentiek minél alaposabb ismeretének tükrében választott szakmai életút, továbbá annak kellő időben, és lehetőség szerinti alapossággal történő korrekciói fejlesztik az egyén munkaerő-piaci rugalmasságát, illetve adaptációs képességét a gazdaság változó igényeihez. Ezek alapján egyfajta összegzésül megállapítható, hogy az életút-támogató pályaorientáció olyan információszolgáltatást, pályatanácsadást és életpálya-építési kompetenciák fejlesztését foglalja magában, mely a képzés-, majd pályaválasztáshoz, az álláskereséshez, a munkába álláshoz, a munkahely megtartásához és az élethosszig tartó tanuláshoz szükséges. Azaz, tartalmazza a pályaorientációhoz kapcsolódó célzott önismeret-fejlesztést, olyan készségek elsajátítását, melyek a munka világának megismerése, még inkább az abban való eligazodás, az álláskereséshez és munkahely-megtartáshoz szükségesek 3

az önismeret és pályák világának összekötését, az egyén önreflexiós képességének fejlesztését, az öndefiníció megformálását, majd folyamatos fejlesztését a saját pályaterv megvalósításához szükséges tanulási utak, képzési lehetőségek megismerését a képzési, munkapiaci, társadalmi információk megszerzését, értelmezését, a döntések előkészítését, a döntést és a változások elviselését lehetővé tevő készségek megszerzését.(borbély- Pecze, 2011) Pályaorientáció felnőttek száa A pályaorientáció folyamatként kell, hogy végigkísérje az egyént az óvodától a nyugdíjba vonulásig. Komplex folyamatként több szinten zajlik: pl. önálló ismeretszerzés, célirányos tájékozódás, irányított tanácsadás vagy akár pszichológussal történő konzultáció szintjei, melyek esetében a szolgáltatást nyújtók, továbbá az iskolák / tanárok és szülők szerepe elvitathatatlan. A felnőtteknek nyújtott szolgáltatások szükségszerűen legfőképp azon átmeneti időszakokra kell, hogy fókuszáljanak, amikor az egyén döntési helyzetben / kényszerben van. Átmenet alatt értjük a munkahelyváltásokat, a pályakorrekciót, a munkakörváltást, a munkatevékenység gazdagítását adott munkahelyen belül, a vállalkozói és alkalmazotti létformák közötti váltásokat, és szempontból ide lehet sorolni az iskola és a munka, vagy az iskolák közötti váltásokat, illetve az iskolán belüli döntési pontokat (pl. csoportválasztás, fakultációk stb.). Ebben az értelemben az életút-támogató pályaorientáció releváns szolgáltatásainak fő irányvonalává a változások megértésének, elviselésének, valamint megfelelő kezelésének biztosítása válik. A jól működő pályaorientáció, mint szolgáltatás, és mint rendszer, segít fenntartani az egyén nyitottságát a változásra, megtanítja akár a változás kezdeményezésére és kezelésére, ezeken keresztül saját pályafutásának irányítására, továbbá a változásokkal járó bizonytalanság elviselésére (Borbély-Pecze, 2011). Pályaorientáció a közoktatásban Az iskolai pályaorientáció feladata az egy-két alkalomra szorítkozó pályaválasztási tanácsadás helyett az aktív felnőttkori pályafutás és munkaerő-paci részvétel megalapozása, továbbá az ehhez szükséges kompetenciák / készségek elsajátításának támogatása. Az egyén közoktatásban kötelező 4

jelleggel eltöltött időszakában, mely gyermekkortól a fiatal felnőttkorig terjed nemcsak az egyéni életpálya indul el, hanem ekkor lehet az életpálya sikeres alakítására való felkészítés érdekében a legtöbbet is tenni. Ennek megfelelően a pályaorientáció az oktatáspolitikában is megjelenik (lásd. Nemzeti Alaptanterv és a Közoktatási Törvény). A Nemzeti Alaptantervben (továbbiakban: NAT) meghatározottak szerint, a pályaorientáció, mint szolgáltatás a következőket jelenti: az iskolának a tanulók életkorához igazodva és a lehetőségekhez képest átfogó képet kell nyújtania a munka világáról. Ennek érdekében olyan feltételeket, tevékenységeket kell biztosítania, amelyek révén a diákok kipróbálhatják képességeiket, elmélyülhetnek az érdeklődésüknek megfelelő területeken, megtalálhatják hivatásukat, kiválaszthatják a nekik megfelelő foglalkozást és pályát, valamint képessé válnak arra, hogy ehhez megtegyék a szükséges erőfeszítéseket. Ezért fejleszteni kell bennük a segítéssel, az együttműködéssel, a vezetéssel és a versengéssel kapcsolatos magatartásmódokat és azok kezelését 1 Bár a jelenleg érvényben lévő NAT korábbi változatai is kiemelten fontos fejlesztési területként definiálták az életút-támogató pályaorientációt, az egyes iskolák nagy részében tanórai keretekben nem igazán foglalkoztak vele 2. A középiskolák között a korábbi világbanki szakközépiskolákat kell jó példaként említeni, ahol szakmacsoportos alapozás keretében nyílt lehetőség egy adott szakmacsoport szakmáival való ismerkedésre, így ehhez kapcsolódva valamilyen szinten pályaorientáció is folyt. A kerettantervek a következőket írták elő tevékenységekre vonatkozólag iskolatípusonkénti bontásban: általános iskola 3 : 8 vagy 18, emelt szinten 20 vagy 37 óra a tanterv típusának függvényében (magában foglalva az üzemlátogatással töltött órákat is!) gimnázium 4 : 9 óra az életpálya-tervezés, munkavállalás, felnőttkori tanulási lehetőségek területre a 11. évfolyamon 1 Nemzeti Alaptanterv; 10/2012. (VI. 4.) Kormányrendelet 2 Meg kell említeni, hogy az általános iskolákban létezett ugyan a Technika, életvitel és gyakorlat tantárgy, ugyanakkor ezeket az órákat rendszerint nem szakemberek tartották, hanem pl. az osztályfőnök. Középiskolai szinten sajnálatos módon egyáltalán nem jelent meg a pályaorientáció, mint rendszeres szolgáltatás, vagy kerettantervi elem 3 http://kerettanterv.ofi.hu/2_melleklet_5-8/index_alt_isk_f elso.html 4 http://kerettanterv.ofi.hu/3_melleklet_9-12/index_4_gimn.html 5

szakközépiskola 5 : a fejlesztési célok között elméletileg itt is szerepelt, ugyanakkor nem volt előírt óraszám vagy tantárgyi időkeret. Ennek következtében nem teljesülhetett a szakképzési törvény azon előírása sem, hogy az iskolai rendszerű oktatásban és szakképzésben tanulók kiskorú tanuló esetén a szülő (gyám) részére egyenlő hozzáférést kell biztosítani az életpályatanácsadási szolgáltatásokhoz. Ennek keretében biztosítani kell, hogy a tanuló az iskolai előmenetele során, a továbbtanulási, iskolaváltási, iskolatípus-váltási, továbbá szakmaválasztási vagy szakmaváltási döntését megelőzően legalább egyszer személyre szabott életpálya-tanácsadási szolgáltatásban részesüljön. szakiskola 6 : az osztályközösség-építés művelődési terület keretében a három év alatt kb. 6-8 óra a munkaerő-piaci ismeretek és az életpálya-építési kompetenciák fejlesztésére tanár / pedagógusképzés: ismeretek a tanárok alapképzésében egyáltalán nem, a pedagógus-továbbképzéseken pedig csak két szakon jelennek meg, nevezetesen: Szent István Egyetem Pályaorientációs tanár szak és ELTE PPK Iskolai konzultáns szak. Így, bár a köznevelési törvény a tanulók pályaválasztásának segítését a tanárok kötelezettségei között sorolja fel, és a tanárok maguk is érzik ennek szükségességét, az iskolákban hiányzik a szükséges szakértelem, eszköztámogatás és időkeret a pályaorientáció, mint szolgáltatás pedig legtöbbször kimerül a felvételi adatlapok kitöltéséhez kapcsolódó segítségnyújtásban, vagy egy-két üzemlátogatásban. Közoktatásról lévén szó, a pályaorientáció, mint szolgáltatás elsődleges célcsoportja mindenképp a tanulói klienscsoport. A másodlagos célcsoport / klienscsoport a pedagógusok és a szülők. Érintettségük okán ők is aktívan érdekeltek abban, hogy szükség esetén, a szolgáltatások minél szélesebb skáláját tudják a tanulók igénybe venni. Ugyan a pedagógiai szakszolgálatok segítsége igénybe vehető (pl. a továbbtanulási lehetőségek feltérképezéséhez, vagy pályaválasztási tanácsadáshoz), azonban a szolgáltatást nyújtók kapacitása szűkös. Iskolai szolgáltatást nyújtanak továbbá gazdasági szereplők is, úgymint a gazdasági kamara, a munkaadói és munkavállalói érdekképviseletek, a megyei fejlesztési és képzési bizottság, valamint a nemzeti foglalkoztatási szerv. Szerepüket vonatkozó jogszabály által Nemzetgazdasági Minisztériumi rendelet határozza meg. 5 http://kerettanterv.ofi.hu/szakkozep/index_s zakkozep.html 6 http://kerettanterv.ofi.hu/kiegeszites/08_szakiskola/index_s zi.html 6

A HATÉKONYSÁGVIZSGÁLAT MÓDSZERTANA A pályaorientáció rendszerének tartalmi és módszertani fejlesztése című kiemelt projekt keretében a tudatos pályaválasztás és pályafutás elősegítése érdekében az elsődleges cél az ön- és pályaismeret fejlesztése, melyek az alábbi főbb tevékenységeken keresztül valósulnak meg: életpálya-tanácsadást segítő eszközkészlet fejlesztése, tudástár kialakítása, on-line fejlesztések (Nemzeti Pályaorientációs Portál NPP), a szakemberek felkészültségét javító képzések. A vonatkozó szakmai javaslattétel, fejlesztés kiemelten fontos, elsődleges célja volt, hogy lehetővé váljon adatok gyűjtése és feldolgozása az életpálya-tanácsadási szolgáltatások hatékonyságáról, továbbá ezeken keresztül alapot teremtsen a bizonyíték-alapú szolgáltatásnyújtásnak és fejlesztésnek. Cél továbbá, hogy a témában meghozandó szakpolitikai döntések előkészítéséhez szükséges adekvát információk összegyűjtését lehetővé tegye. Emellett a szolgáltatások hatékonyságának mérése alkalmas a felhasználók egyéni elégedettségének mérésére is. A projekt eredményeinek fenntartása és a kidolgozott elmélet, módszertan- és eszközfejlesztés szempontjából lényeges körülmény, hogy a különböző életpálya-tanácsadási on-line és off-line szolgáltatások hatékonyságmérését, valamint az adatok tárolását és kezelését a Nemzeti Pályaorientációs Portál (továbbiakban: NPP) fejlesztésével és üzemeltetésével kívánják biztosítani. Az NPP-én összegyűlt adatok országos és regionális elemzések alapját képezhetik, lehetővé teszik a szolgáltatás minőségének, az ügyfél-elégedettségnek és a megoldásra váró problémáknak a klienscsoportonkénti és területi összevetését is. Az informatikai fejlesztés eredményeképp választ kaphatunk arra a régóta fennálló kérdésre, hogy egyes rétegeket (nem, szoci-ökonómiai státusz, foglalkoztatottság, stb.) milyen eszközökkel és milyen szolgáltatói formában lehet a leghatékonyabban elérni és segíteni, i.e. milyen információkat kell a rendelkezésükre bocsátani. 7

A szakmai javaslattétel az életpálya-tanácsadási on-line és off-line szolgáltatások hatékonyságmérési módszertanára az NPP-én keresztül összefoglalja a szolgáltatási hatékonyságmérés indikátorait, a méréshez szükséges adatokat a következő klienscsoportokra: általános iskolás és középiskolás klienscsoportok, beleértve az elsődleges (tanulói) és a másodlagos (szülő, pedagógus) klienscsoportokat is, illetve felnőtt klienscsoport, beleértve az álláskeresőket, tanácsadókat, intézményvezetőket és az NPP-én on-line szolgáltatásokat igénybevevőket. A kiíráshoz igazodva, a szakmai javaslattétel kiterjed: a szolgáltatás kérdőíves hatékonyságmérésében a szolgáltatást igénybevevő kliensek / klienscsoportok és a szolgáltatást nyújtók lekérdezésében bemeneti, folyamat-, valamint kimeneti változónak javasolt kemény és puhamutatók leírására, a kérdőív itemeinek száa, a válaszadás típusára és az indikátorok klienscsoportonkénti táblázatos összefoglalására. A hatékonyságmérés kidolgozásának módszertana Az eddigi hatékonyságmérési gyakorlati tapasztalatokból kiindulva számos valós kérdés / problematika merült fel a javaslattétel megfogalmazása során, melyeknek megválaszolása a kutatás egyik fő célja volt; elősegítve ezzel is a másik fő célt, nevezetesen a készülő kérdőív itemek pontos megfogalmazását, összeállítását és a kimenetek pontos mérhetőségét. 1. A kérdőívek kiértékelési rendszerének, a kimeneti változók mérési erejének megfogalmazása (hatékonyságmérés): A kimenetek mérésének általánosan elfogadott módszereit (pl. kis mintájú kvalitatív interjú, nagymintás kvantitatív lekérdezés, kimenet mérése tények összevetése nélkül, vagy tények gyenge összevetése hasonló csoporttal, illetve számítással történő ellenőrzés mellett kontrollcsoporttal, vagy matematikai statisztikai eszközökkel vizsgálva) sorban véve, majd ezeket a hatékonyságmérés céljaival összehangolva, a legcélravezetőbb módszernek a matematikai statisztikai eszközöket alkalmazó vizsgálat tűnt. Egyrészt, mert esetünkben ez a módszer ad pontos képet a valós helyzetről, másrészt, mert a kimenetek azonnal mérhetővé / összehasonlíthatóvá / elemezhetővé válnak az on-line rendszer technikai támogatásával. Mindemellett meg kell említeni, hogy az NPP-ére feltöltött kérdőívekkel elsősorban a bemeneti mérések során korlátozottan lehetőség nyílik a tények gyenge összevetésére is hasonló 8

rendszerben képzett klienscsoporttal. 2. Indikátorok képzése A szolgáltatások hatékonyságméréséhez is szükség van megbízható indikátorok / mutatók képzésére. A kihívás a különféle elvek mentén képzett klienscsoportok rendszerbe foglalásában, egységesítésében rejlett. A nemzetközi tapasztalatok szerint is sok és sokféle indikátor áll rendelkezésre, ugyanakkor kevés az olyan gyakorlat, amely átfogóan mérné egy ország tanácsadási teljesítményét, és még kevesebb lehetőség van az országok teljesítményének nemzetközi szintű összehasonlítására. Európai szinten például annak ellenére nincsenek a tagállamok tanácsadás területén nyújtott teljesítményét összehasonlító mutatók, hogy a tanácsadással rokon szakterületeken, például a foglalkoztatás és az oktatás témakörében kiterjedt indikátor rendszerek működnek. (Hárs, 2009) A klienscsoportok egyéneit státuszadatok (pl. kohorsz, iskolai végzettség) alapján is szükséges definiálni, így még pontosabban mérhetővé válik a különböző szolgáltatások hatékonysága az elégedettség-mutatókon, a tárgyi tudás bővülését, a készségek szintjét, valamint az életpálya-építés tudatosságának fokát jelző indikátorokon keresztül. Azaz, szükséges vizsgálni, így indikátorokat meghatározni arra, hogy a kliens mennyire elégedett a szolgáltatás jellemzőivel, mérhetően több információval rendelkezik-e egy adott kérdéskörrel kapcsolatban a szolgáltatás igénybevétele után, mint előtte (pl. többet tud-e adott foglalkozásokról, elhelyezkedési lehetőségekről), vagy képes-e annak tudatosítására, hogy életpályája tervezéséhez milyen stratégiai lépésekre lesz szükség, továbbá hosszabb időtávlatban szemlélve a szükséges lépéseket meg is teszi-e (kontrollmérés). 3. Adott klienscsoportok (i.e. általános iskolások, középiskolások és mint tanácskérők), továbbá az őket támogató szülők és pedagógusok által igénybevett szolgáltatások meghatározása A pályaorientáció mint az egész életutat támogató rendszer a társadalmi befogadást, a jól működő munkaerőpiacot és a képezhetőséget megalapozó támogató eszköz, ezért az szolgáltatásokat nyújtó intézményeknek, szervezeteknek törekedni kell arra, hogy a kapcsolódó szolgáltatások minden állampolgár száa elérhetőek legyenek. Ezen kritérium megvalósítása érdekében szükséges a szolgáltatások minél szélesebb skáláját biztosítani, melyek közül vizsgálatunk tárgyát képezik: álláskeresési tanácsadás, információnyújtás, pályaválasztási tanácsadás, munkavállalási tanácsadás, támogatott öntájékozódás (tesztek, portálok igénybevétele tanácsadók segítségével), 9

önmenedzsment készségek fejlesztése, üzem / cég / tanműhely látogatás, pályamódosítási tanácsadás, pszichológiai tanácsadás és rehabilitációs tanácsadás (Forrás: www.eletpalya.munka.hu). A szolgáltatásokhoz kapcsolódóan vizsgálható, hogy adott klienscsoportok jellemzően mely élethelyzetekben vesznek igénybe szolgáltatásokat: vállalkozóvá válás, pályamódosítás, munka világába való visszatérés hosszabb kihagyás után, munkahely elvesztése, új munkahely keresése, foglalkozás megválasztása, első munkahely keresése, vagy iskola / képzés választása. Az élethelyzetet hipotézisünk szerint alapvetően a munkaerő-piaci státusz határozza meg, és ezt egészíti ki az életkor és az iskolai végzettség. 4. A Nemzeti Pály aorientációs P ortál (NPP) és az on-line kérdőív ek, m i n t a pályaorientác iós eszközrendszer elemei Egy megbízható, átfogó, minden érintett száa elérhető és érthető eszközrendszer kialakítása igen komplex feladat, de hosszú távú pozitív hatása elvitathatatlan. Legalkalmasabb az on- line felületen való megjelenés, amely bármikor és bárki száa elérhetővé teszi a szolgáltatásokat, és a pályainformációs tartalmak folyamatosan és viszonylag zökkenőmentesen frissíthetők. Ugyan az on-line kutatás / lekérdezés nem minden kutatási probléma orvoslására alkalmas csodaszer esetenként csak más kutatási módszerekkel történő összehasonlítással, vagy egyéb adatfelvételi módszerekkel vezet megbízható eredményre a szolgáltatásokra irányuló hatékonyságmérés az NPP-én keresztül megvalósítható. Az NPP felhasználóinak adatfelvétele regisztráció során történik; amennyiben regisztráció nélküli kérdőív kitöltésre kerül sor, a kliensek on-line adatfelvétele a státuszadatok felvételének módszerével biztosított. Az on-line megkérdezéses módszer alkalmazásánál a következő módszertani és tartalmi problémákat kellett figyelembe venni: a kérdések egyértelmű, pontos megfogalmazása, mivel ezen eljárásban nincs közvetlen kapcsolat a kérdező és a megkérdezett között (a helytelenül feltett kérdések fals eredményre vezethetnek) nyitott kérdések kerülése, mivel a kifejtett válaszok feldolgozhatósága hosszadalmas, a 10

tényleges adatnyerés és összehasonlíthatóság / elemezhetőség nehézkessé válik, elveszítve ezzel a módszer egyik legnagyobb előnyét: a gyors és pontos statisztikai jellegű feldolgozhatóságot lényegre törő itemek megfogalmazása, hiszen a válaszadás kontrollálatlanságából adódóan a kliensek könnyen kiugorhatnak a felmérésből, ha az számukra egysíkúvá válik (munkahipotézisünk szerint a kérdőívek kitöltési ideje átlagosan nem több mint 5 perc) nagyméretű képek mellőzése, mivel kitöltéskor az alacsonyabb sebességű hálózatokon ez jelentős lassulást okozhat ami szintén az említett kiugráshoz vezethet a klienscsoportok közül az általános és középiskolás korosztály jelentős része állandó internetkapcsolattal rendelkező mobil eszközöket használ ( okostelefon applikációk, tablet, stb.). A HATÉKONYSÁGVIZSGÁLATHOZ KAPCSOLÓDÓ STATISZTIKAI MÓDSZEREK A hatékonyságmérés során alkalmazott statisztikai módszerekkel szembeni elvárások és ezek érvényesítésének főbb elvei A hatékonyságmérés során alkalmazott statisztikai módszerekkel szemben az alábbi elvárásokat támasztjuk: 1. adjon átfogó képet arról, hogy az egyes szegmensek mely szolgáltatásokat veszik igénybe és milyen mértékben ítélik hasznosnak azokat 2. képes legyen mérni az egyes szolgáltatások felhasználók által érzékelt hasznosságát 3. képes legyen mérni a felhasználók életpályájának alakulását (az elsődleges célcsoport esetében: milyen mértékben változik a felhasználók iskolai végzettsége, munkaerő-piaci státuszuk, a másodlagos célcsoport esetében: milyen mértékben bővült a tevékenységük) 4. képes legyen klienscsoport-képzésre a teljes sokaságon belül 5. kimeneti adatai alapján lehessen mérni az egyes változók közti kapcsolatot 6. kitöltése egyszerű és gyors legyen, hogy statisztikailag értékelhető mennyiségű felhasználó töltse ki 11

7. a kapcsolódó kérdőív az egyes felhasználói csoportok (klienscsoportok) sajátosságaihoz igazodjon, különös tekintettel a motivációkra. A klienscsoportok: a. általános iskolások b. általános iskolások szülei c. általános iskolások pedagógusai d. középiskolások e. középiskolások szülei f. középiskolások pedagógusai g. álláskeresők h. tanácsadók i. intézményvezetők j. on-line szolgáltatásokat igénybevevők az NPP-én (amennyiben más szerepkörrel nem rendelkeznek). A felhasználókon belül megkülönböztetjük az elsődleges és másodlagos klienscsoportokat. Az elsődleges klienscsoport azon egyénekből áll, akik saját sorsukon, saját életpályájukon kívánnak változtatni (a, d, g és koncepciónk szerint: j). A másodlagos klienscsoport pedig azon egyénekből, akik az elsődleges klienscsoportot támogatják, különböző okból (b, c, e, f, h, i) és függetlenül attól, hogy rendelkeznek-e előzetes tapasztalatokkal. Adjon átfogó képet a szolgáltatások ismertségéről és a klienscsoportok által érzékelt hasznosságáról: a vizsgálat egészén mérje, hogy a kérdőív kitöltői milyen szolgáltatásokban és ezeket mennyire ítélték hasznosnak. Képes legyen mérni az egyes életpálya-tanácsadási szolgáltatások klienscsoportok által érzékelt hasznosságát: a kérdőívben szerepelnie kell, hogy a felhasználók mennyire értékelik hasznosnak a szolgáltatás típusokat. A hatékonyságmérés során a klasszikus értelemben vett kontrollcsoportos mérésre nincs lehetőség, mivel a mérés elsősorban az NPP felhasználók (látogatók) körében valósul meg. Ugyanakkor, ha a kliensek az NPP használata előtt bemeneti mérésben vesznek részt, melyből megállapítható, hogy korábban milyen szolgáltatásokat vettek igénybe és ezeket mennyire ítélték hasznosnak, majd ezen információkat összevetjük a későbbi NPP használat során szerzett tapasztalatokkal, virtuális (időeltolásos) kontrollcsoportokat hozhatunk létre. Ezzel párhuzamosan mérhető a korábbi elvárások teljesülése is, azonban ez korlátozott hitelességű, mivel a korábbi elvárásokra kérdezünk rá (azok listáját jelentősen 12

befolyásolja az elvárások teljesülése: általános megfigyelés, hogy a teljesült elvárások súlya csökken, míg a teljesületleneké növekszik az idő múlásával). Képes legyen mérni a klienscsoportok életpályájának alakulását. Az életpálya alakulása két szinten mérhető, on-line kitöltés esetén: 1. A bemeneti mérés során, azaz az első NPP használat előtt megkülönböztetve azon potenciális felhasználókat, akik korábban szolgáltatásokban, és akik nem (illetve, nyújtott-e szolgáltatást). A mérés során információkat szerzünk arról, hogy az NPP látens felhasználói 7 korábbi tapasztalataik alapján mely szolgáltatási formákat tartják hasznosnak, illetve ezen véleményük az NPP használata során hogyan változik. A bemeneti mérés mindazonáltal nem alkalmas arra, hogy a magyar lakosság szolgáltatásokhoz kapcsolódó általános felhasználói szokásait elemezze, mivel az NPP látogatók motivációja feltételezésünk szerint magasabb, mint az átlagos magyar lakosságé. 2. A későbbiekben kontrollmérésekre kerül sor, melyek alapján idősoros elemzés készíthető mind az NPP felhasználók összességének szintjén, mind klienscsoport szinten. A bemeneti és a kontrollméréssel kapcsolatban elvárás, hogy a releváns kérdések tartalmukban megegyezzenek, az eredmények összevethetők legyenek. Szükséges feltétel továbbá, hogy a felhasználók regisztráljanak, így a kontrollmérés eredményei egyéni szinten is összevethetők legyenek a korábban mértekkel. Off-line kitöltés esetén a bemeneti és ismételt mérés során használt egyedi azonosítóval teremthető meg a kapcsolat, ennek hiányában csak a bemeneti mérés végezhető el. Az egyedi azonosító lehet a kitöltő neve, (ez esetben azonban sérülne az anonimitás elve)vagy e-mail címe, a születési idővel és irányítószámmal együtt. A kapcsolatot az off-line kitöltött kérdőívek feldolgozása során kell megteremteni, vagy az adatfelvevőtől párosítva kell átvenni a kitöltött kérdőíveket. Képes legyen klienscsoport-képzésre a teljes sokaságon belül: a bemeneti mérés (illetve, a regisztrációból átemelve) a kontrollmérés során a felhasználóknak az alábbi adataikat kell megadniuk (státusz adatok BSK és IΔ), amennyiben az adott szerepkörben releváns: 7 itt: az NPP látens felhasználói azon személyek, akiknek élethelyzetükből adódóan szükségük van az NPP-én elérhető szolgáltatások igénybevételére, de, vagy nem rendelkeznek megfelelő ismeretekkel a portálról, mint lehetőségről, vagy nem döntötték még el, hogy az NPP szolgáltatásait ténylegesen igénybe is veszik 13

1. korábban -e szolgáltatásokban / nyújtottak-e szolgáltatást; a. ha nyújtottak, (illetve most is nyújtanak) szolgáltatást: kiknek, 2. hány főnek, milyen gyakorisággal? 3. nem 4. születési idő (a rendszernek az aktuális év alapján kell kiszámolnia az aktuális életkort) 5. iskolai végzettség 6. munkaerő-piaci státusz A klienscsoport-képzés során fontos információ, hogy a felhasználó melyik szerepkörben (általános iskolás, általános iskolás szülei stb.) lép be a rendszerbe, azonban ez a kérdőív típusa alapján adott információ. Az egy szerepkörön belüli klienscsoportok azonos kérdőívet töltenek ki, a klienscsoportok közti különbségtétel csak az adatok kiértékelése során jelentkezik. A klienscsoport képzés során használt kategóriák (az egyes szegmensek esetében csak a releváns státuszadatokra vonatkozó kérdések jelennek meg): Korábban részesült-e szolgáltatásban: igen nem Nyújtott-e szolgáltatást: igen nem Milyen korosztálynak: általános iskolásoknak 15-18 éves korú fiataloknak fiatal felnőtteknek (25 éves korig) felnőtteknek (többválasztós) Nem: férfi nő (regisztráció során kötelezően megadandó adat) Születési idő életkor (aktuális év születési idő): numerikus adat (regisztráció során kötelezően megadandó adat) Iskolai végzettség: 8 általánosnál kevesebb - 8 általános befejezett szakiskola nem befejezett szakközépiskola érettségi érettségi főiskolai diploma egyetemi diploma PhD-fokozat. ( szakemberek esetében külön kell jelölni az ezzel kapcsolatos képzéseket) Munkaerő-piaci státusz: alkalmazott vállalkozó álláskereső felsőoktatásban hallgató GYESen / GYEDen / GYETen lévő (jelenlegi és megcélzott státuszt is bejelölheti a válaszadó) A klienscsoportokat felhasználói szerepkörökön belül képezzük. A javasolt klienscsoportok (táblázatos megjelenítést lásd: Melléklet 1. sz.): Általános iskolások: csoportképzési szempontok: nem, részesült-e szolgáltatásokban. 14

Általános iskolások szülei: csoportképzési szempontok: nem, életkor, részesült-e szolgáltatásokban (azaz a gyermekét olyan tevékenység igénybevételében akarja-e támogatni, amiben ő részesült). Általános iskolások pedagógusai: csoportképzési szempontok: nem, életkor, nyújtott-e szolgáltatást. Középiskolások: csoportképzési szempontok: nem, részesült-e szolgáltatásokban, életkor. Középiskolások szülei: csoportképzési szempontok: nem, életkor, részesült-e szolgáltatásokban (azaz a gyermekét olyan tevékenység igénybevételében akarja-e támogatni, amiben ő részesült). Középiskolások pedagógusai: csoportképzési szempontok: nem, életkor, nyújtott-e szolgáltatást. Álláskeresők: csoportképzési szempontok: korábban -e szolgáltatásokban, nem, életkor, iskolai végzettség, munkaerő-piaci státusz. Tanácsadók: csoportképzési szempontok: nem, életkor, nyújtott-e szolgáltatást, ha igen, milyen korosztálynak (ez utóbbi a klienscsoport-képzésben egy adott személy több kategóriában is szerepelhet, azonban az összegzésben egy személyként szerepel). Intézményvezetők: nem, életkor, végzett-e szolgáltatást. On-line szolgáltatásokat igénybevevők: nem, életkor, iskolai végzettség, részesült-e szolgáltatásokban (a szolgáltatást nyújtók, feltételezésünk szerint más szerepkörben jelentkeznek be, így statisztikailag nem értékelhető sokaságot képeznek ebben a szerepkörben). Kimeneti adatai alapján lehessen mérni az egyes változók közti kapcsolatot: a kérdésekre kapott válaszok alapján lehetővé kell válnia, hogy az adatokat az alábbi módszerekkel lehessen elemezni: 1. összegzés 2. a számszerű értékek arányosítása 3. átlagos érték összehasonlítása 4. korrelációszámítás; 5. ANOVA, 6. t-próba, 15

7. khí-négyzet próba A felsorolt statisztikai módszerek közül az 1-3-at az elsődleges feldolgozás során alkalmazzuk (lásd: kérdéseket tartalmazó táblázat), a 4-5-et a nagymennyiségű (tervezett éves mennyiség 50-75%-a) beérkezett kérdőív kiértékelése során. A kiértékelő rendszernek alkalmasnak kell lennie arra, hogy képes legyen valamennyi numerikus adat közti kapcsolat vizsgálatára, de elsősorban hipotézisünk szerint az alábbi kapcsolatokat kell vizsgálni a kérdőívek kiértékelése során: 1. az életkor és az igénybevett szolgáltatások (azaz hány szolgáltatást vett igénybe eddig) 2. az életkor és a szolgáltatások hasznosságának (átlagos érték) megítélése 3. az iskolai végzettség (az iskolában minimálisan töltött évek, mint numerikus érték pl. főiskolai végzettség esetén 15 év) a szolgáltatások használata (fenti értelemben) 4. az iskolai végzettség (fenti értelemben) és a szolgáltatások hasznosságának megítélése 5. ön-, pálya- és munkaerő-piaci ismeret pontossága (a témakörök közül önbevallás alapján hánnyal van tisztában) és a szolgáltatások használata 6. ön-, pálya- és munkaerő-piaci ismeret pontossága és a szolgáltatások hasznosságának megítélése 7. szubjektív sikeresség 8 (mint az egyes szempontok átlaga) és a 8. szolgáltatások használata 9. szubjektív sikeresség és a szolgáltatások hasznosságának megítélése 10. a szolgáltatások nyújtása során: az elsődleges célcsoporton belül támogatott 11. személyek száma és a szolgáltatások használata 12. a szolgáltatások nyújtása során: az elsődleges célcsoporton belül támogatott 13. személyek száma és a szolgáltatások hasznossága 14. a szolgáltatások nyújtása során: a szolgáltatás nyújtásának gyakorisága és a szolgáltatások használata 15. a szolgáltatások nyújtása során: a szolgáltatás nyújtásának gyakorisága és az 16. szolgáltatások hasznossága 8 azon nem számszerűsíthető mutatók, melyek alapján a kliens az életét sikeresnek, vagy nem sikeresnek tartja pl. munkaidő- szabadidő aránya (Bővebben lásd: 25. oldal) 16

A vizsgálat célja, hogy 1. meghatározza, hogy milyen az egyes szolgáltatások és eszközök érzékelt hasznossága összességében, illetve az egyes szerepkörökben és a korábban meghatározott klienscsoportokban 2. Az egyes csoportokban melyek a legnagyobb mértékben és a legkevésbé hasznos szolgáltatások 3. milyen, a hatékonyságmérés során vizsgált egyéb változó határozza meg az egyes szolgáltatások szubjektív hasznosságát, illetve az életpálya objektív és szubjektív sikerességét. Kitöltése egyszerű és gyors legyen, hogy statisztikailag értékelhető mennyiségű felhasználó töltse ki: bár az egyes klienscsoportokon belül az alábbi elvektől el lehet térni az egyéni sajátosságok (különösképpen a motiváció) mértéke szerint, az egyes hatékonyságmérő kérdőíveket az alábbi elvek alapján kell kialakítani: 1. a kérdőívek ideális hossza, közepes motiváció esetén: 3-4 státuszadatra vonatkozó kérdés, 2. 12 a szolgáltatásokkal kapcsolatos kérdés (beleértve azon változókat, melyek ezek igénybevételét befolyásolhatják). Ez utóbbi szám (12) a szerepkör motivációjának erőssége szerint, kis mértékben növekedhet; 3. a kérdések típusainak kiválasztásánál figyelembe kell venni, hogy a kérdőívek a projektzárás után is használatban lesznek, így a szöveges (text) válaszokat kérdéseket nem alkalmazzuk, hogy a kiértékelés automatikusan, informatikai megoldással legyen lehetséges: a. egyválasztós: a kérdőívet kitöltő csak egy választ jelölhet be (használt típusok: b. általános, I/N, férfi / nő) c. többválasztós: a kérdőívet kitöltő több választ is megjelölhet d. numerikus értékválasztós: a kérdőívet kitöltő numerikus értéket ad meg válaszként. Használt típusok: i. numerikus értékválasztós (4-es skálán): 4-es skálán, hogy a válaszadó kénytelen legyen értékítéletet mondani, ne választhasson középértéket ii. numerikus értékválasztós (4-es skálán, 0: nincs véleménye): mint az i. pontban, azonban a válaszadó jelölheti, ha nincs kialakult véleménye a kérdésben d. numerikus érték: a kérdőívet kitöltő szabadon írhat be számértéket válaszként (az intervallum informatikai eszközökkel meghatározható). Használt típusok: 17

i. numerikus érték (4 karakter): a válaszadó 4 karakterig szabadon írhat be számértéket ii. numerikus érték, szabad: a válaszadó szabadon írhat be számot 4. Eldöntendő kérdés, hogy a (bemeneti és a kontroll) kérdőívek kitöltése kötelező-e, vagy csak felkínáljuk a lehetőséget a felsorolt szerepben belépőknek. a. Amennyiben kötelező a kérdőívek kitöltése, a teljes látogatói kört le tudjuk fedni a vizsgálatunkban, azonban a motiváció alacsonyabb, így a válaszok kevésbé alaposak, végiggondoltak, ráadásul a látogatók idő-költsége emelkedik, ami az NPP látogatottsági adatait ronthatja. b. Amennyiben a kérdőívek kitöltése önkéntes, alacsonyabb százalékban töltik ki, a válaszok nem a teljes sokaságot, hanem annak csak magasabb motivációjú szegmensét fedik le. Az NPP látogatók tervezett száma évente kb. 339 000 egyéni látogató (Forrás: lásd. pályázati útmutató: Pályaorientációs tanácsadásban részesülők száma, beleértve a személyes és távtanácsadást is). Amennyiben 10%- os válaszadási hajlandóságot el tudunk érni, ez statisztikailag értékelhető sokaság. Amennyiben a válaszadási hajlandóság ettől el marad, a válaszadást promotálni kell, ennek módszertanával a későbbiekben foglalkozunk. A kapcsolódó kérdőív az egyes felhasználói csoportok sajátosságaihoz igazodjon: a szerepkörök, melyek alapján a kliensek kiválasztják a kitöltendő kérdőíveket, alapvetően meghatározza, hogy a szolgáltatásokkal milyen módon és mélységben lépnek kapcsolatba, azaz ebből következtetni lehet a motivációikra is. A motiváció erősségével egyenesen arányos az, hogy mennyi időt hajlandóak egy-egy kérdőív kitöltésével eltölteni, azaz az erősebb motivációjú szerepkörben fellépő felhasználók esetében több és hosszabb választ igénylő kérdések tehetők fel. 18

Az egyes szerepkörökben, a motiváció erőssége szerint, az alábbi hosszúságú kérdőívek javasoltak: szerepkör státuszadatra kérdések számának plusz motiváció szükséges-e vonatkozó kérdés felső határa (BS+BSK) (BT+IΔ+IT) általános iskolások 3+2 12 igen általános szülei iskolások 4+2 12 nem általános iskolások 4+2 12 nem pedagógusai középiskolások 4+2 12 igen középiskolások szülei középiskolások pedagógusai 4+2 12 nem 4+2 10 nem álláskeresők 5+2 14 igen tanácsadók 4+2 12 igen intézményvezetők 4+2 10 nem on-line szolgáltatásokat igénybevevők NPPén az 4+2 10 igen BS: bemeneti státuszmérés BSK: bemeneti státuszmérés, kiegészítés BT: bemeneti mérés, tartalmi 19

IΔ: kontroll státuszmérés (változás) IT: ismétlődő, tartalmi mérés Az egyes státuszmérések (BS, BSK, IΔ) során a kliens éppen aktuális munkaerő-piaci helyzetét tisztázzuk. A fix státuszadatok (kemény mutatók) pl. születési idő, nem, stb. olyan fix adatok, melyek nem változnak a kontrollmérés során sem. A puha státuszadatok pl. végzettség, munkaerő-piaci státusz, stb. változhatnak a mérési folyamat során, ezért ezekre ismételten rákérdezünk. 20

A kérdőívek kitöltésének motiválása Mint korábban jeleztük, a rendszer kötelezővé teheti, illetve opcionálisan kínálhatja fel a kérdőívek kitöltését a szerepkörök tagjainak. Szakmai szempontból ez utóbbit javasoljuk, hogy elkerüljük az alacsony motivációjú, véletlenszerű kérdőív-kitöltéseket. Az NPP látogatóinak várható száma 339 ezer körül alakul évente, amennyiben ezen szám 10%-a kitölti a kérdőíveket, statisztikailag értékelhető nagyságú mintához jutunk. Ezen eredmény elérését két tényező nehezítheti: nincs hiteles adatunk arról, hogy az évi 339 ezer látogató mekkora része visszatérő: a hagyományos vizsgálati módszerek (IP cím szerinti vizsgálat és számlálás) nem működik, mivel a szerepkörök jelentős része (pl. általános és középiskolások) azonos IP címről lép fel. A regisztráció segítséget jelenthet a pontos elemszám meghatározásában, azonban más szerepköröknél, az alacsonyabb motiváció miatt ez a módszer sem alkalmazható. Számolnunk kell az egyes látogatói szerepkörök eltérő motivációjával is. Bár ezt, a korábban említett klienscsoport-képzéssel korrigálni tudjuk az adatok értékelésénél, fennáll annak a veszélye, hogy egyes szerepkörökből aránytalanul kisszámú eredmény érkezik be, ami nem teszi lehetővé, hogy az adott szerepkörről pontos információkkal rendelkezzünk. A problémát két eszközzel tudjuk kezelni: a regisztráció előmozdítása, a kérdőív-kitöltések promotálása. 21

A regisztráció előmozdítása A hatékonyságmérésre szolgáló mérőeszköz-rendszer alapja, hogy az NPP látogatóit két modulban mérjük fel: a bemeneti és az ismétlő kérdés során (kivéve a látogatói szerepkört), ehhez mindenképpen szükséges a regisztráció, hogy a különböző időpontban történt mérések adatai összevethetők legyenek, egyéni szinten is rögzítve a változásokat. Javasoljuk, hogy az NPP belépő felületén azonnal jelenjen meg egy olyan üzenet, ami a regisztráció fontosságát hangsúlyozza, illetve a regisztrációból adódó előnyöket az NPP látogatók száa összefoglalja. Javasoljuk továbbá, annak érdekében, hogy a bemeneti mérést minél nagyobb számban töltsék ki, hogy a regisztrációt követően a rendszer azonnal kínálja fel a releváns bemeneti kérdőívek kitöltését. Megítélésünk szerint, a regisztrációk előmozdításához egyéb promóciós eszközre nincs szükség. A kérdőív-modulok kitöltésének folyamata (a rövidítések magyarázata: lásd. előző fejezet) 22

A kérdőív-kitöltés népszerűsítése Mint korábban említettük, a kérdőívek két fő modulra oszlanak: bemeneti (B) és kontroll modul (I). A bemeneti kérdőív esetében külön promócióra megítélésünk szerint nincs szükség, azonban a regisztrációhoz képest ½ vagy 1 év múltán kitöltendő kérdőívek esetében erőteljesen csökken a motivációs hatás, így feltételezhetően akontroll kérdőíveket kevesebben fogják kitölteni. Az I modul esetében a motivációt gyengíti, hogy a kérdőív kitöltését a rendszer, szerepkörtől függően ½ - 1 év múlva újra és újra felkínálja. Az erősebb motivációjú szerepkörökben (pl. tanácsadók) a kitöltés valószínűsíthető, azonban a gyengébb motivációjúak esetében mindenképpen szükséges a promóciós tevékenység. Elméletileg az alábbi promóciós eszközök alkalmazhatóak: 1. sorszám szerinti ajándékozás 2. sorsolás 3. szakaszos sorsolás. A sorszám szerinti ajándékozás esetében minden előre meghatározott sorszámú (pl. minden ezredik, minden ötezredik stb.) kitöltő ajándékban részesül. Ez a módszer elsősorban a projektidőszakban használható, amikor a források lehetővé teszik az ajándékozást. Ebben az esetben a sorszám elérése után jelentősen csökken az új kitöltők száma. A sorsolás esetében, egy adott időszakon belül (pl. 2015 II. félév), a kérdőívet kitöltők között ajándékokat sorsolnak ki; ez is a fenti korlátozással alkalmazható. A szakaszos sorsolás esetében előre meg kell határozni egy számot, amelyet, ha elérnek a kitöltött kérdőívek számai, a kitöltők között ajándékokat sorsolnak ki (majd utána egy újabb irányszám meghatározására kerül sor: pl. először az 5000. kérdőív után sorsolnak, utána a 10 000.-nél és így tovább). Bár ennél a módszernél is felmerül a források kérdése, de játékelméleti szempontból könnyen belátható, hogy a kérdőívek kitöltése újabb kitöltéseket generál, hiszen, ha valaki kitöltötte, az az érdeke, hogy erre másokat is buzdítson, hiszen csak akkor történik meg a sorsolás, ha az adott célszámot elérik. 23

Az utóbbi három esetben az alábbi promóciós ajándékok használatát javasoljuk: klienscsoport mobil informatikai informatikai a munkaerő-piaci prémium eszközök eszköz (pl. laptop) pozíciót javító programok (pl. (mobiltelefon, tablet, szolgáltatások (pl. szabadidős stb.) nyelvtanfolyam) programok, üzemlátogatás) általános iskolások X X általános iskolások szülei X általános iskolások pedagógusai X X középiskolások X középiskolások szülei X középiskolások pedagógusai X X álláskeresők X X tanácsadók X X intézményvezetők on-line szolgáltatásokat igénybevevők az NPP-én X Nem releváns, mivel kontrollmérésben nem vesznek részt 24

A promóciós eszközök használatáról az NPP indulását és az első méréseket követő 6-12 hónappal kell dönteni, a kitöltöttségi adatok figyelembe vételével. ÖSSZEFOGLALÁS Pár gondolatban összefoglalva a szolgáltatások hatékonyságának meghatározására kialakított mérőeszközökre (itemeikre) tett szakmai javaslattételt: a konkrét kérdések előtt szerepel egy rövid tájékoztatás a kérdezés céljáról, a kitöltés módjáról és önkéntes jellegéről, az eredmények feldolgozásáról és felhasználásáról, miközben biztosítjuk a klienseket az anonimitásról és az adatkezelés korrektségéről zárt kérdésekkel dolgoztunk, így nemcsak a kérdőív kitöltése, hanem az on-line feldolgozás is egyszerűbb és azonnali. A zárt kérdések lehetnek eldöntendők (pl. igen-nem), témák osztályozására / minősítésére, vagy az osztályozás segítségével minőségi sorrend megállapítására és lehetőségek kiválasztására alkalmasak. Mivel, ennek értelmében, nemcsak a kérdések, hanem a válaszlehetőségek is megtalálhatók az on-line kérdőíven, a kitöltő az általunk felkínált lehetőségek közül választhat (törekedtünk a párosszámú válaszlehetőségek alkalmazására, ugyanis korábbi kutatási tapasztalatok alapján megállapítható volt, hogy páratlan szám esetén a válaszadók hajlamosak döntően a középső válaszokat megjelölni) egy kérdőívre maximum 12-15 itemet állítottunk össze, melyből az első három (de legfeljebb öt kérdés a kitöltő motivációjának függvényében) rendszerint a státuszadatokat felvevő kérdés az on-line előállítandó gyorsstatisztikák felépítését (tehát, mely kérdések átlagos / százalékos / összegzett eredményét mutassuk meg) a kérdéseket tartalmazó táblázat tartalmazza, a kimeneti információk típusainak megfelelően. Mivel a felmérés anonim (az NPP adatvédelmi nyilatkozatában megfogalmazottaknak megfelelően), az összegzett információk harmadik fél száa kutathatóvá válnak. A programozási algoritmusokat illetően az informatikai rendszer alkalmazza az átlagszámítás, összegzés, arányosítás és korrelációszámítás statisztikai eszközeit. 25

Indikátorok Végezetül, az alábbi megállapításokat tehetjük az indikátorok kapcsán a kimeneti adatok tükrében: az egyes szegmensek (és azok jellemzőinek) aránya az NPP használók között (százalék) az egyes szegmenseken belül a szolgáltatásokat igénybevevők aránya (százalék) az egyes szegmensek mely szolgáltatásokat, illetve eszközöket vették igénybe (százalék) Az egyes szegmensek hogyan ítélik meg az egyes szolgáltatások és eszközök hasznosságát (átlag) a pályaismeret egyes elemeinek ismertsége az egyes szegmenseken belül (átlag) az egyes szegmensek a siker mely dimenzióit tekintik fontosnak (átlag) Az egyes szegmensek milyen elvárásokat fogalmaznak meg a szolgáltatásokkal, illetve eszközökkel szemben (átlag) és azok teljesülése (átlag) a szolgáltatások és eszközök használatának változása az NPP használata során (százalék) a pályaorientációval foglalkozó pedagógusok, tanácsadók átlagosan hány embert érnek el a szolgáltatások nyújtása során (átlag) és ezen belül milyen célcsoportokat (százalék) milyen gyakorisággal történik a szolgáltatások nyújtása (átlag) az intézményeken belül a szolgáltatások igénybevevőinek aránya. A kérdőívek széleskörű felhasználása előtt javasolt egy kismintás próbamérés elvégzése (esetleg a kliensek bemeneti mérése, időeltolásos kontrollcsoport képzése), amiből megtudhatjuk, hogy pontosak és relevánsak-e a kérdésmegfogalmazások, ténylegesen mennyi időbe telhet a kérdőív kitöltése, alkalmasak-e a válaszokból nyert adatok a tervezett módszerrel történő feldolgozásra, illetve a szolgáltatások hatékonyságmérésére. A kapott visszajelzések és tapasztalatok alapján érdemes a kérdőíveket a későbbiekben továbbfejleszteni. 26

IRODALOMJEGYZÉK 2011. évi CXC. törvény a nemzeti köznevelésről Borbély-Pecze Tibor Bors (2011): Az életút-támogató pályaorientáció rendszerének bevezetése Magyarországon FSZH, Budapest Filep Gyula; Filep Orsolya Veronika; Kovács Zsolt; Nagy Éva Mária; Szombati Ivett (2013): Életpályatanácsadáshoz köthető hatásvizsgálatok, valamint oktatási és munkaügyi intézmények együttműködésének nemzetközi jó gyakorlata. Elemzés és tanulmány. TÁMOP 2.2.2. A pályaorientáció rendszerének tartalmi és módszertani fejlesztése projekt keretén belül Foglalkoztatási és Szociális Hivatal (2010) Életpálya tanácsadás, 2010. II. évf. 3-4. szám, Hámornik Balázs; Juhász Márta; Soós Juliánna Katalin (2010): Elégedettségmérés / Elégedettségvizsgálat érvényességének bemutatása. Kutatási beszámoló. TÁMOP 2.2.2. A pályaorientáció rendszerének tartalmi és módszertani fejlesztése projekt keretén belül Hárs Ágnes dr.; Tóth Gábor (2009):A / karrier tanácsadás hatékonyságának és költségráfordításainak vizsgálata gazdasági szempontból. Kutatási beszámoló. KOPINT-TÁRKI Kiss István (2010): A pályatanácsadás hatékonyságának vizsgálata. Kutatási beszámoló. TÁMOP 2.2.2. A pályaorientáció rendszerének tartalmi és módszertani fejlesztése projekt keretén belül http://eletpalya.munka.hu/fogalmak http://kerettanterv.ofi.hu http://www.ofi.hu/sites/default/files/attachments/mk_nat_20121.pdf 27

MELLÉKLET 1. sz. azon fiúk, akik szolgáltatásokban azon fiúk, szolgáltatásokban azon lányok, akik szolgáltatásokban azon lányok, szolgáltatásokban ak, akik ak, Nők, akik Nők, szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 éves korig, legfeljebb éves korig, legfeljebb éves korig, legfeljebb éves korig, legfeljebb befejezett 8 osztállyal befejezett 8 osztállyal befejezett 8 osztállyal befejezett 8 osztállyal ak, akik ak, Nők, akik Nők, szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 éves korig, középfokú éves korig, középfokú éves korig, középfokú éves korig, középfokú ak, akik ak, Nők, akik Nők, szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 éves korig, felsőfokú éves korig, felsőfokú éves korig, felsőfokú éves korig, felsőfokú ak, akik ak, Nők, akik Nők, szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 28

éves kor felett, éves kor felett, éves kor felett, éves kor felett, legfeljebb befejezett 8 legfeljebb befejezett 8 legfeljebb befejezett 8 legfeljebb befejezett 8 osztállyal osztállyal osztállyal osztállyal ak, akik ak, Nők, akik Nők, szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 éves kor felett, éves kor felett, éves kor felett, éves kor felett, középfokú középfokú középfokú középfokú ak, akik ak, Nők, akik Nők, szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 szolgáltatásokban, 40 éves kor felett, éves kor felett, éves kor felett, éves kor felett, felsőfokú felsőfokú felsőfokú felsőfokú férfi pedagógusok, akik férfi pedagógusok, akik női pedagógusok, akik férfi pedagógusok, akik nyújtottak még nem nyújtottak nyújtottak még nem nyújtottak szolgáltatást, 30 éves szolgáltatást, 30 éves szolgáltatást, 30 éves szolgáltatást, 30 éves korig korig korig korig férfi pedagógusok, akik férfi pedagógusok, akik női pedagógusok, akik férfi pedagógusok, akik nyújtottak még nem nyújtottak nyújtottak még nem nyújtottak szolgáltatást, 31-45 év szolgáltatást, 31-45 év szolgáltatást, 31-45 év szolgáltatást, 31-45 év között között között között 29

férfi pedagógusok, akik férfi pedagógusok, akik női pedagógusok, akik férfi pedagógusok, akik nyújtottak még nem nyújtottak nyújtottak még nem nyújtottak szolgáltatást, 45 év szolgáltatást, 45 év szolgáltatást, 45 év szolgáltatást, 45 év felett felett felett felett azon fiúk, akik azon fiúk, akik még azon lányok, akik azon lányok, akik még nem nem szolgáltatásokban, 17 szolgáltatásokban, 17 szolgáltatásokban, 17 szolgáltatásokban, 17 éves korig éves korig éves korig éves korig azon fiúk, akik azon fiúk, akik még azon lányok, akik azon lányok, akik még nem nem szolgáltatásokban, 17 szolgáltatásokban, 17 szolgáltatásokban, 17 szolgáltatásokban, 17 éves kor felett éves kor felett éves kor felett éves kor felett ak, akik ak, Nők, akik Nők, éves korig, legfeljebb éves korig, legfeljebb éves korig, legfeljebb éves korig, legfeljebb befejezett 8 osztállyal befejezett 8 osztállyal befejezett 8 osztállyal befejezett 8 osztállyal ak, akik ak, Nők, akik Nők, éves korig, középfokú éves korig, középfokú éves korig, középfokú éves korig, középfokú 30

ak, akik ak, Nők, akik Nők, éves korig, felsőfokú éves korig, felsőfokú éves korig, felsőfokú éves korig, felsőfokú ak, akik ak, Nők, akik Nők, éves kor felett, éves kor felett, éves kor felett, éves kor felett, legfeljebb befejezett 8 legfeljebb befejezett 8 legfeljebb befejezett 8 legfeljebb befejezett 8 osztállyal osztállyal osztállyal osztállyal ak, akik ak, Nők, akik Nők, éves kor felett, éves kor felett, éves kor felett, éves kor felett, középfokú középfokú középfokú középfokú ak, akik ak, Nők, akik Nők, éves kor felett, éves kor felett, éves kor felett, éves kor felett, felsőfokú felsőfokú felsőfokú felsőfokú 31