360 hindamine arhitektuurinõukojas
Tänane olukord
ÜHO tellib Upsteem.com OÜlt digivahendit 360 kraadi tagasiside metoodika alusel haridusvaldkonna juhtide ja õpetajate hindamise läbiviimiseks. Leping lõpeb selle aasta novembris. Kogu administreerimist on Harno töötaja korraldanud käsitsi, nt hindajatele anti juurdepääs enesehindamise küsimustiku täitmiseks manuaalselt, kui isikule hindamine avati. Samuti administreeriti vastajate lisamist hindamisse käsitsi. Mudeli uuendusi ja täiendusi tuli tellida tasu eest partnerilt. Keskkonnas esinesid turvaprobleemid.
ÜHO koos HAKAga on alates 2022 tellinud ESF toetuse arvelt arendusi Haridussilmas, millega loodi enesehindamise keskkond, kuhu saab administraator ise dünaamilisi mudeleid lisada ning neid anda konkreetsete kasutajate kasutusse, kas õppeasutuse või isiku töökoha alusel. Mudelite arv on piiramatu. Tänane tööprotsess võimaldab anda enesehindaja kasutusse enesehindamise küsimustiku koos välishindamise võimalusega. ÜHO on koostöös Harno ja Tallinna Ülikooliga seda võimalust testinud ning leidnud, et see on sobilik koolijuhtide enesehindamiseks ning pidaja poolse tagasiside saamiseks. ÜHO on otsustanud, et enesehindamist hakatakse läbi viima Haridussilmas. Esmalt juhtidele ning seejärel lisatakse õpetajate ja vajadusel teiste mudelid. Lisaks pidaja tagasisidele on vajalik saada ka teiste osapoolte tagasisidet (Nt õpetajad, lapsevanemad, õpilased, partnerid jne).
360 kraadi hindamise protsess on erinev tavapärasest enesehindamise protsessist. Seda ei saa praeguseks arendatud enesehindamise keskkonnas teostada ilma täiendava arenduseta.
Ette on näha, et enesehindamiste maht on järgmistel aastatel kasvamas, kuna kehtestatakse kohustusliku arenguvestluste ning atesteerimissüsteem üldhariduskooli juhtidele, mis tõenäoliselt edaspidi laieneb kutseõppeasutuste ja koolieelsete lasteasutuse juhtidele. Mahud suurenevad ka õpetajate karjäärimudeli rakendamisega.
Lahendamist vajav küsimus
Kuna 360 teenus sulgub 30.11.2024, on vaja otsustada, kuidas edasi liikuda: kas teha Haridussilmas puuduolev arendus või osta 360 kraadi hindamist teenusena mõne välise partneri käest riigihanke korras.
Sobiva lahenduse leidmiseks on vaja üle vaadata ärivajadused ja erinevate lahenduste plussid ja miinused.
Ärivajadused
1) Keskkond, kus haridus- ja noortevaldkonna juhid ja töötajad (nt juhid, lasteaiaõpetajad, kooliõpetaja erinevatel tasemetel) saavad läbi viia hindamist erinevate kompetentsimudelite alusel loodud 360 kraadi tagasiside metoodika alusel. Seega peab saama sisestada mitu mudelit, mis vastaksid erinevate professioonide vajadustele.
2) Digivahendis peavad saama lisaks enesehindajale anda tema kompetentsidele hinnangu ka erinevate sidusrühmade esindajad. Nt pidajad, kolleegid, vanemad, õpilased, partnerid hindavad enesehindajat tema enesehindamise protsessi käigus. Välistele hindajatele on sõltuvalt sidusrühmast vaja sisestada oma mudelid. Õpilastele nt on vaja lihtsustatud mudelit jne.
3) Hindamisele ligipääs on enesehindajatele ja välistele hindajatele automaatne ja ei nõua käsitsi administreerimist.
4) Enesehindamise ja väliste partnerite mudeleid peab saama HTMi või Harno töötaja ise täiendada ja lisada.
5) 360 kraadi hindamisel kogutud andmed peavad jääma kasutatavaks samas keskkonnas, kus toimuvad teised enesehindamised.
6) Keskkond peab olema turvaline ja stabiilne ning andmetele ligipääs tagatud järjepidevalt.
Lahendus 1
360 hindamist hakatakse viima läbi Haridussilmas. Selleks on vaja teha arendus, kus enesehindajal on võimalik käivitada oma enesehindamise vormilt väliste partnerite täidetav hindamine erinevatele sidusrühmade esindajatele loodud mudelite alusel.
Mudelite lisamine ja sidusrühmade esindajatele rollipõhiselt avaldamine on Haridussilmas täna olemas. Juurde on vaja arendada enesehindamise alamhindamiste käivitamine.
Arendusvajaduse kirjeldus: 360 tagasiside andmekorje lahenduse esialgne skoop
Figma näited:
Arendaja on hinnanud tööde mahuks 800-1200h. Kui võtta tunni hinnaks 60 eurot, siis 1000h juures on maksumus 60000 eurot, millele lisandub käibemaks.
Plussid:
+ ÜHO eraldatud vahendite alusel on loodud enesehindamise ja väliste partnerite mudelite sisestamise ja haldamise keskkond, st mudeleid saab HTMi või Harno töötaja juba praegu ise sisestada või täiendada.
+ Mudeleid saab anda täitmiseks asutuse või EHISes märgitud töökoha põhiselt.
+ Välistele partneritele saab luua sidusrühma põhised mudeleid ning enesehindaja saab määratud rolli kaudu isikukoodi põhiselt anda need välistele partneritele täitmiseks.
+ Kasutajate autoriseerimine käib EHISe kasutajate ja pedagoogide registri põhiselt, ei eelda käsitsi küsimustiku avamist keskse teenuse pakkuja poolt.
+ Kõik hindamised toimuvad ühes keskkonnas ja andmed jäävad isiku põhiselt talle kasutatavaks.
+ Keskkond on arendatud kaasaegsetele põhimõtetel ning autentimine käib HARIDi põhiselt.
+ Arendamiseks on võimalik kasutada ESF toetuse vahendeid.
+ Võimaldab laiendada sihtrühma ja kasusaajata hulka ilma otseseid kulusid kaasa toomata.
+ Kogutud andmeid on võimalik kasutada asutuse arendustegevuse planeerimisel ja enesehindamisel ning pidaja ja riigi tasandi aruannetes.
Miinused:
_ Vajab täiendavat arendust ca 60 000 euro eest, millele lisandub käibemaks, kuid kulu on abikõlblik ESF toetuse mõttes.
_ Arendus võtab aega ca 2 kuud ja saab toimuda 2025 alguses.
Lahendus 2
Osta 360 kraadi hindamist sisse mõnelt väliselt partnerilt nende pakutava toote näol.
Turu-uurimise käigus on 2023. a hinnapakkumised võetud kahelt võimalikult partnerilt:
1) Tripod, kes küsib ühe ankeedi eest 45 eurot + käibemaks, millele lisandub mudeli sisestamise tasu 1000 eurot. Kogu vastajate administreerimine jääb käsitööna HTMi või Harno töötaja peale.
2) Fontes PMP OÜ, kes küsib ühe ankeedi eest 370 eurot + käibemaks, tingimusel, et on kuni 10 vastajat ja mudel on sama. 360 on hetkel 5 sidusrühma, millel igaühel on vähemalt 3 esindajat. Seega on mudeleid vähemalt 6 ja hindajaid 15. Seega hinnapakkumuse tingimused ei ole täidetavad.
Andmete vahetamise küsimused ei ole lahendatud ning ilmselt küsivad partnerid liidestuste väljaarendamise eest eraldi tasu.
Vt täpsemalt: 360 hindamine
Plussid:
+ Väline partner pakub teenusena digikeskkonda 360 kraadi hindamise läbiviimiseks.
Miinused:
_ Välistele hindajatele ei saa sidusrühma spetsiifikast lähtuvaid mudeleid sisestada, sest eeldatakse ühe mudeli olemasolu, mitte mitme.
_ Iga mudeli uuendus toob lisakulu.
_ Hindajad ei pääse hindamistele automaatselt ligi, sest ei toimu automaatset autoriseerimist.
_ HTMi või Harno töötaja ei saa ise mudeleid sisestada või täiendada, iga uuenduse eest tuleb teenuse pakkujale maksta täiendav tasu.
_ Andmed on keskselt ühes keskkonnas kasutatavad, kui on välja arendatud vajalikud liidestused, mis eeldavad täiendavate kulude tegemist.
_ Keskkonna turvalisus ja stabiilsus pole täna hinnatav, sest me ei tunne seda keskkonda.
_ Riigihanke korraldamine tulemuste selgumiseni võib võtta kuni 6 kuud.
_ Teenust ei saa rahastada ESF vahenditest.
_ Teenuse käivitamine ja partnerile mudelite äriloogika selgitamine võtab aega.
_ Lahendus pole jätkusuutlik.
_ Mahtude suurenemisel läheb teenuse ostmine järjest kulukamaks.
_ Kui ankeet maksab 45 eurost kuni 370 euroni ühe hinnatava kohta, siis on kulu keskmiselt100 000 – 370 000 aastas.