Projekta nosaukums: “IT atbalsta sistēmas prototips atgriezeniskās saites sniegšanai skolēnu snieguma uzlabošanai tekstpratības un rēķinpratības apguvei”

Vienošanās Nr. 1.1.1.1/19/A/076

Projekta partneris: SIA “Izglītības sistēmas”

Projekta īstenošanas termiņš: 01.09.2020. – 31.08.2023.

Finansējums: Kopējās izmaksas: 645 893,75 EUR, LU daļa 344 706,25 EUR

Projekta zinātniskā vadītāja: LU Starpnozaru izglītības inovāciju centra direktore, vadošā pētniece, Dr.paed. Dace Namsone

Projekta administratīvā vadītāja: Laine Blūma

Projekta mērķis:

Projekta mērķis ir ieviest uz pierādījumiem un uz datiem balstītu lēmumu pieņemšanu izglītības nozarē. Tas ļaus salīdzināt dažādas mācību un mācīšanās prakses, ļaujot skolotājiem un skolu vadītajiem pieņemt uz pierādījumiem balstītus lēmumus, lai uzlabotu izglītības kvalitāti. Skolas sasniegumu salīdzinājums, ieviešot ari skolēnu individuālās izaugsmes dinamiku, ļaus pašvaldībām ka skolu dibinātājam un finansētājam pieņemt uz datiem balstītus lēmumus par budžeta veidošanu, skolotāju stimulēšanu un skolu tīkla optimizāciju.

Plānotie rezultāti: - Pētniecībā un uz IT balstītas atbalsta sistēmas prototips automatizētai datu analīzei, pārvaldībai un komunikāciju pakalpojumam; - Prototipa formāls apraksts un infrastruktūra, ieskaitot statistiskās apstrādes un datu organizācijas modeļu aprakstus un algoritmu specifikācijas; - Uz IT balstītas atbalsta sistēmas prototipa validācija pamatskolu praksē; - Ieteikumi turpmākai prototipa uzlabošanai.

Projekts tiks īstenots ar Eiropas reģionālās attīstības fonda atbalstu, darbības programmas "Izaugsme un nodarbinātība" 1.1.1. specifiskā atbalsta mērķa "Palielināt Latvijas zinātnisko institūciju pētniecisko un inovatīvo kapacitāti un spēju piesaistīt ārējo finansējumu, ieguldot cilvēkresursos un infrastruktūrā" 1.1.1.1. pasākuma "Praktiskas ievirzes pētījumi" ietvaros. 

Projekts tiks īstenots līdz 2023.gada 31.augusta, kopējās izmaksas - 645 893,75 EUR.

Papildu informācija: 

Dace Namsone, projekta zinātniskā vadītāja, dace.namsone@lu.lv
Laine Blūma, projekta administratīvā vadītāja, laine.bluma@lu.lv 

 

29.09.2020.

2020. gada 1.septembrī Latvijas Universitātes Starpnozaru izglītības inovāciju centrs sadarbībā ar SIA “Izglītības sistēmas” uzsāka projekta “IT atbalsta sistēmas prototips atgriezeniskās saites sniegšanai skolēnu snieguma uzlabošanai tekstpratības un rēķinpratības apguvei” īstenošanu.

Projekta ietvaros tiks izstrādāts pētniecībā un uz IT balstītas atbalsta sistēmas prototips automatizētai datu analīzei, pārvaldībai un komunikāciju pakalpojumam. Projekta mērķis ir ieviest uz pierādījumiem un uz datiem balstītu lēmumu pieņemšanu izglītības nozarē. Tas ļaus salīdzināt dažādas mācību un mācīšanās prakses, ļaujot skolotājiem un skolu vadītajiem pieņemt uz pierādījumiem balstītus lēmumus, lai uzlabotu izglītības kvalitāti. Skolas sasniegumu salīdzinājums, ieviešot ari skolēnu individuālās izaugsmes dinamiku, ļaus pašvaldībām ka skolu dibinātājam un finansētājam pieņemt uz datiem balstītus lēmumus par budžeta veidošanu, skolotāju stimulēšanu un skolu tīkla optimizāciju.

Laika periodā no 01.09.-30.11.2020.:

Uzsākti vairāki paralēli darbi, lai sasniegtu pirmās aktivitātes (Rūpnieciskais pētījums – zinātniskās literatūras un lokālās situācijas analīze, prototipa konceptuāla modelēšana) ietvaros definētos rezultātus: 

  1. Veikta padziļināta zinātniskās literatūras analīze par skolēniem un skolotājiem aktuālas atgriezeniskās saites formu un saturu, t.i., kāda informācija ir nozīmīga skolēniem, lai motivētu mācīties, savukārt skolotājiem sniegtu priekšstatu par satura apguvi, stundas produktivitāti mācību procesā, kā arī nepieciešamajiem savas profesionālās pilnveides risinājumiem. Literatūras apskatā ietverta informācija par pašreizējo aktuālo starptautisko praksi; 
  2. Veikta padziļināta zinātniskās literatūras analīze par skolēnu snieguma datu izmantošanu atšķirīgas atgriezeniskās saites iegūšanai dažādos skolas, kā organizācijas līmeņos (skolas vadība, skolotāji, skolēni); 
  3. Veikta pieejamo skolēnu snieguma par 2018./2019.m.g. un 2019./2020.m.g. valsts pārbaudes darbos matemātikā un latviešu valodā datu analīze (Liepājas skolu 3., 6. un 9.klasēs), lai izstrādātu potenciālo datu analīzes algoritmu un noteiktu iespējamos datu analīzes šķērzgriezumus, kurus būtu iespējams izmantot jēgpilnas atgriezeniskās saites sniegšanai skolotājiem. Datu analīzes algoritma modelēšana balstīta sintezējot un pilnveidojot zinātniskās literatūras avotos aprakstītās pieejas; 
  4. Apkopoti raksturīgie rēķināšanas prasmes novērtēšanai izmantotie uzdevumu piemēri 3., 6. un 9. klašu grupās, analizējot pieejamos valstu pārbaudes darbus. Izveidotas raksturīgo uzdevumu tipu grupas, kuras izmantotas, lai izveidotu pirmos skolēnu vērtēšanas IT sistēmas piemērus (raksturīgo uzdevumu digitālā formāta izveidošana). 
  5. Uzsākts darbs pie atgriezeniskās saites par skolēna rēķināšanas prasmi sniegšanas teorētiskā modeļa – sistēmas konceptuālā apraksta izstrādes, identificējot nozīmīgākās prasmju dimensijas, kritērijus, snieguma līmeņus. Teorētisko modeli turpmākajos projekta posmos plānots izmantot IT atbalsta sistēmas prototipa veidošanai. 
  6. Saistībā ar projekta 1.aktivitātes pirmo divu mēnešu rezultātiem iesniegts pieteikums (anotācija) starptautiskajai konferencei “15th annual International Technology, Education and Development Conference”Valensijā, Spānijā. 

     Otrās aktivitātes (Rūpnieciskais pētījums – uz IT balstītas atbalsta sistēmas prototipa dokumentācijas izstrāde) ietvaros ir izveidots pirmais iespējamais datu modeļa apraksts - datu struktūras un to saistība. Ir uzsākts meklēt iespējamās atvērtā koda programmatūras, kurām jau ir izstrādāta noteikta funkcionalitāte - piemēram, zīmēšanas. Paralēli ir uzsākts darbs pie kritēriju izveides, kuri ir nepieciešami atgriezeniskās sistēmas pilnvērtīgai darbībai. Kā izejmateriāls tiek izmantoti izveidoti paraugjautājumu tipi, kuri var būt sastopami testos dažādām klašu grupām. 

       Visu projekta īstenošanas laiku norisinās 5.aktivitāte (Rūpnieciskais pētījums – pastāvīgas izplatīšanas aktivitātes). Gan finansējuma saņēmēja, gan sadarbības partnera telpās sabiedrībai redzamā vietā ir izvietoti informatīvi plakāti, kas atbilst normatīvajos aktos noteiktajām prasībām un ir saskaņā ar Vadošās iestādes 2016.gada 30.decembra apstiprinātajām ES fondu 2014.–2020.gada plānošanas perioda publicitātes vadlīnijām. Tiek atjaunota informācija interneta vietnēs www.lu.lv un www.e-klase.lv .

 

12.03.2021.

Laika periodā no 2020. gada 1.decembra līdz 2021.gada 28.februārim

Latvijas Universitātes Starpnozaru izglītības inovāciju centrs sadarbībā ar SIA “Izglītības sistēmas” turpināja projekta “IT atbalsta sistēmas prototips atgriezeniskās saites sniegšanai skolēnu snieguma uzlabošanai tekstpratības un rēķinpratības apguvei” īstenošanu, lai sasniegtu pirmās darbības (Rūpnieciskais pētījums – zinātniskās literatūras un lokālās situācijas analīze, prototipa konceptuāla modelēšana) un otrās darbības (Rūpnieciskais pētījums – uz IT balstītas atbalsta sistēmas prototipa dokumentācijas izstrāde) definētos rezultātus:

1.darbības ietvaros paveiktais:

  1. Sagatavoti 11 valsts pārbaudes darbu datu analīzes pārskatu piemēri izglītības iestāžu vadībām un viens pārskats pašvaldības vadībai, lai demonstrētu iespējamos atgriezeniskās saites sniegšanas risinājumus pašvaldības, skolas un klases līmenī. Pārskatos izstrādē, analizējot datus, izmantots iepriekšējā ceturksnī izstrādātais datu analīzes algoritms skolām ar atšķirīgu vidējo skolēnu snieguma līmeni.
  2. Veiktas 11 diskusijas (14.12.-18.12.2020.) ar Liepājas izglītības iestāžu vadību pārstāvjiem un viena diskusija ar Liepājas pašvaldības vadību, lai iegūtu atsauksmes par sagatavotajiem valsts pārbaudes darbu datu pārskatu piemēriem un precizētu izglītības iestāžu vadītāju vajadzības saistībā ar atgriezeniskās saites nodrošināšanu skolēna snieguma uzlabošanai nozīmīgu intervenču sagatavošanai.
  3. Turpināta padziļināta zinātniskās literatūras analīze par skolēniem un skolotājiem aktuālas atgriezeniskās saites formu un saturu, kā arī uzsākta literatūrā aprakstīto pieeju apkopošana par skolas vadībai nozīmīgas atgriezeniskās saites saturu, kura būtu izmantojama skolas efektivitātes uzlabošanai.
  4. Uzsākta padziļināta zinātniskās literatūras apkopošana un aktuālu teorētisko modeļu analīze par datos balstītu lēmumu pieņemšanu skolas efektivitātes uzlabošanai.
  5. Sagatavots un iesniegts publicēšanai viens zinātniskais raksts, kura ietvaros apkopotas atziņas par validēto valsts pārbaudes datu analīzes modeli un dažādiem iespējamajiem datu analīzes šķērsgriezumiem, kuri būtu efektīvi izmantojami atgriezeniskās saites sniegšanai pašvaldības, skolas un klases līmenī.
  6. Izstrādāta pirmā versija rēķinpratības konceptuālajam modelim, kuru turpmāk plānots izmantot atbilstošu diagnosticējošo darbu sagatavošanā, kā arī IT atbalsta sistēmā datu struktūru, tabulu un to savstarpējo savienojumu izstrādē.
  7. Izstrādātas pirmās versijas tekstpratības (testa un atvērto atbilžu) un rēķinpratības diagnosticējošajiem darbiem 7.klasē, ietverot dažāda tipa uzdevumus (testa, atvērto atbilžu, ģeometriskā zīmējuma u.c.), kurus plānots izmantot IT atbalsta sistēmas prototipā atgriezeniskās saites sniegšanai visos līmeņos.

2.darbības aktivitātes:

Ir izveidota pirmā versija IT sistēmas prasību aprakstam: 

1.      izveidots darbplūsmu un moduļu saraksts

2.      datu modeļa (tabulas, to saistības) sākotnējā versija

3.      aprakstīta pirmā versija darbplūsmai par testa jautājumu vadību (jautājumu izveide, papildināšana vai maiņa, kā arī pareizo atbilžu ievade, sasaiste ar atgriezenisko saiti)

Ir izvēlēts potenciālais lietotāju saskarnes risinājums interaktīvajiem rēķinpratības uzdevumiem, kurš spēj nodrošināt parauga uzdevumu funkcionalitāti (figūru zīmēšanu), kā arī sniegt atgriezenisko saiti par skolēna darbībām (piegājienu skaits, laiks, izmantotie rīki, utt.).

Projekts tiek īstenots ar Eiropas reģionālās attīstības fonda atbalstu, darbības programmas "Izaugsme un nodarbinātība" 1.1.1. specifiskā atbalsta mērķa "Palielināt Latvijas zinātnisko institūciju pētniecisko un inovatīvo kapacitāti un spēju piesaistīt ārējo finansējumu, ieguldot cilvēkresursos un infrastruktūrā" 1.1.1.1. pasākuma "Praktiskas ievirzes pētījumi" ietvaros.

Projekts tiks īstenots līdz 2023.gada 31.augustam, kopējās izmaksas - 645 893,75 EUR.

 

15.06.2021.

ERAF projekta “IT atbalsta sistēmas prototips atgriezeniskās saites sniegšanai skolēnu snieguma uzlabošanai tekstpratības un rēķinpratības apguvei” īstenošana turpinās.

1.darbības ietvaros paveiktais:

  1. Uzsākta zinātniskās literatūras un līdzīgu pētījumu iepriekšējās pieredzes apkopošana par vērtēšanas darbu, t.sk., diagnosticējošo darbu validitātes un uzticamības izvērtēšanas iespējām.
  2. Papildināts zinātniskās literatūras analīzes apkopojums par dažādu līmeņu atgriezeniskās saites sniegšanas nozīmi skolas darbības efektivitātes uzlabošanā ar padziļinātu praktisko piemēru (dažādu valstu izglītības pārvaldes institūciju un privāto uzņēmumu izveidoto rīku piedāvātie piemēri) izvērtējumu.
  3. Turpināta padziļināta zinātniskās literatūras analīze par skolēniem un skolotājiem aktuālas atgriezeniskās saites formu un saturu. Uzsākts darbs pie vairāku līmeņu (skolas vadība, skolotājs, skolēns) atgriezeniskās saites sniegšanas modeļa izstrādes un efektīvākā risinājuma izvērtēšanas.
  4. Turpināta padziļināta zinātniskās literatūras apkopošana un aktuālu teorētisko modeļu analīze par datos balstītu lēmumu pieņemšanu skolas efektivitātes uzlabošanai un to izmantošanas iespējām praksē.
  5. Precizēti tekstpratības un rēķinpratības diagnosticējošo darbu trīsdimensionālie ietvari.
  6. Pabeigta tekstpratības diagnosticējošā darba 7.klasei 1. pilotversijas aprobācija 4 izglītības iestādēs, kopā iesaistot 317 skolēnus un 9 skolotājus. Pabeigta rēķinpratības diagnosticējošā darba 7.klasei 1.pilotversijas aprobācija.
  7. Sagatavoti 3 tekstpratības diagnosticējošā darba 1.pilotversijas pārskati.

2.darbības aktivitātes:

Turpinās IOT sistēmas projektēšana, noslēdzot dažu galvenos elementus. Pēc lietotāju saskarnes risinājuma (Geogebra) izvēles ir nostiprināta sadarbība ar to: 

·         noslēgts sadarbības līgums starp “E-klasi” un “International Geogebra Institute” par mācību platformas izmantošanu;

·         izvēlēts labākais risinājums jautājumu (sīklietotņu) glabāšanai, kura notiks izstrādājamajā IT sistēmā  Base64 formātā;

·         izstrādāts uzmetums prasībām sīklietotņu izveidei Geogebra, kā arī nosacījumi, kā var pārbaudīt, vai izstrādātās sīklietotnes atbildīs izstrādājamajai IT sistēmai. 

Tiek turpināts attīstīt visu darbplūsmu aprakstu, ir uzzīmēti lietotāja ceļš un ekrānu skices jautājumu (sīklietotņu) sasaistei starp Geogebra un izstrādājamo IT sistēmu. 

Tika testēts, vai var izstrādāt algoritmu, kurš var automātiski klasificēt tekstpratības uzdevumus ar atvērtajām. Testa laikā ir gūts apstiprinājums, ka, balstoties uz marķētiem datiem jeb skolotāju iepriekš labotām atbildēm, var izveidot mašīnmācīšanās algoritmu, kurš ar 90% precizitāti nosaka, vai uz jautājumu ierakstītā atbilde ir uzskatāma par pareizu vai nepareizu. Balstoties uz šo testu, ir izveidota darbplūsma algoritmu izstrādei un atjaunošanai, kā arī veiktas korekcijas IT sistēmas projektā, jo tur ir jāparedz datu apmaiņa ar mašīnmācīšanās algoritmiem. 

5.darbības ietvaros:

  1. Novadīta viena fokusa grupas diskusija (07.06.2021) ar izglītības iestāžu vadības pārstāvjiem par skolas darbības un efektivitātes uzlabošanas vajadzībām aktuālas atgriezeniskās saites formu, apjomu un saturu. Fokusa grupas diskusijā piedalījās Valmieras Valsts ģimnāzijas, Liepājas 6.vidusskolas un Liepājas 15.vidusskolas vadības pārstāvji, skolu direktori un viņu vietnieki.
  2. Sagatavots un iesniegts viena raksta pieteikums ICERI (International Conference of Education, Research and Innovation) konferencei, kura plānota no 8.-10. novembrim Seviļā, Spānija.
  3. Uzsākta zinātniskā raksta sagatavošana par tekstpratības diagnosticējošā darba aprobācijas un datu validitātes/uzticamības uzlabošanas rezultātiem, kuru plānots iesniegt žurnālā “Studies in Educational Evaluation”.

Projekts tiek īstenots ar Eiropas reģionālās attīstības fonda atbalstu, darbības programmas "Izaugsme un nodarbinātība" 1.1.1. specifiskā atbalsta mērķa "Palielināt Latvijas zinātnisko institūciju pētniecisko un inovatīvo kapacitāti un spēju piesaistīt ārējo finansējumu, ieguldot cilvēkresursos un infrastruktūrā" 1.1.1.1. pasākuma "Praktiskas ievirzes pētījumi" ietvaros.

Projekts tiks īstenots līdz 2023.gada 31.augustam, kopējās izmaksas - 645 893,75 EUR.

 

15.10.2021.
LU Starpnozaru izglītības inovāciju centra zinātniskās grupas paveiktais 1.darbības ietvaros:

  1. Sagatavots zinātniskās literatūras un līdzīgu pētījumu iepriekšējās pieredzes pārskats par vērtēšanas darbu, t.sk., diagnosticējošo darbu validitātes un uzticamības izvērtēšanas iespējām, nosakot optimālās datu analīzes pieejas tekstpratības un rēķinpratības diagnosticējošo darbu validitātes un uzticamības uzlabošanas nolūkos.
  2. Sagatavots zinātniskās literatūras analīzes par skolēniem, skolotājiem un skolas vadībai aktuālas atgriezeniskās saites formu un saturu pārskats. Turpināts darbs pie vairāku līmeņu (skolas vadība, skolotājs, skolēns) atgriezeniskās saites sniegšanas modeļa izstrādes un efektīvākā risinājuma izvērtēšanas.
  3. Izmantojot zinātniskās literatūras analīzes apkopojumu par dažādu līmeņu atgriezeniskās saites sniegšanas nozīmi skolas darbības efektivitātes uzlabošanā uzsākta atgriezeniskās saites modelēšana IT sistēmas vajadzībām. Sagatavots atgriezeniskās saites modelis, kurā ir iespējams individuāliem skolēniem pēc darbu izpildes piešķirt atbilstošus apguves līmeņus, grupēt skolēnus pēc apguves līmeņiem.
  4. Precizēti tekstpratības un reķinpratības diagnosticējošo darbu trīsdimensionālie ietvari (konceptuālie modeļi) izmantojot aprobācijas laikā iegūtās skolēnu atbildes. Abu diagnosticējošo darbu trīsdimensionālos ietvarus plānots izmantot datu analīzes vajazībām, atgriezeniskās saites konstruēšanai un citos mācību priekšmetos  paredzēto diagnosticējošo darbu izveidošanai.
  5. Izmantojot zinātniskajā literatūrā aprakstīto pieredzi un precizēto diagnosticējošo darbu trīsdimensionālo ietvaru, sadarbojoties ar IT arhitektu, sagatavots datu struktūras modeļa prototips, kuru paredzēts izmantot IT sistēmas izveidošanai.
  6. Turpināta padziļināta zinātniskās literatūras apkopošana un aktuālu teorētisko modeļu analīze par datos balstītu lēmumu pieņemšanu skolas effektivitātes uzlabošanai un to izmantošanas iespējām praksē.
  7. Pabeigta rēķinpratības diagnosticējošā darba 7.klasei 1.pilotversijas aprobācija rezultātu analīze, veicot satura un konstrukta validāciju, ticamības aprēķināšanu un diskriminācijas indeksa aprēķināšanu.
  8. Pabeigta tekstpratības diagnosticējošā darba 7.klasei 1.piltoversijas aprobācija, apkopotas aprobācijas laikā iegūtās skolēnu atbildes, apstrādātās kodējot atbilstoši datu analīzes vajadzībām.

Kopā ar LU sadarbības partneri SIA “Izglītības sistēmas” turpinās 2.darbības īstenošana:

Turpinās IT sistēmas projektēšana. Ir izveidotas un skaņotas visas galvenās darbplūsmas ar visām vizualizācijas skicēm:

  1. Rēķinpratības un tekdstpratības uzdevumu ievade un pārbaude. Darbplūsmā ir paredzēts arī jauktā tipa uzdevumi, kas satur gan skaitliska tipa indikatorus, gan teksta tipa indikatorus.
  2. Uzdevumu izsūtīšana, aizpildes statusa apskatīšana;
  3. Atgriezeniskās saites saņemšanai izglītojamajam un pasniedzējam.

Ir pārbaudīta iespēja realizēt uzdevumu ievades darbplūsmu, pieslēdzoties Geogebra sistēmai:

  • Var nolasīt atslēgas atbilstību
  • Var noteikt lauka tipus (skaitlisks vai teksta);
  • Var nolasīt vērtību no lauka;
  • Var saglabāt uzdevumu IT sistēmas prototipā.

Lai pārbaudītu, vai rīkā varēs tehniski izveidot iespēju pasniedzējam saņemt atgriezenisko saiti ne tikai par katru skolēnu vai visu klasi, bet arī pa skolēnu grupām, tika izveidota un pārbaudīta darbplūsma uz desmit dažādu klašu datiem. Darbplūsmas ietvaros klasēs tika statistiski aprēķinātas vairākas skolēnu grupas, balstoties uz skolēnu sniegto atbilžu līdzību. Grupu skaitu un profilu noteica klasterizācijas algoritmi, balstoties uz tajos iebūvēto funkcionalitāti. Tika testēti vairāki algoritmi, izvēloties vienu (AffinityPropagation). Iegūtie rezultāti tika nodoti institūtam to lietderības izvērtēšanai un ieskatam kā varētu veidot atgriezenisko saiti grupu līmenī.
 
Turpinās darbs pie indikatoru kritēriju saraksta un struktūra izveides. Indikatori ir mazākais elements, kurš raksturo uzdevuma mērķi un atbildes interpretāciju atgriezeniskai saitei. Kritēriju sarakstam un struktūrai jau ir veikti vairāki saskaņošanas posmi. Noslēdzoties šim darbam, tiks uzsākti apjomīgāki IT sistēmas programmēšanas darbi.

Notikušas arī vairākas projekta rezultātu izplatīšanas aktivitātes:

  1. Novadīts viens seminārs (25.08.2021) ar Valmieras novada izglītības iestāžu vadības pārstāvjiem par skolas darbības un efektivitātes uzlabošanas vajadzībām aktuālas atgriezeniskās saites formu, apjomu un saturu. Semināra laikā aplūkoti pētnieku apstrādātie dati un to dažādie šķērsgriezumi, kurus plānots piedāvāt skolām potenciālās IT sistēmas gadījumā.
  2. Sagatavota un iesniegta publikācija “Development and validation of diagnostic assessment instrument for numeracy skills in 7th grade” ICERI (International Conference of Education, Research and Innovation), kur plānots iekļaut konferences tēžu krājumā. Konference plānota no 8.-10. novembrim Seviļā, Spānija. Rakstā plānots atspoguļot rēķinpratības diagnosticējošā darba aprobācijas procesu un darba validitātes/uzticamības izvērtēšanas un uzlabošanas iespējas.
  3. Uzstāšanās EARLI (The European Association for Research on Learning and Instruction), Zviedrija, Stokholma 23.-27.augusts tiešsaistes konferencē ar rakstu “Using student achievement data for decision making to improve school effectiveness”.
  4. Turpināta zinātniskā raksta sagatavošana par tekstpratības diagnosticējošā darba aprobācijas un datu validitātes/uzticamības uzlabošanas rezultātiem, kuru plānots iesniegt žurnālā “Studies in Educational Evaluation”.
 

14.12.2021.

Projektā iesācies jauns posms – prototipa izstrād

Pamazām noslēdzas 1. darbības īstenošana:

  • Izmantojot zinātniskajā literatūrā gūtās atziņas par tekstpratības un rēķinpratības vērtēšanu, izstrādāts IT prototipa konceptuāls modelis, kurš apraksta diagnosticējošā darba uzdevumu indikatoru struktūru un atgriezeniskās saites sniegšanas struktūru.
  • Sagatavota dažāda līmeņa (skolēns, skolotājs, skolas vadība) atgriezeniskās saites modeļa, kurš apraksta satura apguves līmeņu deskriptorus, pilotversija. Izveidotais atgriezeniskās saites modelis sniedz iespēju aprakstīt skolēna sniegumu četrās grupās atbilstoši SKOLA2030 izstrādātajai metodikai (sācis apgūt, turpina apgūt, apguvis, apguvis padziļināti). Tāpat atgriezeniskās saites modelis sniedz iespēju aprakstīt skolēnu grupu sniegumu un iespēju skolotājam plānot nepieciešamās intervences.
  • Sagatavots pārskats par zinātniskajā literatūrā aktuāliem teorētiskajiem modeļiem datos balstītu lēmumu pieņemšanai skolas efektivitātes uzlabošanai un izmantošanai praksē.

Turpinās 2.darbības īstenošana:

  • Uzsākta jaunu diagnosticējošo darbu uzdevumu izstrāde: 1) tekstpratībā, lai novērtētu skolēnu zināšanas un prasmes dabaszinību kontekstā; 2) rēķinpratībā, lai novērtētu skolēnu zināšanas un prasmes darbā ar skaitļiem.
  • Uzsākta rēķinpratības darba par sakarībām un funkcijām un tekstpratības darba latviešu valodā digitalizācija un 2.pilotversijas izstrāde aprobācijas vajadzībām, precizējot 1.pilotversijas aprobācijas laikā konstatētās nepilnības un neprecizitātes.
  • Modelēta skolēnu grupu izdalīšana pēc to snieguma tekstpratības (latviešu valoda) darbā, izmantojot Raša (Rasch) modeli.
  • Sadarbojoties ar IT arhitektu, precizēts IT prototipa konceptuālais modelis, datu struktūra un indikatoru struktūra, kuras paredzētas IT sistēmas izveidošanai.

Ir uzsākta 3. darbības īstenošana:

Uzsākta IT sistēmas izstrāde, izstrādes darbi ir sadalīti četros posmos:

1.posmā notiek datu modeļa uzprogrammēšana, pieslēgšanās Geogebra un informācijas nolasīšana no katras sīklietotnes;

2.posmā tiek izveidota saskarne Geogebra vidē izveidoto uzdevumu importam, sasaistei ar klašu grupu, pratībām un citiem elementiem, kurus izmantos darbu veidošanā  un atgriezeniskās saites parādīšanā;

3.posmā tiek izveidota skolotājam pieejamā funkcionalitāte un saskarne;

4.posmā tiek izveidota skolēnam pieejamā funkcionalitāte un saskarne.

Šobrīd tuvojas noslēgumam pirmās fāzes programmēšanas darbi.

  • Veicot datu modeļa programmēšanu, ir koriģēts izstrādāto indikatoru lietojums – tika nodalīta uzdevumu raksturojošā indikatora koda daļa no atbildes raksturojošā indikatoru koda daļas. Uzdevumu raksturojošā koda daļa tiks ievadīta kā Geogebra sīklietotnes nosaukums. Tas ļaus saīsināt ievadāmās informācijas apjomu uzdevumu izstrādātājiem, kā arī samazinās veicamo pārbaužu skaitu, importējot uzdevumu sistēmā. Šādam iedalījumam jau ir izveidoti testa uzdevumi, un tie ir nolasāmi ar izstrādē esošo IT sistēmu. 
  • Ir izveidota instrukcija kodu ierakstam Geogebra lietotnēs.
  • IT izstrādes rezultātā radušās izmaiņas tiek ieviestas arī IT sistēmas dokumentācijā.

5. darbības ietvaros paveiktais:

  • Publicēts raksts “Development and validation of diagnostic assessment instrument for numeracy skills in 7th grade” ICERI (International Conference of Education, Research and Innovation), konferences tēžu krājumā.
  • Dalība ICERI konferencē ar referātu no 8.-10. novembrim Seviļā, Spānija. Referātā atspoguļots rēķinpratības diagnosticējošā darba aprobācijas process un darba validitātes/uzticamības izvērtēšanas un uzlabošanas iespējas.
  • Turpināta zinātniskā raksta sagatavošana par tekstpratības diagnosticējošā darba aprobācijas un datu validitātes/uzticamības uzlabošanas rezultātiem, kuru plānots iesniegt žurnālā “Studies in Educational Evaluation”.

15.03.2022.

Dokumentācija ir izstrādāta, turpinās prototipa izstrāde un sākas tā validēšana

Noslēdzās 1. un 2.aktivitātes īstenošana:

Precizēti un iesniegti zinātniskās analītiskās literatūras apskats par atgriezeniskās saites nodrošināšanas metodēm skolēniem un labāko atgriezeniskās saites pieeju kopsavilkums Latvijā un ārzemēs, kā arī IT sistēmas konceptuālais apraksts un IT sistēmas datu modelis – datu sadalījums starp darbu sagatavēm, pieejamajiem darbiem, testēšanā esošajiem darbiem, skolēnu, klašu un skolu atbildēm katra darba ietvaros. Modelis ir izveidots elastīgs un ļauj mainīt nosacījumus un parametrus. Piemēram, jau izstrādes gaitā sistēmā ir pievienots vēl viens indikators – atbilžu veids “lielums”; ir atrasta un realizēta iespēja saglabāt visas skolēnu veiktās atbildes, kas sniedz iespēju tālāk analizēt arī tipiskās kļūdas un izprast, vai un kur ar konkrēto uzdevumu nav sasniegts paredzētais mērķis.

Prototipa izstrādes aktivitātes ietvaros:

Ir izstrādāta, notestēta un nodota lietošanai IT sistēmas daļa, kas ļauj izveidot darbus, piešķirt tiem pazīmes, pievienot uzdevumus no Geogebra lietotnēm, apskatīt un pārbaudīt tos pēc sistēmā izveidotajiem indikatoriem. Šobrīd sistēmā jau ir augšupielādēts viens pilns darbs tekstpratībā.

IT sistēmā tuvojas testēšanas noslēgumam skolotājiem un skolēniem pieejamā daļas, izņemot rezultātu parādīšanu:

· Skolotāju sistēmas daļa ir savietota ar E-klasi, tajā var veikt žurnālu importu, izvēlēties attiecīgās klases skolēnus, ieplānot tiem darbu; atlasīt kādu no sistēmā pieejamajiem darbiem, norādīt testa datumu un sākuma laiku.

· Skolēniem ir izveidots navigācijas ietvars, iespēja pārvietots par dažādiem uzdevumiem viena darba ietvaros. Ir atrasta un realizēta iespēja skolēnam parādīt viņa paša atbildes katrā uzdevumā.

Šajā laikā posmā ir pilnībā izstrādātas atgriezeniskās saites vizualizācijas un pasniegšanas alternatīvas. Šobrīd tiek plānoti atgriezeniskās saites ievades programmēšanas darbi, kā arī izstrādāti algoritmi, kā sistēmā ieviest teorētiskā aprēķina formulas.

Ir uzsākta projekta vidusposma zinātniskās kvalitātes izvērtējuma atskaites sagatavošana, apkopojot 18 mēnešu laikā paveikto.

Uzsākta 4.aktivitātes “Prototipa validēšana” īstenošana:

· Noslēgti līgumi ar IT atgriezeniskās saites sistēmas aprobācijā iesaistītajām skolām.

· Precizēti IT sistēmas aprobācijai paredzētie 3 tekstpratības prasmes apguvi diagnosticējošie darbi un 2 rēķinpratības darbi.

· Uzsākta sagatavoto tekstpratības un rēķinpratības darbu papīra versiju digitalizēšana un ievietošana IT sistēmā.

· Uzsākta treniņuzdevumu izstrāde tekstpratībā un rēķinpratībā, lai sniegtu iespēju skolēniem iepazīt IT sistēmas vidi pirms diagnosticējošo darbu izpildi un mazinātu digitālās vides ietekmi uz skolēnu sniegumu.

· Uzsākts darbs pie regulāras komunikācijas ar skolām, kuras plānots iesaisīt aprobācijas procesā. Izveidotas darbu izpildes instrukcijas.

 

17.06.2022.

Prototipa izstrāde turpinās, uzsākam tā validēšanu.

Noslēgusies projekta īstenošanas pirmā puse. Līdz ar to sagatavota un iesniegta projekta vidusposma zinātniskā atskaite, kurā aprakstīti projekta pirmā perioda laikā sasniegtie rezultāti un otrā perioda laikā plānotās darbības.

Prototipa izstrāde turpinās.

Sagatavoti un validēti diagnosticējošo darbi (papīra versijā) – rēķinpratībā (matemātikā – attiecība, funkcijas; dabaszinībās) un tekstpratībā (vēsturē, dabaszinībās) ar mērķi pārbaudīt rēķinpratības un tekstpratības trīsdimensionālo ietvaru un precizēt testelementu formulējumus. Darbu validēšana notika 4 skolās, piedaloties 274 skolēniem tekstpratības un 290 skolēniem rēķinpratības darbu izpildē.

Digitalizēti sešu diagnosticējošo darbu testelementi GeoGebra vidē un sasaistīti, izmantojot indikatorus, ar izveidoto prototipu.

Uzsākts Prototipa validēšanas pirmais posms.

Sagatavota metodoloģija prototipa pirmā posma validēšanas vajadzībām, veidojot reprezentatīvu izlasi.

Veikts prototipa pirmais validēšanas posms 5 skolās (validēšanā piedalījās 450 skolēni) 7.klasēs, kura laikā ievākti dati digitālas atgriezeniskās saites modelēšanai un automātiskā klasifikatora apmācībai.

Publicitātes aktivitātes.

Prezentēti un apspriesti diagnosticējošo darbu (papīra versijā) rezultāti skolu vadību komandām 13.jūnijā profesionālās pilnveides programmas “Metodiskais atbalsts skolas kā mācīšanās organizācijas veidošanai pašvaldībā” ietvaros. Pasākumā piedalījās 21 skolas vadības pārstāvji, t.sk., 4 skolu pārstāvji, kurās tika veikta diagnosticējošo darbu validēšana.

16.09.2022.

Notiek prototipa validēšana.

Sadarbībā ar skolām uzsākta prototipa validēšana, diskusijā par pirmajiem rezultātiem iesaistās skolu vadības. Š.g. 17.augustā profesionālās pilnveides programmas “Metodiskais atbalsts skolas kā mācīšanās organizācijas veidošanai pašvaldībā” ietvaros diagnosticējošo darbu (digitālā versijā) rezultāti apspriesti ar 18 skolu vadības komandām, t.sk., 5 skolām, kurās tika veikta diagnosticējošo darbu validēšana.

Aktuālais 3. aktivitātē – prototipa izstrāde atgriezeniskas saites sniegšanai un skolenu snieguma uzlabošanai lasītprasmes un rēķinpratības apguve

Pēc veiktās diagnosticējošo darbu digitālās versijas validēšanas pilnveidota skolotāja un skolēna lietotāju saskarne.

Izveidota demo vide testelementu/uzdevumu veidotājiem, paredzot iespēju pārbaudīt uzdevumu digitālo versiju funkcionalitāti un precizitāti.

Izveidots backoffice modulis, kurš prototipa validēšanas brīdī ekspertiem ļauj sekot līdzi uzdevumu izpildes rādītājiem klasēs un skolās.

Izveidots modulis, kurš paredzēts izpildīto digitālo uzdevumu manuālai labošanai ekspertu līmenī.

Sagatavota darbu sagatavošanas un izpildīšanas sistēmā instrukcija skolotājiem un skolēniem.

4. aktivitāte - prototipa validēšana

Apmācīti 6 digitālo testelementu vērtēšanas eksperti lietot sistēmā izveidoto uzdevumu vērtēšanas moduli.

Eksperti novērtējuši prototipa validēšanas laikā iegūtās skolēnu atbildes 3 rēķinpratības darbos (matemātika, dabaszinātnes) un 3 tekstpratības darbos (vēsture, dabaszinātnes, latviešu valoda). Ekspertu vērtējumu paredzēts izmantot automātiskā klasifikatora apmācīšanai, lai 2 prototipa validēšanas ciklā būtu iespējams uzdevumus ar atvērtajām atbildēm vērtēt automātiski.

Izvērtēti prototipa un diagnosticējošo darbu digitālo versiju validēšanas rezultāti, identificējot skolēnu sniegto atbilžu ievākšanas tehniskos ierobežojumus, sagatavoto uzdevumu saturiskās un digitalizācijas laikā radušās nepilnības, atgriezeniskās saites aprēķināšanas algoritma trūkumus.

Veikts rēķinpratības uzdevumu audits, lai identificētu nepieciešamos uzdevumu saturiskos uzlabojumus atbilstoši izveidotajam rēķinpratības konstruktam, uzsākot prototipa 2. validācijas ciklu.

Precizēti rēķinpratības uzdevumi (papīra versijā) prototipa un digitālo uzdevumu 2. validācijas cikla vajadzībām.

5. aktivitāte - pastāvīgas izplatīšanas aktivitātes

Sagatavots pieteikums (abstrakts) ICERI2022 (15th annual International Conference of Education, Research and Innovation) konferencei Seviļā, Spānija. Pieteikuma tēma “Towards the Development of an Online Diagnostic Assessment and Automated Feedback System to Support Students Literacy and Numeracy Learning”.

14.12.2022.

Tiek sagatavoti un iesniegti dalībai starptautiskās konferencēs raksti par projekta pētījuma rezultātiem, turpinās prototipa validēšanas process

4. aktivitātes – prototipa validēšana, ietvaros paveiktais

1. Veikta sistēmas 504. kļūdas skolēna, skolotāja un administratora vidēs cēloņu noteikšana un risinājumu testēšana. Izveidots risinājums kļūdas novēršanai.

2. Papildināta sistēmas datu struktūra, ieviešot jaunu skolēna atbilžu indikatoru atvērto atbilžu vērtēšanai vairākos līmeņos.

3. Pilnveidotas rēķinpratības uzdevumu digitālās versijas sistēmā 2. validācijas cikla vajadzībām.

4. Uzsākts sistēmas 2.validācijas cikls un rēķinpratības darbu testēšana, lai iegūtu datus atgriezeniskās saites modelēšanai skolēniem un skolotājiem.

5. Veikts tekstpratības uzdevumu audits, lai identificētu nepieciešamos uzdevumu saturiskos uzlabojumus atbilstoši izveidotajam tekstpratības konstruktam, uzsākot prototipa 2. validācijas ciklu.

6. Precizēti tekstpratības uzdevumi (papīra versijā) prototipa un digitālo uzdevumu 2. validācijas cikla vajadzībām.

Liels uzsvars šajā posmā liekams uz 5. aktivitātes – pastāvīgas izplatīšanas aktivitātes, īstenošanu

1. Sagatavots pieteikums (pilns raksts) par pētījuma rezultātiem un iesniegts ICASE 2023 (International Council of Associations for Science Education) konferencei Dubaijā, Apvienotajos Arābu Emirātos. Raksta tēma “Online diagnostic assessment system in support of numeracy teaching and learning”. Pieteikums no konferences organizatoriem ir apstriprināts.

2. Sagatavots pieteikums (paplašinātais abstrakts – extended abstract) par pētījuma rezultātiem un iesniegts EARLI 2023 (European Association for Research on Learning and Instruction) konferencei “20th Biennial EARLI Conference” Salonikos, Grieķija. Raksta tēma “Automated feedback system in support of numeracy learning”.

3. Sagatavots pieteikums (pilns raksts) par pētījuma rezultātiem un iesniegts CSEDU 2023 (International Conference on Computer Supported Education) konferencei “15th International Conference on Computer Supported Education” Prāgā, Čehija. Raksta tēma “Towards a development of automated feedback and diagnostic assessment system in support of literacy teaching and learning”.

13.03.2023.

Prototips tiek validēts, aprobējot skolās gan tekstpratības, gan rēķinpratības darbus.

4. aktivitāte – prototipa validēšana, aktīvi turpinās

  1. Sistēmā izveidoti skolotāja un skolēna testa profili, izveidoto diagnosticējošo darbu un tajos ietverto testelementu pārbaudei.
  2. Veikta tekstpratības darba testelementu modificēšana un indikatoru precizēšana atbilstoši pirmajā sistēmas testēšanas fāzē identificētajām nepilnībām.
  3. Veikta modificēto rēķinpratības darbu aprobācija Jelgavas Valsts ģimnāzijā, lai fiksētu nepieciešamos uzlabojumus sistēmā un iegūtu datus atgriezeniskās saites precizēšanai.
  4. Uzsākta atgreizeniskās saites algoritma precizēšana, modelējot dažādus atgriezeniskās saites gadījumus.
  5. Uzsākts modificētā tekstpratības diagnosticējošā darba aprobācija Tukuma 2.vidusskolā.

5. aktivitātes ietvaros turpinās dalība konferencēs

  1. Apstiprināta raksta publicēšana un dalība starptautiskā konferencē par pētījuma rezultātiem CSEDU 2023 (International Conference on Computer Supported Education) konferencei “15th International Conference on Computer Supported Education” Prāgā, Čehija. Raksta tēma “Towards a development of automated feedback and diagnostic assessment system in support of literacy teaching and learning”.
  2. Dalība Latvijas Universitātes 81. starptautiskās zinātniskās konferences "Dabaszinātņu didaktikas" sekcijā 2023. gada 1. februārī ar ziņojumu par pētījuma rezultātiem. Prezentācijas tēma “Rēķinpratības prasmju diagnosticēšanas iespējas mācību procesā”.

14.06.2023.

Zinātniskā grupa starptautiskās konferencēs prezentē projekta rezultāus, noslēgumam tuvojas prototipa validēšana.

4. aktivitāte – prototipa validēšana

  • Veikts 3 tekstpratības darbu 2.aprobācijas cikls 3 skolās, iegūstot vairāk nekā 200 valīdas skolēnu atbildes, kuras paredzēts izmantot teksta klasifikatora apmācīšanai atvērto atbilžu automātiskai labošanai un atgriezeniskās saites ģenerēšanai.
  • Veikta 3 rēķinpratības darbu 2.aprobācijas cikls 20 skolās, iegūstot vairāk nekā 800 valīdas skolēnu atbildes, kuras paredzēts izmantot automātiskās atgriezeniskās saites modelēšanai.
  • Precizēts un iestrādāts sitēmā atgriezeniskās saites algoritma risinājums.
  • Precizēta teksta klasifikatora darbība.
  • Papildināts atgriezeniskās saites modulis ar iespēju pievienot snieguma deskriptorus, aplūkot interaktīvas skolēnu snieguma vizualizācijas pēc dažādiem parametriem (klase, priekšmets u.c.).
  • Izveidoti skolēnu grupu snieguma atgriezeniskās saites deksriptori rēķinpratībā.

5. aktivitātes ietvaros skolu vadības grupas tiekas fokusa grupas diskusijā, turpinās zinātnieku dalība konferencēs

  • Veikta attālināta fokusa grupas diskusija 12.jūnijā ar 2.cikla aprobācijā iesaistīto skolu vadības komandām, lai apspriestu aprobācijas rezultātus, izstrādātā prototipa darbību un nepieciešamos uzlabojumus.
  • Dalība starptautiskā konferencē ICASE (The International Council of Associations for Science Education) no 27.-31.03. par pētījuma rezultātiem, Dubaijā, AAE. Raksta tēma “Online diagnostic assessment system in support of numeracy teaching and learning”. Iegūta balva par par labāko rakstu.
  • Dalība starptautiskā konferencē NCME (National Council on Measurement in Education) no 12.-15.04. par pētījuma rezultātiem, Čikāgā, ASV. Raksta tēma “Developing numeracy diagnostic assessment to support teaching and learning”.
  • Dalība starptautiskā konferencē CSEDU 2023 (International Conference on Computer Supported Education) konferencei “15th International Conference on Computer Supported Education” no 21.-23.04. par pētījuma rezultātiem, Prāgā, Čehija. Raksta tēma “Towards a development of automated feedback and diagnostic assessment system in support of literacy teaching and learning”. Iegūta balva par labāko rūpniecisko pētījumu.

14.12.2023.

Projekta īstenošana ir noslēgusies.

Projekta īstenošana noslēdzās 2023.gada 31.augustā. Patiess gandarījums par projekta rezultātu zinātniskās kvalitātes izvērtējumu – Eiropas Komisijas ekspertu kopējais kritēriju izpildes sasnieguma koeficients par projekta mērķa un plānoto rezultātu sasniegšanas līmeni - 97%.

4. aktivitāte – prototipa validēšana

Izstrādāti 3 dokumenti –

  • Pārskats par sākotnējo prototipa testēšanas posma secinājumiem
  • Pārskats par galvenā prototipa testēšanas posma secinājumiem
  • Pārskats, kas apraksta prototipa lietojamību, balstoties uz lietotāju pieredzi

5. aktivitātes ietvaros projekts tiek noslēgts ar ekspertu grupas diskusiju

  • Ekspertu grupas diskusija “Tehnoloģiju izmantošana tekstpratības un rēķinpratības vērtēšanā” skolotāju konferencē „DABASZINĀTNES, MATEMĀTIKA, INŽENIERZINĀTNES UN TEHNOLOĢIJAS SKOLĀ EFEKTĪVI UN RADOŠI” 28.08.23.
Pēdējās izmaiņas veiktas