O6 Evaluarea eficacității cursului de competențe digitale pentru cultură, asigurarea calității și durabilitate
Acest rezultat se referă la evaluarea, asigurarea calității și durabilitatea proiectului și rezultatele acestuia.
Strategia de evaluare a abilităților digitale pentru cultură face parte din metodologia de inginerie socio-cognitivă (Sharples, 2002) implementată de-a lungul acestui proiect și este un proces continuu. Evaluarea va consta în diferite etape și va fi implementată la fiecare rezultat: evaluarea conceptului și a orientărilor (O1), testarea VLH în funcție de propriile cerințe de utilizare (O2); evaluarea curriculumului și a conținutului cursului în raport cu nevoile grupului țintă (O3), evaluarea instrumentelor de e-evaluare a abilităților digitale în raport cu cerințele lor specifice (O4) și evaluarea eficacității piloților în îmbunătățirea abilităților digitale ale adulților implicați (O5) ).
Eficacitatea este definită ca îndeplinirea obiectivelor utilizatorilor. Pentru învățarea online, există multe instrumente și tehnici care sunt utilizate pentru a evalua eficacitatea (Andone, 2012; Mosakhani, 2010).
Evaluarea eficienței cursului și a piloților va fi efectuată continuu și se va concentra asupra dimensiunilor care afectează în mod direct eficiența MOOC: interactivitate, colaborare, pedagogie, conținut, tehnologie, utilizare, motivare, evaluare și sprijin pentru cursanți. Un amestec de metode calitative și cantitative va fi utilizat pentru a evalua eficacitatea, pentru a înțelege mai bine perspectivele participanților cu privire la eficacitatea MOOC. Acestea vor include un chestionar online, precum și informații calitative despre experiența lor pe parcursul cursului prin mărturii, interviuri și focus grupuri. Acestea vor fi coroborate cu rezultatele raportului de analiză a învățării (O2) pentru a crea o imagine completă pentru raportul de evaluare finală.
Activitatea din acest rezultat este împărțită în patru activități - Cadrul de asigurare a calității (6.1), Cadrul general de evaluare (6.2), evaluarea eficacității cursului și a pilotului (6.3) și planul de durabilitate (6.4). Aceste activități sunt esențiale pentru asigurarea succesului proiectului și vor ghida activitatea nu numai în cadrul parteneriatului, ci și în legătură cu comunitatea culturală și de patrimoniu mai largă și cu părțile interesate din alte domenii interesate în formarea politicilor sau implementarea în educația adulților prin sustenabilitatea rezultatele proiectului.
Acest rezultat aplică concepte din teoria inovației, cum ar fi abordarea „comunității inovației” pentru definirea cadrului de asigurare a calității și modelul „difuzarea inovației” pentru dezvoltarea Planului de durabilitate (Rogers, 1995; von Hippel, 1985).
Tip de ieșire: Metodologii / linii directoare - Metodă și instrument de evaluare
O6.1 Cadrul de asigurare a calității
Această activitate va defini un cadru de asigurare a calității pentru implementarea întregului proiect și a componentelor sale. Asigurarea calității este o problemă crucială în proiectarea oricărei intervenții de învățare, dar mai ales în cazul OER-urilor, MOOC-urilor și a oricărei forme sau învățământ deschis sau la distanță, în care elevii vor accesa materiale fără îndrumarea unui profesor.
Metodologia va include
- proiectarea standardelor de asigurare a calității pentru componentele unice ale proiectului (în special O1.2, O2.2, O4.1 și O5.3)
- proiectarea procesului de asigurare a calității pentru conectarea și integrarea standardelor de calitate la toate etapele de dezvoltare a rezultatelor intelectuale, de exemplu prin aplicarea unei metodologii eficiente de proiectare și dezvoltare, cum ar fi dezvoltarea agilă bazată pe calitate, evaluările inter pares ale iterațiilor și rezultatele finale, precum și calitatea procesul de implementare și posibile acțiuni corective
- evaluarea bilunară a calității muncii în proiect și rapoarte privind constatările pentru a continua implementarea proiectului.
Repere:
O6.1.1.Proiectarea standardelor de asigurare a calității
O6.1.2. Proiectarea procesului de asigurare a calității
O6.1.3. Proiectarea instrumentelor de evaluare și a rapoartelor periodice de progres pentru a ghida implementarea proiectului
Conducător: JMEA
Participare: toate
O6.2 Cadrul de evaluare
Spre deosebire de QA, care este în desfășurare, evaluarea proiectului este episodică și va trebui efectuată atât la sfârșitul proiectului, cât și în etapele cheie din timpul proiectului (în special O2.5, O3.4, O5.3 și O5.4). Acesta va utiliza atât datele colectate intern, cât și le va compara cu informațiile din alte resurse.
Evaluarea va fi efectuată la sfârșitul fiecărei intervenții care implică părți externe din grupurile țintă pe care proiectul este conceput să le ajute (O5.2, O5.3 și O5.4).
Evaluarea va fi realizată utilizând interviuri față în față și focus grupuri în timpul întâlnirilor de proiect și a altor intervenții și prin intermediul instrumentelor online (sondaje) pentru eșantioane mai mari.
Evaluarea finală la sfârșitul proiectului va include dacă proiectul este eficient din punct de vedere al costului, dacă poate fi extins și reprodus în altă parte și dacă este autosustenabil.
Pentru evaluarea finală, proiectul poate angaja un consultant sau o organizație externă pentru a oferi o perspectivă nouă asupra realizărilor sale.
Repere:
O6.2.1 Identificarea episoadelor de evaluare
O6.2.2 Proiectarea instrumentelor de evaluare cantitativă
O6.2.3 Proiectarea instrumentelor de evaluare calitativă
O6.2.4 Proiectarea și implementarea evaluării finale
Conducător: JMEA
Participare: toate
O6.3 Eficacitatea cursului Abilități digitale pentru cultură
Pentru a evalua cursul și pilotul pe baza metodei socio-inginerești, vom folosi, de asemenea, un amestec de metode calitative și cantitative, atât pentru a evalua cursul, cât și pentru a aduna perspectiva participanților asupra eficacității MOOC-urilor mai general (O3.4 și O3 .5). Acest lucru va folosi un chestionar online cu o varietate de tipuri de întrebări, împreună cu utilizarea instrumentelor calitative pentru a aduna puncte de vedere asupra experienței din timpul cursului, inclusiv mărturii, interviuri și focus grup. Evaluarea se va desfășura pe toate cursurile partenerilor și în toate limbile, atât pentru implementările de învățare online, cât și pentru cele mixte. Ținta finală este de a evalua și valida care dintre metodele de predare utilizate (complet online sau mixt) este mai adecvată pentru a oferi educație pentru adulți pentru îmbunătățirea abilităților digitale.
Repere:
O.6.3.1. Proiectarea planului de evaluare pentru cursul Digital Skills
O6..3.2 Implementarea evaluării cantitative
O.6.3.3. Implementarea evaluării calitative
O.6.3.4. Raportul de evaluare
Conducător: JMEA
Participare: toate
O6.4 Planul de durabilitate
Această activitate se concentrează pe dezvoltarea unui plan de durabilitate pentru rezultatele proiectului dincolo de durata de viață a proiectului, inclusiv integrarea în politicile naționale și UE. Metodologia utilizată se bazează pe concepte relevante din teoria inovației, inclusiv difuzarea inovației și adoptarea modelelor de inovare.
Validarea strategiei va fi realizată prin diferite metode, cum ar fi sondaje, ateliere și întâlniri publice. Planul final de sustenabilitate se va concentra pe leadership, obiective, strategii, sensibilizare și activități. Planul de sustenabilitate va fi dezvoltat în strânsă legătură cu planul de asigurare a calității și cu implicarea organizațiilor politice cheie din cadrul și din afara parteneriatului, cum ar fi TM2021, EDEN, Rijeka2020, NoviSad2021, Kaunas2022, Fondazione italiană Idis-Città della Scienza, Foundation InterArt Triade , Foundation ArtEncounters, European Architects Association, Network of European Museum Organisations (NEMO) etc.
Repere:
6.4.1 Proiectarea planului de durabilitate
6.4.2 Diseminarea planului în cadrul parteneriatului
6.4.3 Diseminarea planului cu organizații externe
Conducător: JMEA
Participare: toate
