Prof. dr. Nicolae PĂUN - ARACIS

Prof. dr. Nicolae PĂUN

De ce sa evaluăm?Contextul mondial de învăţământ se schimbă rapid,iar programele, instituţiile, precum şi societăţiletrebuie să fie în continuă actualizare încât să facăfaţă acestor schimbări.

Evaluarea este o componentă foarte importantă aînvăţământului la distanţă, fiind utilizată pentru a examina şi aoferi răspunsuri cu privire la punctele tari/punctele slabe aleprogramelor, politicilor, cadrelor didactice şi produselor oferite.Monitorizarea valorii şi eficacităţii programelor e necesară:‣ să justifice investiţia iniţială a resurselor‣ să asigure că obiectivele sunt îndeplinite, pentru a duce laîmbunătăţirea rezultatelor‣ să ofere o bază pentru deciziile de continuare, extindere, sauscoatere din aplicare a anumitor programe

Întrebări utile, premergătoare evaluării:‣ Cu ce ne alegem în urma investiţiilor în programele deînvăţământ la distanţă?‣ Ce putem face pentru a creşte probabilitatea ca programele ID săfie de succes?‣ Cum vom evalua succesul programelor ID?‣ Vor fi studenţii avantajaţi de acest mod de învăţare, prinintermediul programelor ID, în locul cursurilor regulate ?‣ Vor permite programele ID creşterea numărului de studenţi,fără creşterea costurilor?‣ Vor fi cadrele didactice mai bine instruite în folosireaprogramelor ID? Sau vor fi la fel de bine pregătite în comparaţiecu mediile traditionale de instruire?

Scopurile evaluării:‣ Justificarea investiţiilor‣ Măsurarea progreselor realizate în funcţie de obiectivelefixate‣ Măsurarea calităţii şi/sau a eficienţei‣ Oferirea unei baze în scopul perfecţionării

Principalele obiective în vederea evaluăriiunui program de licenţă ID‣ Analiza capacităţii instituţiei, conform resurselor materiale şiumane declarate, de a realiza o pregătire de calitate, prin organizareasistemului ID, prin materiale didactice în tehnologie ID, prin resursesuplimentare de învăţare disponibile tuturor studenţilor‣ Constatarea modului în care instituţia dovedeşte că, din punct devedere financiar, este capabilă să asigure servicii educaţionale decalitate, la un nivel similar cu cel oferit de învăţământul de zi

‣ Evaluarea bazei materiale şi umane a instituţiei, pentru a asigurasprijinirea învăţământului centrat pe student şi capacitatea de aasigura un sistem de suport permanent al învăţării‣ Constatarea existenţei documentelor legate de procesuleducaţional ID, în scopul respectării legislaţiei naţionale şi astandardelor specifice de calitate privind echivalenţa dintre formelede învăţământ ID şi zi‣ Reliefarea modalităţii în care instituţia dispune de structuri,politici, strategii şi procedee concrete pentru managementul şiasigurarea calităţii activităţilor ID de predare, învăţare şi pentrudezvoltarea unei culturi proprii a calităţii.

Etape ale procesului de evaluare1. Clarificarea obiectului şi a scopului evaluării2.Alegerea metodelor şi instrumentelor de evaluareşi colectare a datelor3.Scrierea raportului de evaluare

1. Clarificarea obiectului şi a scopului evaluării‣ pentru a obtine informaţiile necesare, evaluatorii ar trebui săînceapă cu o înţelegere clară a scopului şi a punctului centralpe care se axează evaluarea, informaţii care vor fi primite de labeneficiarii evaluării.‣ ar trebui să pornească de la întrebări precum : “Care suntpărţile interesate ale evaluării?” “Ce anume ar avea nevoie săştie?” “Cum vor fi utilizate datele obţinute?”‣ ar trebui să evite cea mai frecventă greşeala, aceea că se doreştesă se răspundă la foarte multe întrebări cu ajutorul uneisingure evaluări.

2. Alegerea metodelor şi instrumentelor deevaluare şi colectare a datelor‣ pentru asigurarea calităţii proceselor educaţionale oferite prin IDse impune utilizarea unei metodologii unitare de evaluare şiacreditare.‣ acreditarea şi evaluarea academică periodică a programelor careasigura calificări universitare se face în baza standardelor,standardelor de referinţă, a indicatorilor de performanţă şi ametodologiei elaborate de către Agenţia Română de Asigurare aCalităţii în Invăţământul Superior (ARACIS) (H.G.1418/11.10.2006).

‣ procedura de evaluare academică a programelor de studiu ID sebazează pe un ansamblu de criterii specifice Invăţământului laDistanţă, definite şi cuantificate prin standarde, standarde dereferinţă şi indicatori de performanţă.‣ criteriile se referă la principiile fundamentale de organizare,implementare şi functionare a Invăţământului la Distanţă:a) capacitatea institutională (cadrul organizatoric, conducere şiadministraţie, servicii pentru studenţi, baza materială şiresponsabilităţi financiare)b) eficacitatea educaţională (conţinutul învăţământului, medii deinstruire, evaluare, studenţi)c) managementul calităţii (informaţie publică, personal didactic,resurse de învăţare, sisteme de informaţii).

‣ Standardele ID sunt formulate în termeni de reguli sau rezultateşi definesc nivelul minim obligatoriu de realizare a unei activităţiîn educaţie specifică ID.‣ Standardele de referinţă ID sunt acele standarde care definescun nivel optimal de realizare a unei activităţi de către o organizaţiefurnizoare de educaţie, pe baza bunelor practici existente la nivelnaţional, european sau mondial.Autorizarea functionării provizorii sau acreditarea unui programde studii la forma ID se realizeaza pe baza îndeplinirii niveluluiminim al tuturor standardelor şi indicatorilor de performanţăNerealizarea nivelului minim al unui indicator de performanţă =>neacordarea autorizării sau acreditării.

Evaluarea capacităţii instituţionale‣ Structurile instituţionale, administrative şi managerialeStandard Indicatori de performanţăDepartamente IDMisiune şi obiectiveCentrele de studiuConducere şi administraţie Sistemul de conducereColaborarile cu alte instituţiiColaborări‣ Baza materialăStandardPatrimoniu, dotare, resursefinanciareIndicatori de performanţăSpaţii şi dotări pentruactivităţiile educaţionaleResurse financiareTaxe şi rambursări

Evaluarea eficacităţii educaţionale‣ Conţinutul programelor de studiuStandardAdmiterea studenţilorIndicatori de performanţăPrincipii ale politicii de admitere alprogramelor de studiu oferite deinstituţie în tehnologia IDStructura şi prezentareaprogramelor de studiuStructura programelor de studiuDiferenţe în realizarea programelorde studiuRelevanţa proceselor de instruire şievaluareProiectarea materialelor de studiu

Evaluarea managementul calităţii‣ Proceduri privind iniţierea, monitorizarea şi revizuireaperiodică a programelor şi activitătilor desfăşurateStandardIndicatori de performanţăAprobarea , monitorizarea şievaluarea periodică a programelorde studiu şi diplomelor cecorespund calificărilorExistenţa şi aplicarearegulamentului privitor lainiţierea, aprobarea,monitorizarea şi evaluareaperiodic a programelor de studiu‣ Procedurile de evaluare periodică a calităţii corpuluiprofesoralStandardCalitatea personalului didactic şide cercetareIndicatori de performanţăRaportul dintre numărul de cadredidactice şi studenţi.

‣ Transparenţa informaţiilor de interes public cu privire laprogramele de studii şi certificatele, diplomele şi calificărileoferite.StandardInformaţia publicăIndicatori de performanţăOferta de informaţie publică.

‣ În S.U.A , luând în considerare faptul că evaluarea se facecontinuu, tipul corespunzător de evaluare pentruprogramele ID este evaluarea formativă.‣ Scopul principal al evaluării formative este de a îmbunătăţiun produs, serviciu, sau proces care este în curs dedezvoltare‣ Există mai multe modele utile de evaluare formativă care potfi utilizate în cadrul programelor ID, printre acestea fiind şiurmătoarele 3:

Modelul Van SlykeModelul pentru învăţământul la distanţă propus de VanSlyke, Kittner şi Belanger sugerează că mai multe variabiletrebuie să fie luate în considerare în acelaşi timp pentru aputea examina efectul lor asupra programelor IDModelul propune 4 tipuri de variabile foarte importantecare trebuie luate în calcul:a) Caracteristici instituţionaleb) Caracteristicile studentuluic) Caracteristicile cursuluid) Caracteristicile învăţământului la distanţă

Modelul KirkpatrickModelul celor 4 nivele de evaluare ale lui Kirkpatrick estedeseori folosit pentru a evalua impactul experienţei deînvăţare la nivele afective, cognitive, comportamentale şi deorganizare:a) Nivelul 1: Reacţia cursantuluib) Nivelul 2: Transferul de cunoştinţec) Nivelul 3: Transferul comportamentald) Nivelul 4: Impactul organizaţional

Modelul Bates (ACTIONS)‣ Acronimul ACTIONS reprezintă cei 7 factori care sunt luaţi înconsiderare în evaluarea eficienţei diferitelor tehnologii de predare:Access and flexibilityCostsTeaching and learningInteractivity and user friendlinessOrganizational issuesNoveltySpeed=> acces şi flexibilitate=> costurile=> predarea şi capacitatea de învăţare=> interactivitatea şi uşurinţa utlizării=> probleme organizatorice=> inovaţia=> viteza‣ Bates sugerează o evaluare individuală, adecvată, a fiecăruia dintreaceşti factori

3. Scrierea raportului de evaluare‣ Pe lângă deciziile care trebuie luate pe parcurs, evaluatoriitrebuie să pună bine la punct şi produsul final al activităţii deevaluare: raportul de evaluare.‣ Raportul de evaluare ar trebui să descrie în mod clarprogramul în curs de evaluare, inclusiv scopurile, procedurile,precum şi constatările făcute astfel încât informaţiile esenţialefurnizate să fie uşor de înţeles.‣ Setul complet de rezultate ar trebui sa fie pus la dispoziţiapersoanelor care au participat la evaluare, dar şi celor care audreptul legal să obţină rezultatele evaluării.‣ Procedurile de raportare ar trebui să reflecte în mod corectrezultatele, să fie obiective, evitând fraudări cauzate desubiectivitate.

Concluzii‣ În învăţământ, studiile de evaluare sunt utilizate pentru aexamina şi a oferi răspunsuri cu privire la punctele tari şipunctele slabe ale programelor, politicilor, cadrelordidactice, produselor oferite / rezultatelor obţinute, şipentru a ajuta organizaţiile sa-şi crească eficienţa.‣ Rezultatele evaluării sunt utile în a constata dacăobiectivele au fost îndeplinite sau nu , dacă investiţiile aufost făcute cu succes, iar prin intermediul feedback-uluiprimit în urma evaluării, programele ID pot fi îmbunătăţiteîn permanenţă.

Bibliografie• Michael Grahame Moore - Handbook of Distance Education, Second Edition• ARACIS - Ghid de Evaluare ID – Partea a V a• Rowntree, D. (1992) - Exploring open and distance learning• Saba, F. (2000) – Evaluating distance learning education programs - Distance educationreport• Thorpe, M. (1996) – Issues of evaluation – Supporting the learner in open and distancelearning• Rumble, G.G. (1997) – The costs and ecomomics of open and distance learning• Reeves, T. & Hedberg, J. (2003) – Interactive learning system evaluation• Moore, M.G. & Kearsley, G. (1996) - Distance education: A systems view• Bates, A. W. (1995) – Technology, open learning and distance education• Frydenberg, J. (2002) – International Review of Research in Open and Distance Learning• Ehrmann, S.C. (2002) - Evaluating (and improving) benefits of educational uses oftechnology• Lockee, B. , Moore, M. & Burton, J. (2002) – Measuring success: Evaluation strategies fordistance education• Chambers, E. (1995) - Open and distance learning today• Eaton, J.S. (2000) - Core academic values, quality, and regional accreditation : Thechallenge of distance learning