29.04.2013 Views

Relier les examens de langues au Cadre ... - ECEP - Ecml.at

Relier les examens de langues au Cadre ... - ECEP - Ecml.at

Relier les examens de langues au Cadre ... - ECEP - Ecml.at

SHOW MORE
SHOW LESS

You also want an ePaper? Increase the reach of your titles

YUMPU automatically turns print PDFs into web optimized ePapers that Google loves.

5.7.1 Echantillons nécessaires<br />

Même si cela retar<strong>de</strong> le projet, il est important d’investir du temps et <strong>de</strong> l’énergie pour<br />

recueillir un jeu d’échantillons loc<strong>au</strong>x <strong>de</strong> bonne qualité.<br />

Le processus <strong>de</strong> collecte peut être très semblable à celui du processus <strong>de</strong> production<br />

d’items:<br />

définition <strong>de</strong>s critères <strong>de</strong> sélection;<br />

i<strong>de</strong>ntific<strong>at</strong>ion <strong>de</strong>s échantillons <strong>de</strong> candid<strong>at</strong>s;<br />

travail en <strong>at</strong>elier pour étudier et filtrer <strong>les</strong> échantillons en fonction <strong>de</strong> leur<br />

qualité;<br />

sélection;<br />

vérific<strong>at</strong>ion <strong>de</strong> la représent<strong>at</strong>ivité du jeu d’échantillons sélectionnés;<br />

apport éventuel d’échantillons supplémentaires pour «compléter» l’ensemble;<br />

document<strong>at</strong>ion <strong>de</strong>s caractéristiques <strong>de</strong>s échantillons pour le calibrage grâce à un<br />

outil tel que <strong>les</strong> gril<strong>les</strong> du CECR pour <strong>les</strong> tâches <strong>de</strong> productions écrite et orale<br />

(annexe B2).<br />

Il est essentiel que <strong>les</strong> échantillons loc<strong>au</strong>x <strong>de</strong> performances utilisés pour le calibrage<br />

comprennent, pour <strong>les</strong> mêmes candid<strong>at</strong>s, <strong>de</strong>s discours <strong>de</strong> types différents couvrant<br />

l’éventail <strong>de</strong>s activités décrites dans le CECR.<br />

5.7.2 Arriver à un consensus et le vérifier<br />

En général, <strong>les</strong> procédures à suivre sont cel<strong>les</strong> décrites dans <strong>les</strong> sections 5.3 et 5.4 pour<br />

la form<strong>at</strong>ion à la standardis<strong>at</strong>ion avec <strong>de</strong>s échantillons représent<strong>at</strong>ifs. Cela comprendra:<br />

l’utilis<strong>at</strong>ion <strong>de</strong>s mêmes outils que ceux utilisés pour la form<strong>at</strong>ion;<br />

une évalu<strong>at</strong>ion individuelle suivie d’une discussion en petits groupes conduisant<br />

le grand groupe <strong>au</strong> consensus;<br />

une discussion sur la dispersion dans <strong>les</strong> évalu<strong>at</strong>ions individuel<strong>les</strong> renouvelée<br />

jusqu’à ce que l’on parvienne à un accord acceptable (dispersion égale à un<br />

nive<strong>au</strong> et <strong>de</strong>mi).<br />

Un point important est ici à souligner: <strong>les</strong> évalu<strong>at</strong>ions individuel<strong>les</strong> doivent être<br />

enregistrées avant toute discussion. En effet, l’expérience <strong>de</strong>s séminaires <strong>de</strong> calibrage<br />

qui ont débouché sur l’édition <strong>de</strong> DVD représent<strong>at</strong>ifs montre que c’est la dispersion <strong>de</strong>s<br />

évalu<strong>at</strong>ions qui est affectée par <strong>les</strong> discussions (<strong>les</strong> margin<strong>au</strong>x se conformant à la<br />

norme) et non la moyenne et donc le résult<strong>at</strong>. Néanmoins, le signe du succès d’un<br />

séminaire <strong>de</strong> calibrage est que <strong>les</strong> évalu<strong>at</strong>ions d’individus combinés et le consensus<br />

62

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!