Relier les examens de langues au Cadre ... - ECEP - Ecml.at

6.9. Définition des scores de césure sur plusieurs langues
L’aspect probablement le plus stimulant dans le fait de relier les examens au CECR est
de trouver des méthodes qui montrent que les examens dans différentes langues sont
liés d’une manière comparable à des standards communs.
Bien qu’il soit théoriquement possible d’administrer deux examens dans des langues
différentes à un même échantillon de candidats, cela supposerait que chaque candidat
de l’échantillon a le même niveau de compétences dans chacune des langues, ce qui est
clairement impossible. Par conséquent, les méthodes qui doivent être recherchées
doivent considérer que chaque candidat n’a participé qu’à un seul des deux examens et
que les performances de chaque candidat dans les différentes langues seront traitées
comme celles de candidats sans lien particulier.
Pour relier ces deux examens aux CECR, on peut faire appel à des panélistes
plurilingues, qui pourront offrir des jugements sérieux et dignes de confiance à la fois
sur les items (pour les méthodes centrées sur les tests) et sur le travail des candidats
dans les deux langues. La méthode du corpus de productions pourrait être l’une des
méthodes à privilégier pour ce dernier cas ou une méthode centrée sur le test comme la
méthode Tucker-Angoff.
6.10. Conclusion
Ce chapitre a offert une revue d’un nombre de procédures de définition des scores de
césure, mais ne prétend pas l’avoir fait de façon exhaustive. Une revue accessible peut
être consultée dans la section B du supplément au Manuel. Dans ce chapitre, l’accent a
porté sur la faisabilité et l’adéquation des méthodes sélectionnées aux tests langagiers
et pour relier les examens au CECR en soulignant l’importance d’une bonne
compréhension des notions de base.
Bien entendu, au cours et après la mise en œuvre de ces procédures, il sera nécessaire
d’en suivre la qualité en se centrant sur plusieurs questions:
Est-ce que la procédure de détermination des points de césure a eu les effets
attendus? La formation a-t-elle été efficace? Est-ce que les panélistes se sont
sentis libres de suivre leurs propres intuitions? Des questions similaires sont ici
bienvenues. Ce sont les questions liées à la validité procédurale.
Est-ce que les évaluations des experts du panel sont fiables? Est-ce que chaque
membre du panel a été régulier au cours des différentes tâches qu’il a réalisées?
Est-ce que les membres du panel ont été en accord avec les autres dans leurs
jugements et dans quelle mesure un consensus a permis de considérer le point de
césure comme définitif? Est-ce que des erreurs ont été commises dans les scores
77