Relier les examens de langues au Cadre ... - ECEP - Ecml.at

Chapitre 5: Formation à la standardisation et au calibrage
5.1. Introduction
Le but de la démarche de mise en relation des examens avec les niveaux du CECR est
de permettre une catégorisation des candidats en termes de niveaux de compétences du
CECR, de telle façon que cette catégorisation reflète de façon fiable ce que signifient
les niveaux du CECR. Si on considère qu’un étudiant est au niveau B1, il faut être tout
à fait certain que cet étudiant est vraiment représentatif des descripteurs de ce niveau. Il
s’agit là de la validité. Les procédures qui suivent renvoient à la définition des points
de césure (standard setting).
Il existe deux grandes façons d’attribuer des niveaux à des candidats. Il peut s’agir soit
d’un simple jugement global de la part du professeur ou de l’examinateur, soit des
notes qui sont attribuées au résultat de l’examen. La première option est en général
choisie pour les capacités de production, alors que la deuxième concerne généralement
les capacités de réception. La distinction n’est pourtant pas aussi tranchée. Dans des
épreuves de production écrite, parmi les deux ou trois tâches proposées, chaque tâche
peut être notée en fonction de critères analytiques. La totalité des notes obtenues par un
candidat peut être traitée de la même façon que le résultat d’une épreuve de réception
écrite comportant un certain nombre d’items séparés. Pour éviter tout malentendu, on
utilisera respectivement les termes d’examen indirect (examens avec des résultats à
base de notes) et d’examen direct (examens évalués de façon globale).
Examens directs. Dans des examens évalués de façon globale, le jugement sur
le niveau (les six niveaux du CECR) est direct et il est pour cette raison
important d’aider les évaluateurs à émettre des jugements valides. Le principal
outil utilisé pour ce genre particulier de définition des points de césure
(standard setting) est appelé calibrage. Le calibrage consiste à proposer un (ou
plusieurs) échantillon(s) représentatif(s) illustrant des performances à un niveau
donné à la fois pour la formation à la standardisation et comme outil de
référence pour les décisions ultérieures concernant des performances de
candidats.
Examens indirects. Pour les examens avec des résultats à partir de notes, il faut
établir des performances standards. La performance standard est la limite entre
deux niveaux de l’échelle continue, indiquée par un examen, et qui est
représentée par une note de césure. Une note de césure de 30, par exemple,
signifie qu’une note de 30 ou plus acquise à l’examen prouve qu’un certain
niveau ou un niveau plus élevé est atteint (par exemple B1), alors qu’un résultat
moins élevé correspondra à un niveau plus bas que le niveau de la note de
césure (dans ce cas B1). On appelle généralement le processus pour arriver à
une note de césure la «définition des points de césure» (standard setting).
Dans le cas des capacités de réception (écrite et orale) ou des compétences sous-
51