Pourquoi de nombreux candidats constatent-ils que leurs résultats à l’évaluation de la réflexion de la TSA ne correspondent pas aux attentes ?

Cette année est la deuxième année que l'Université des sciences et technologies de Hanoi organise l'examen d'évaluation de la pensée TSA d'une nouvelle manière, ce qui signifie que la structure de l'examen a été ajustée par rapport à 2022 et avant. En particulier, en plus d'ajuster la structure de l'examen, l'Université des sciences et technologies de Hanoi a appliqué une nouvelle théorie d'évaluation, qui est la théorie de la réponse aux items (IRT) pour évaluer la qualité des questions ainsi que pour calculer les notes d'examen des candidats.

Cela a empêché les candidats de s'auto-évaluer après avoir terminé le test, mais les a obligés à attendre les résultats de l'analyse des données de test des candidats. Par conséquent, après avoir reçu l’annonce des résultats, de nombreux candidats étaient confus car les notes qu’ils avaient reçues n’étaient pas celles qu’ils attendaient.

De nombreux étudiants sont très intéressés par le test d’évaluation de la réflexion TSA organisé par l’Université des sciences et technologies de Hanoi.

Les résultats des tests sont un modèle quantifié de l’estimation des capacités des candidats.

Pour apaiser cette inquiétude des candidats, le journal Thanh Nien a interviewé le Dr Dang Xuan Cuong, un scientifique indépendant avec de nombreuses années de recherche et de mise en œuvre dans l'évaluation et la mesure de l'éducation , l'une des personnes qui ont consulté l'Université des sciences et technologies de Hanoi pour mettre en œuvre le test d'évaluation de la pensée TSA au cours des 2 dernières années.

Selon le Dr Dang Xuan Cuong, la théorie des questions-réponses s'appuie sur des modèles mathématiques pour expliquer la relation entre les capacités des candidats et les questions mesurant ces capacités. Avec cette approche théorique, les paramètres des questions (tels que la difficulté, la discrimination, la devinette, etc.) et la capacité des candidats seront quantifiés sur la base des données de test du groupe de candidats participant au test. Par conséquent, la capacité du candidat estimée à partir de la théorie des questions-réponses sera différente de la méthode de notation traditionnelle.

Les candidats sont testés avant de passer le test d'évaluation de la réflexion de la TSA.

Avec la notation traditionnelle, le score du test est simplement l’addition mécanique des scores des questions du test selon un guide de notation spécifique. Les experts appellent cela le score brut. Avec les scores bruts, la plupart des candidats peuvent s'appuyer sur les réponses pour s'évaluer, même si le test ne comporte que des questions objectives à choix multiples, les candidats peuvent s'évaluer après avoir passé le test.

Avec l'approche de la théorie des questions-réponses, un score de test est un résultat annoncé au candidat après un processus d'analyse des données de test du candidat. Il s’agit d’une étape assez complexe en termes d’expertise, réalisée au moyen de logiciels spécialisés et soigneusement étudiée au travers d’indicateurs statistiques. En fait, le score au test est un résultat quantifié, qui sert de base pour aider les candidats à connaître leurs capacités et à comparer leurs résultats au test avec les résultats de tous les autres candidats à l'examen.

Le Dr Dang Xuan Cuong a expliqué : « En principe, une fois que les candidats ont terminé le test, le système s'appuiera sur les données de chaque question du test pour estimer la capacité des candidats, y compris des informations sur le nombre de candidats qui peuvent répondre à chaque question correspondante et de quels candidats il s'agit, le nombre de questions que chaque candidat peut répondre et de quelles questions il s'agit.

Les données de résultats des tests des candidats aideront le système à élaborer un modèle permettant d’estimer les capacités des candidats. À partir de cette capacité estimée, un score d'évaluation de la réflexion est calculé en le convertissant à l'échelle utilisée par le test (généralement de 0 à 100).

Même si vous répondez correctement à 70 questions, vos résultats au test peuvent être différents.

Le Dr Dang Xuan Cuong a également déclaré que l'examen actuel d'évaluation de la pensée TSA de l'Université des sciences et technologies de Hanoi est un examen qui combine l'application d'un modèle de réponse à une question à un paramètre (uniquement concerné par la difficulté de la question) et deux paramètres (concernant la difficulté et la discrimination de la question). Avec le principe énoncé ci-dessus, un groupe de candidats a le même score brut mais les scores des tests TSA des étudiants sont différents.

Le Dr Dang Xuan Cuong a donné un exemple : « Supposons que le test comporte 100 questions. Selon l’approche traditionnelle, chaque bonne réponse vaut 1 point. Ainsi, si deux candidats parviennent à répondre à 70 questions, chacun obtiendra 70 points. Cependant, avec la théorie des questions-réponses, chaque question du test aura un niveau de difficulté différent et la capacité du candidat sera évaluée en fonction des questions spécifiques auxquelles il aura répondu correctement. Et avec les deux candidats mentionnés ici, si le candidat A peut répondre à des questions plus difficiles que le candidat B, sa capacité estimée sera supérieure à celle du candidat B. De plus, la distinction des questions est également un facteur pris en compte dans l’estimation des capacités des candidats. Il en résulte que le score annoncé de l’étudiant A est supérieur à celui de l’étudiant B. »

Pour le dire plus simplement, avec l'approche traditionnelle basée sur les scores bruts, les scores des questions sont calculés avec le même « poids », ce qui signifie que la difficulté ou la facilité de ces questions n'est pas calculée. Pour la théorie des questions-réponses, les scores des questions auront des « poids » différents, cependant, ce poids n'est pas dû à la volonté subjective du concepteur du test mais est calculé sur la base de modèles mathématiques à partir des données de test du candidat.

Dans le processus d'application de la théorie des questions-réponses, l'analyse des données de test utilise également la technique de comparaison pour amener les scores des candidats à la même échelle commune. Chaque année, l'examen d'évaluation de la pensée comporte plusieurs tours et les candidats sont informés des résultats peu de temps après avoir passé l'examen (sans attendre la fin de l'examen annuel).

Afin d'assurer l'équité d'admission entre les candidats passant l'examen à différents tours, l'organisateur de l'examen utilisera le barème du premier tour comme barème d'origine. Pour les examens suivants, lors de l'analyse des résultats des examens, la technique de comparaison est appliquée pour ramener les scores des candidats aux examens suivants à l'échelle d'origine, puis les résultats officiels des candidats sont donnés. Cela facilitera la comparaison des résultats des examens entre les sessions.

Selon le Dr Dang Xuan Cuong, chaque théorie a ses avantages et ses inconvénients. « Avec l'application de la théorie des questions-réponses à l'Université des sciences et technologies de Hanoi pour l'examen d'évaluation de la pensée, nous sommes également très prudents, grâce à une feuille de route spécifique, pour perfectionner l'examen chaque année », a déclaré M. Cuong.

Le Dr Dang Xuan Cuong a obtenu son doctorat en éducation avec une thèse sur la mesure et l'évaluation de l'éducation à l'Université Flinders, en Australie. Il a plus de 18 ans d’expérience dans ce domaine.

Source : https://thanhnien.vn/vi-sao-nhieu-thi-sinh-thay-diem-thi-danh-gia-tu-duy-tsa-khong-nhu-ky-vong-185240525095542657.htm