Différences

Ci-dessous, les différences entre deux révisions de la page.

--- moodle:test:tcs [31/03/2022 15:57]
dumontj01 [Traitement des réponses du panel]
+++ moodle:test:tcs [01/04/2025 11:43] (Version actuelle)
gallotj [Recueil des réponses du panel]
@@ Ligne 1: / Ligne 1: @@
 ======Test de concordance de script (TCS)======
-<note warning>Pour les ENCi, la plateforme SIDES offre un environnement complet avec des outils spécifiques facilitant le développement des TCS. Hors ENCi, les plateformes Moodle vous permettent tout de même de pouvoir réaliser des TCS comme décrit dans la suite de cette page.</note>
+<note warning>Pour les ENCi (Épreuves Nationales Classantes informatisées), la plateforme SIDES offre un environnement complet avec des outils spécifiques facilitant le développement des TCS. Hors ENCi, les plateformes Moodle vous permettent tout de même de pouvoir réaliser des TCS comme décrit dans la suite de cette page.</note>
 =====Principe=====
@@ Ligne 33: / Ligne 33: @@
   * si tous les experts ont un compte numérique unicaen, [[moodle:test:creer_un_test|créer un test]], ajouter vos questions, inscrire les membres du panel comme étudiant à l'espace de cours et les inviter à réaliser le test qui s'y trouve.
-  * si tous les expert ne peuvent pas avoir de compte numérique, éditer un dossier de questions et une grille papier de réponse de type QCM avec l'outil [[moodle:test:test_hors_ligne|"test hors-ligne"]].
+  * si tous les expert ne peuvent pas avoir de compte numérique, éditer un dossier de questions et une grille papier de réponse de type QCM avec l'outil [[moodle:test:test_hors_ligne|"QCM Papier"]].
@@ Ligne 41: / Ligne 41: @@
 Vous pouvez vous aider des rapports statistiques des tests de Moodle pour visualiser les résultats aux échelles de Likert : [[moodle:test:consultation_ajustement_corrections_questions_fermees|Consulter les résultats et ajuster la correction des questions fermées (QCM, vrai-faux, appariement, numérique...)]]
-Pour la partie rédactionnelle, vous pouvez visualiser les réponses triées par question grâce à l'outil de [[moodle:test:composition_correction|correction des questions "compositions" (question par question)]].
+Pour la partie rédactionnelle, vous pouvez visualiser les réponses triées questions par questions grâce à l'outil de [[moodle:test:composition_correction|correction des questions "compositions"]].
 ==Analyse==
@@ Ligne 48: / Ligne 48: @@
 "Si tous les membres du panel donnent la même réponse, la question devient proche d’une question à choix multiple[6] . Il ne faut pas systématiquement éliminer ce type de questions. Il faut cependant veiller à ne pas multiplier leur nombre dans un TCS." (Giet et al. 2013, p.8).
-====Notation des réponses ====
+====Transformation en sujet pour les étudiants====
+Une fois les TCS sélectionnés, il faut maintenant les mettre à disposition des étudiants. Plusieurs options de présentation sont possibles :
+  * dossier linéaire (avec ou sans retour en arrière possible) > activé [[moodle:test:creer_un_test|test]]
+    * Avantage 1 : vous pouvez dupliquer les questions des étapes précédentes facilement pour les préparer pour les étudiants
+    * Avantage 2 : les [[moodle:test:consultation_ajustement_corrections_questions_fermees|statistiques]] sont très détaillées
+    * Avantage 3 : le correction des questions ouvertes courtes ([[moodle:test:choix_questions:qroc|QROC]]) est puissante car l'interface facilite l’intégration de différentes réponses possibles
+    * Avantage 4 : la correction des questions ouvertes longues (QROL correspondant au format de question dit "[[moodle:test:choix_questions:composition|composition]]") est facilitée par l'interface
+  * dossier conditionnel (avec des questions qui s'ajustent en fonction des réponses) > activité "Branching scenario" de [[:h5p|H5P]]
+    * Avantage : permet de créer des parcours individualisés permettant de simuler un raisonnement plus complet que dans des questions isolées
+    * Inconvénient : les questions créées dans l'activité test ne sont pas transférables dans l'outil H5P
+====Notation des propositions de solutions====
 Selon Giet et al. (2013). p.8 :
-"Il n’y a pas qu’une seule réponse correcte à une question de TCS. C’est là l’intérêt de ce type d’évaluation. [...] Chaque réponse d’expert est prise en compte et l’étudiant est crédité de points s’il se positionne comme l’a fait au moins un des experts. Ce mode de correction du TCS reflète la capacité de l’étudiant à faire face à une situation courante dans laquelle il existe un certain degré d’incertitude, en formulant des hypothèses et en évaluant l’impact de nouvelles données sur le statut de ces hypothèses [1]. Une autre méthode de correction consiste à pondérer la réponse de l’étudiant en fonction de la distance qui le sépare de la réponse modale. Un étudiant qui est proche de la réponse modale sera plus crédité qu’un étudiant qui est plus éloigné de la réponse modale[10].
+"Il n’y a pas qu’une seule réponse correcte à une question de TCS. C’est là l’intérêt de ce type d’évaluation. [...] Chaque réponse d’expert est prise en compte et l’étudiant est crédité de points s’il se positionne comme l’a fait au moins un des experts. Ce mode de correction du TCS reflète la capacité de l’étudiant à faire face à une situation courante dans laquelle il existe un certain degré d’incertitude, en formulant des hypothèses et en évaluant l’impact de nouvelles données sur le statut de ces hypothèses. Une autre méthode de correction consiste à pondérer la réponse de l’étudiant en fonction de la distance qui le sépare de la réponse modale. Un étudiant qui est proche de la réponse modale sera plus crédité qu’un étudiant qui est plus éloigné de la réponse modale.
 [...]
-Classiquement, un point complet est attribué à l’étudiant qui choisit l’option prise par la majorité des experts (par exemple, les experts se sont répartis comme
-suit : 7 experts choisissent la proposition –1 et 4 experts choisissent la réponse –2. L’étudiant qui choisit comme 7 experts (la majorité) recueillent 7/7 point
+Classiquement, un point complet est attribué à l’étudiant qui choisit l’option prise par la majorité des experts (par exemple, les experts se sont répartis comme suit : 7 experts choisissent la proposition –1 et 4 experts choisissent la réponse –2. L’étudiant qui choisit comme 7 experts (la majorité) recueillent 7/7 point soit 1 point. Un étudiant qui choisit l’option –2 comme 4 experts recueillent 4/7 point soit 0,57 point.
-soit 1 point. Un étudiant qui choisit l’option –2 comme 4 experts recueillent 4/7 point soit 0,57 point.
-On pourrait imaginer n’attribuer que des points partiels aux étudiants, proportionnellement à la répartition des experts c'est-à-dire qu’il serait envisageable
+On pourrait imaginer n’attribuer que des points partiels aux étudiants, proportionnellement à la répartition des experts c'est-à-dire qu’il serait envisageable d’attribuer 0,64 point à un étudiant qui a répondu comme 7 experts sur 11 et 0,36 point pour un étudiant qui a répondu comme 4 des experts sur 11. Ce barème pourrait être appliqué s’il est bien annoncé préalablement aux étudiants."
-d’attribuer 0,64 point à un étudiant qui a répondu comme 7 experts sur 11 et 0,36 point pour un étudiant qui a répondu comme 4 des experts sur 11. Ce barème
-pourrait être appliqué s’il est bien annoncé préalablement aux étudiants."