S'abonner

Evaluating script concordance tests (SCTs) through the lens of Bayesian reasoning: Enhancing assessment in medical education - 23/01/25

Doi : 10.1016/j.jeph.2024.202804 
Luc Dauchet a, b, Raphaël Bentegeac a, b, Haress Ghauss a, b, Marc Hazzan d, Patrick Truffert c, Philippe Amouyel a, b, Victoria Gauthier a, b, Aghiles Hamroun a, b,
a Service de Santé Publique, Epidémiologie, Economie de la Santé et Prévention, CHU Lille, 59000 Lille, France 
b UMR1167 RIDAGE, Institut Pasteur de Lille, Inserm, Univ. Lille, CHU Lille, 59000 Lille, France 
c Service de Néonatalogie, Hôpital Jeanne de Flandres, Univ. Lille, CHU Lille, 59000 Lille, France 
d Service de Néphrologie, Dialyse, Transplantation rénale et Aphérèse, Hôpital Claude Huriez, Univ. Lille, CHU Lille, 59000 Lille, France 

Corresponding author.

Highlights

Script Concordance Tests (SCTs), which have been included in the 2024 French National Ranking Examinations (EDN), aim to assess students’ clinical reasoning under uncertainty.
The concept of SCT aligns with Bayesian probability, updating the likelihood of hypotheses based on new information, emphasizing their pedagogical value.
Key ambiguities include the specific clinical reasoning stage being evaluated, appropriate Likert scale labels, and the suitability of expert panels as benchmarks.
Addressing these ambiguities could enhance the effectiveness of SCTs, improve medical education, and offer a rich research avenue for refining clinical practice.

Le texte complet de cet article est disponible en PDF.

Abstract

Background

Script Concordance Tests (SCTs) represent an innovative assessment method which have been introduced in the 2024 French National Ranking Examinations (EDN). These tests compare a student's clinical reasoning with that of a panel of experts under conditions of uncertainty. Typically, the question involves the impact of new information on an initially proposed hypothesis, with answers given on a Likert scale.

Main findings

This article aims to didactically illustrate how SCTs are consistent with probabilistic reasoning as modeled by Bayes' theorem. In addition, by comparing SCT writing guidelines with Bayesian reasoning concepts, several ambiguities were identified: (1) What stage of clinical reasoning do SCTs evaluate? (2) What are the appropriate labels for Likert scale responses? (3) Does the expert panel provide a relevant reference for SCTs?

Conclusions

Currently, many of these questions remain unanswered in the literature, with recent data suggesting that experienced physicians' responses to SCTs are often biased. Beyond their use as an assessment tool in the EDN, SCTs offer a valuable opportunity to develop and deepen the teaching of probabilistic reasoning in medical education and serve as a potential area of research to improve clinical practice.

Le texte complet de cet article est disponible en PDF.

Keywords : Script concordance test, SCT, Clinical reasoning, Probabilistic reasoning, Bayesian reasoning


Plan


© 2024  The Author(s). Publié par Elsevier Masson SAS. Tous droits réservés.
Ajouter à ma bibliothèque Retirer de ma bibliothèque Imprimer
Export

    Export citations

  • Fichier

  • Contenu

Vol 73 - N° 1

Article 202804- février 2025 Retour au numéro
Article précédent Article précédent
  • Machine learning-based models for prediction of innovative medicine reimbursement decisions in Scotland
  • Yitong Wang, Keith Tolley, Clément Francois, Mondher Toumi
| Article suivant Article suivant
  • The association of medical cannabis use with quality of life in Illinois’ opioid alternative pilot program
  • Cerina Dubois, Julie Bobitt, Lei Ding, Dean T. Eurich, Ashley A. Knapp, Neil Jordan

Bienvenue sur EM-consulte, la référence des professionnels de santé.
L’accès au texte intégral de cet article nécessite un abonnement.

Déjà abonné à cette revue ?

Mon compte


Plateformes Elsevier Masson

Déclaration CNIL

EM-CONSULTE.COM est déclaré à la CNIL, déclaration n° 1286925.

En application de la loi nº78-17 du 6 janvier 1978 relative à l'informatique, aux fichiers et aux libertés, vous disposez des droits d'opposition (art.26 de la loi), d'accès (art.34 à 38 de la loi), et de rectification (art.36 de la loi) des données vous concernant. Ainsi, vous pouvez exiger que soient rectifiées, complétées, clarifiées, mises à jour ou effacées les informations vous concernant qui sont inexactes, incomplètes, équivoques, périmées ou dont la collecte ou l'utilisation ou la conservation est interdite.
Les informations personnelles concernant les visiteurs de notre site, y compris leur identité, sont confidentielles.
Le responsable du site s'engage sur l'honneur à respecter les conditions légales de confidentialité applicables en France et à ne pas divulguer ces informations à des tiers.


Tout le contenu de ce site: Copyright © 2025 Elsevier, ses concédants de licence et ses contributeurs. Tout les droits sont réservés, y compris ceux relatifs à l'exploration de textes et de données, a la formation en IA et aux technologies similaires. Pour tout contenu en libre accès, les conditions de licence Creative Commons s'appliquent.