Intérêt des tests de concordance de script pour évaluer le raisonnement et l’organisation des connaissances des étudiants de quatrième année des études médicales en France

Significance of script concordance tests to assess reasoning and knowledge organization among 4th year medical school students in France

Service de pneumologie, Hôpital Pontchaillou, Centre hospitalier universitaire de Rennes, Université de Rennes 1, France

Correspondance et offprints : Stéphane Jouneau, Service de pneumologie, Hôpital Pontchaillou, 2 rue Henri Le Guilloux, 35033 Rennes Cedex, France. Mailto : Stephane.jouneau@chu-rennes.fr

Reçu : 10 Novembre 2011
Accepté : 13 Juillet 2012

Résumé

Contexte : L’examen écrit de pneumologie des étudiants de deuxième année du deuxième cycle des études médicales (DCEM2) à la faculté de médecine de Rennes est constitué d’un cas clinique (CC). But : L’introduction des tests de concordance de script (TCS), qui mesurent l’interprétation des données cliniques en contexte d’incertitude, pourrait améliorer l’évaluation du raisonnement clinique des étudiants. Matériel et méthodes : Les étudiants du deuxième semestre de DCEM2 (n = 85) ont été évalués par un CC (2/3 du score) associé à 20 items de TCS (1/3 du score). La fidélité des TCS a été évaluée par le coefficient α de Cronbach. Les scores des étudiants du CC et des TCS ont été corrélés (test de Spearman). Le degré d’organisation des réponses au CC a été évalué. Résultats : Le coefficient α de Cronbach était de 0,35 pour les étudiants. Les scores des étudiants aux TCS étaient significativement corrélés à ceux du CC (r = 0,304, p = 0,005). Les étudiants avec de bons scores aux TCS avaient des réponses au CC plus hiérarchisées et plus ordonnées que les étudiants avec de mauvais scores aux TCS qui avaient tendance à écrire des réponses plus longue avec une hiérarchisation absente ou plus floue (évaluation qualitative globale). Les étudiants aux réponses les plus hiérarchisées avaient des notes plus élevées comparés aux copies les moins hiérarchisées : 16,3 versus 11,8 (p < 0,0001) pour les CC et 12,5 versus 10,6 (p = 0,021) pour les TCS. Les TCS semblent toujours être bons chez les étudiants aux connaissances bien organisées. Les étudiants qui ont effectué leur stage pratique dans le service de pneumologie avaient un score moyen aux TCS supérieur à ceux qui n’étaient pas passés dans le service : 12,6 versus 11,3, p = 0,008. Cette différence n’était pas retrouvée pour le CC. Conclusions : Il semble que l’introduction des TCS améliore l’évaluation du raisonnement clinique des étudiants de DCEM2 lors de l'examen écrit de pneumologie en association avec le CC.

Abstract

Context: The written examination for respiratory medicine students (DCEM2) in the 4th year at Rennes university medical school is made up of a clinical case (CC). Goal: The introduction of script concordance tests (SCT) could enhance the assessment of students’ clinical reasoning. Material and methods: During the 2nd term, DCEM2 students (n = 85) were assessed using a CC (2/3 of score) and 20 SCT items (1/3 of the score). Reliability was determined by a Cronbach coefficient computation. The students’ results on CC and SCT were established using a Spearman rank correlation test. The organization of CC answers was assessed. Results: Cronbach α coefficient was 0.35 for the students. Student scores in SCT were significantly correlated to the results in CC (r = 0.304, p = 0.005). The students with good scores in SCT had shorter and more organized answers to the CC than students with poor scores in SCT who tended to have longer and less organized answers to the CC (qualitative global assessment). Students with highly organized CC answers had better scores compared to those with poorly organized scripts: 16.3 versus 11.8 (p < 0.0001) for CC and 12.5 versus 10.6 (p = 0.021) for SCT. Students with highly organized knowledge seem to always have good results with SCT. Mean SCT score for students who worked in the respiratory department was significantly higher than that of students who had not worked in the ward: 12.6 versus 11.3, p = 0.008. This difference was not demonstrated with the CC. Conclusions: In our opinion, SCT associated to CC seems to enhance the clinical learning assessment of DCEM2 students in their written examination for respiratory medicine.