Évaluation objective structurée des habiletés techniques des internes de chirurgie en phase socle. Expérience monocentrique portant sur trois cohortes au Medical Training Center de Rouen

Objective structured assessment of technical skills of surgical interns during internship basement phase. Monocentric study involving three cohorts at the Medical Training Center in Rouen

¹ Centre hospitalier universitaire (CHU) de Rouen, Service de Chirurgie Générale et Thoracique, F76000 Rouen, France
² CHU de Rouen, Département d’Anesthésie Réanimation, F76000 Rouen, France
³ CHU de Rouen, Service de Chirurgie Digestive, F76000 Rouen, France
⁴ CHU de Rouen, Département de Chirurgie de l’enfant et de l’adolescent, F76000 Rouen, France
⁵ Medical Training Center Normandie Rouen, Rouen, France

^* Correspondance et offprints : Benjamin BOTTET. Service de chirurgie générale et thoracique, Centre hospitalier et universitaire de Rouen, 1, rue de Germont 76000 Rouen, France. Mailto : benjamin.bottet@chu-rouen.fr.

Reçu : 2 Octobre 2019
Accepté : 15 Mai 2020
Commentaires éditoriaux formulés aux auteurs le 25 mars et le 14 mai 2020

Résumé

Contexte : La simulation en santé est un outil pédagogique incontournable en formation initiale. But : Rapporter notre expérience d’implantation d’un dispositif de type Objective structured assessment of technical skills (OSATS) pour mesurer les habiletés techniques des internes de chirurgie en phase socle de notre faculté, en évaluer les qualités psychométriques préliminaires et recueillir les opinions des internes sur ce dispositif. Méthodes : Un OSATS composé de quatre puis cinq et six stations de 10 minutes chacune a été administré successivement à trois cohortes d’internes. Chaque station avait pour objectif la réalisation d’une habileté technique de base. La performance des candidats était évaluée par un observateur à l’aide d’une grille préétablie. Les moyennes des scores obtenus aux stations et la cohérence interne des scores (coefficient alpha) ont été analysées. Les besoins ressentis des internes, la validité apparente et de contenu de l’examen ont été évalués par questionnaire. Résultats : Soixante-dix neufs internes ont été évalués sur trois ans. Les performances n’étaient pas corrélées au rang aux épreuves classantes nationales [0.13 (IC95% :−0,11 ; +0,36)]. Les indices de cohérence interne se situaient entre 0,61 et 0,87. Les habiletés pour le sondage urinaire masculin et la suture cutanée étaient acquises très tôt. Les internes ont estimé que les gestes proposés à chaque station étaient réalistes. Pour 93% d’entre eux, l’enseignement par la simulation est indispensable à leur formation. Conclusion : L’implantation d’un OSATS est faisable et fournit d’importants renseignements sur les habiletés techniques des internes en chirurgie. Le développement de ce type d’outil renforcerait la place de la simulation dans la formation chirurgicale.

Abstract

Introduction: Simulation-based training has become essential in medical education. Objective: Report our experience of implementing an Objective Structured Assessment of Technical Skills (OSATS) to measure technical skills of year 1 surgical residents of our faculty, assess their preliminary psychometric qualities and collect the opinions of residents on this tool. Methods: An OSATS of four then five and six stations of 10 minutes each was administered successively to 3 cohorts of surgical residents. Each station aimed to achieve basic technical skill. Residents’ performances were assessed by an examiner using a pre-established scoring sheet. The means obtained from the stations and their internal consistency (alpha coefficient) were analyzed. Residents’ felt needs, the apparent validity and content of the OSATS were assessed using a questionnaire. Results: Seventy-nine residents were assessed over 3 years. Residents’ performances were not correlated with ranking at the National Ranking Examination [0.13 (CI95%: −0.11; +0.36)]. Urinary catheter and skin suturing were controlled very early. All residents considered that the technical skills assessed at each station were realistic. For 93% of them, teaching by simulation was considered essential for their training. Conclusion: This initial experience demonstrated that implementation of an OSATS is feasible and has provided important information on the technical skills of surgical residents. The development of this type of tool would strengthen the role of simulation in surgical training.