Impact d’une formation à la rédaction des QCM sur la qualité psychométrique d’une épreuve de chirurgie: Etude avant-après

Auteur/ices

  • Baha Khlifa Service d’urologie, Hôpital Universitaire Ibn El Jazzar de Kairouan, Rue Ibn El Jazzar,3100 Kairouan. Faculté de médecine Ibn El Jazzar Sousse, Rue Mohamed Karoui, 4002 Sousse, Tunisie
  • Rayen Lahouar Service d’urologie, Hôpital Universitaire Ibn El Jazzar de Kairouan, Rue Ibn El Jazzar,3100 Kairouan. Faculté de médecine Ibn El Jazzar Sousse, Rue Mohamed Karoui, 4002 Sousse, Tunisie
  • Jihène Krichène Service d’urologie, Hôpital Universitaire Ibn El Jazzar de Kairouan, Rue Ibn El Jazzar,3100 Kairouan. Faculté de médecine Ibn El Jazzar Sousse, Rue Mohamed Karoui, 4002 Sousse, Tunisie
  • Mohamed Kahloul Service d’anesthésiologie et de réanimation, Hôpital universitaire Sahloul,4011, Sousse. Faculté de médecine Ibn El Jazzar Sousse, Rue Mohamed Karoui, 4002 Sousse, Tunisie
  • Badreddine Ben Khalifa Service d’urologie, Hôpital Universitaire Ibn El Jazzar de Kairouan, Rue Ibn El Jazzar,3100 Kairouan. Faculté de médecine Ibn El Jazzar Sousse, Rue Mohamed Karoui, 4002 Sousse, Tunisie
  • Wael Gazzah Service d’urologie, Hôpital Universitaire Ibn El Jazzar de Kairouan, Rue Ibn El Jazzar,3100 Kairouan. Faculté de médecine Ibn El Jazzar Sousse, Rue Mohamed Karoui, 4002 Sousse, Tunisie
  • Sahbi Naouar Service d’urologie, Hôpital Universitaire Ibn El Jazzar de Kairouan, Rue Ibn El Jazzar,3100 Kairouan. Faculté de médecine Ibn El Jazzar Sousse, Rue Mohamed Karoui, 4002 Sousse, Tunisie
  • Braiek Salem Service d’urologie, Hôpital Universitaire Ibn El Jazzar de Kairouan, Rue Ibn El Jazzar,3100 Kairouan. Faculté de médecine Ibn El Jazzar Sousse, Rue Mohamed Karoui, 4002 Sousse, Tunisie

DOI :

https://doi.org/10.62438/tunismed.v104i09.7053

Mots-clés :

Évaluation de certification, questions à choix multiples, l’analyse des articles, indice de discrimination, développement du corps professoral, formation médicale

Résumé

Introduction : L’évaluation sommative joue un rôle central dans la formation médicale et nécessite des outils valides et fiables. La qualité psychométrique des questions à choix multiples (QCM) dépend largement de leur conception.
Objectif : Évaluer l’impact d’une formation pédagogique à la rédaction de QCM sur les propriétés psychométriques d’un examen de chirurgie à la Faculté de médecine de Sousse.
Méthodes : Il s’agit d’une étude pré-expérimentale avant-après comparant deux sessions successives du même examen, menées en 2024 et 2025. Au total, 174 étudiants (96 en période 1 et 78 en période 2) et 180 items ont été analysés. Les paramètres évalués comprenaient l’indice
de difficulté, l’indice de discrimination, le coefficient d’efficacité, les catégories de réponse et les indicateurs globaux du test, notamment l’alpha de Cronbach et l’erreur de mesure.
Résultats: Les performances globales des étudiants, en termes de score moyen et de taux de réussite, étaient comparables entre les deux périodes (p = 0,774). Cependant, l’indice de discrimination médian s’est significativement amélioré, passant de 28,27 % à 40 % (p = 0,003). La proportion d’items présentant une excellente discrimination a augmenté de 23,3 % à 50 % (p < 0,001). Le coefficient alpha de Cronbach a progressé de 0,87 à 0,93, tandis que l’indice de difficulté est resté stable.
Conclusion: La formation pédagogique a amélioré la qualité psychométrique de l'examen sans modifier les performances globales des étudiants, soulignant ainsi la valeur d'une approche institutionnelle fondée sur la formation continue du corps professoral et l'analyse psychométrique régulière des examens.

Téléchargements

Les données relatives au téléchargement ne sont pas encore disponibles.

Références

Kassam A, de Vries I, Zabar S, Durning SJ, Holmboe E, Hodges B, et al. The Next Era of Assessment Within Medical Education: Exploring Intersections of Context and Implementation. Perspect Med Educ. 2024;13(1):496-506. doi:10.5334/pme.1128 PubMed PMID:

; PubMed Central PMCID: PMC11469546.

Zubairi NA, AlAhmadi TS, Ibrahim MH, Hegazi MA, Gadi FU. Effective use of Item Analysis to improve the Reliability and Validity

of Undergraduate Medical Examinations: Evaluating the same exam over many years: a different approach. Pak J Med Sci. mars

;41(3):810-5. doi:10.12669/pjms.41.3.10693 PubMed PMID: 40103890; PubMed Central PMCID: PMC11911747.

Eleragi AMS, Miskeen E, Hussein K, Rezigalla AA, Adam MIE, Al-Faifi JA, et al. Evaluating the multiple-choice questions quality at the

College of Medicine, University of Bisha, Saudi Arabia: a three-year experience. BMC Med Educ. 13 févr 2025;25(1):233. doi:10.1186/

s12909-025-06700-2 PubMed PMID: 39948528; PubMed Central PMCID: PMC11827222.

Rashwan NI, Aref SR, Nayel OA, Rizk MH. Postexamination item analysis of undergraduate pediatric multiple-choice questions

exam: implications for developing a validated question Bank. BMC Med Educ. 21 févr 2024;24(1):168. doi:10.1186/s12909-

-05153-3 PubMed PMID: 38383427; PubMed Central PMCID: PMC10882907.

Hye T, Hossain MF, Roni MA. Interventions to Improve the Quality of Multiple-Choice Questions: A Systematic Review and Meta-

Analysis. Am J Pharm Educ. nov 2025;89(11):101872. doi:10.1016/j. ajpe.2025.101872 PubMed PMID: 40962033.

Betts J, Muntean W, Kim D, Kao S chuan. Evaluating Different Scoring Methods for Multiple Response Items Providing

Partial Credit. Educ Psychol Meas. févr 2022;82(1):151-76. doi:10.1177/0013164421994636 PubMed PMID: 34992310;

PubMed Central PMCID: PMC8725057.

Masters GN. A rasch model for partial credit scoring. Psychometrika. 1 juin 1982;47(2):149-74. doi:10.1007/BF02296272

Kim HY. Statistical notes for clinical researchers: assessing normal distribution (2) using skewness and kurtosis. Restor Dent Endod.

févr 2013;38(1):52-4. doi:10.5395/rde.2013.38.1.52 PubMed PMID: 23495371; PubMed Central PMCID: PMC3591587.

Tavakol M, Dennick R. Making sense of Cronbach’s alpha. Int J Med Educ. 27 juin 2011;2:53-5. doi:10.5116/ijme.4dfb.8dfd PubMed

PMID: 28029643; PubMed Central PMCID: PMC4205511.

Tavakol M, Brennan RL. Medical education assessment: a brief overview of concepts in generalizability theory. Int J Med Educ. 11

sept 2013;4:221-2. doi:10.5116/ijme.5278.a850 PubMed PMID: 28035055; PubMed Central PMCID: PMC4205529.

Sadeghi P, Pourabbas A, Dehghani G, Katebi K. Quantitative and qualitative item analysis of exams of basic medical sciences

departments of Tabriz University of Medical Sciences in 2023. BMC Med Educ. 1 juill 2025;25(1):937. doi:10.1186/s12909-025-07539-3

PubMed PMID: 40597222; PubMed Central PMCID: PMC12211469.

Hermi A, Achour W. Item analysis of examinations in the Faculty of Medicine of Tunis. Tunis Med. avr 2016;94(4):247-52. PubMed

PMID: 27704506.

Ayub R, Kiran F, Shabnam N, Rauf A, Fatima F. Effects of a long term faculty development program on improvement in quality of MCQs: an impact evaluation study. BMC Med Educ. 15 avr 2025;25:541. doi:10.1186/s12909-025-07081-2 PubMed PMID: 40234907;

PubMed Central PMCID: PMC12001514.

Owolabi LF, Adamu B, Taura MG, Isa AI, Jibo AM, Abdul-Razek R, et al. Impact of a longitudinal faculty development program on

the quality of multiple-choice question item writing in medical education. Ann Afr Med. 2021;20(1):46-51. doi:10.4103/aam.

aam_14_20 PubMed PMID: 33727512; PubMed Central PMCID: PMC8102895.

Abdulghani HM, Ahmad F, Irshad M, Khalil MS, Al-Shaikh GK, Syed S, et al. Faculty development programs improve the quality

of Multiple Choice Questions items’ writing. Sci Rep. 1 avr 2015;5:9556. doi:10.1038/srep09556 PubMed PMID: 25828516;

PubMed Central PMCID: PMC4381327.

Gupta P, Meena P, Khan AM, Malhotra RK, Singh T. Effect of Faculty Training on Quality of Multiple-Choice Questions. Int J Appl Basic

Med Res. 2020;10(3):210-4. doi:10.4103/ijabmr.IJABMR_30_20 PubMed PMID: 33088746; PubMed Central PMCID: PMC7534721.

Dellinges MA, Curtis DA. Will a Short Training Session Improve Multiple-Choice Item-Writing Quality by Dental School Faculty? A

Pilot Study. J Dent Educ. août 2017;81(8):948-55. doi:10.21815/ JDE.017.047 PubMed PMID: 28765439.

Haladyna TM, Downing SM, Rodriguez MC. A Review of Multiple- Choice Item-Writing Guidelines for Classroom Assessment.

Appl Meas Educ. juill 2002;15(3):309-33. doi:10.1207/S15324818AME1503_5

Pais J, Silva A, Guimarães B, Povo A, Coelho E, Silva-Pereira F, et al. Do item-writing flaws reduce examinations psychometric

quality? BMC Res Notes. 11 août 2016;9:399. doi:10.1186/s13104-016-2202-4 PubMed PMID: 27516160; PubMed Central PMCID:

PMC4982015.

Shahat KA. Item Analysis of Multiple-Choice Question (MCQ)-Based Exam Efficiency Among Postgraduate Pediatric Medical Students:

An Observational, Cross-Sectional Study From Saudi Arabia. Cureus. sept 2024;16(9):e69151. doi:10.7759/cureus.69151 PubMed

PMID: 39262935; PubMed Central PMCID: PMC11388033.

Bhattacherjee S, Mukherjee A, Bhandari K, Rout AJ. Evaluation of Multiple-Choice Questions by Item Analysis, from an Online

Internal Assessment of 6th Semester Medical Students in a Rural Medical College, West Bengal. Indian J Community Med Off Publ

Indian Assoc Prev Soc Med. 2022;47(1):92-5. doi:10.4103/ijcm. ijcm_1156_21 PubMed PMID: 35368481; PubMed Central PMCID:

PMC8971860.

Rezigalla AA, Eleragi AMESA, Elhussein AB, Alfaifi J, ALGhamdi MA, Al Ameer AY, et al. Item analysis: the impact of distractor efficiency

on the difficulty index and discrimination power of multiple-choice items. BMC Med Educ. 24 avr 2024;24(1):445. doi:10.1186/s12909-

-05433-y PubMed PMID: 38658912; PubMed Central PMCID: PMC11040895.

Abdulghani HM, Irshad M, Haque S, Ahmad T, Sattar K, Khalil MS. Effectiveness of longitudinal faculty development programs on MCQs items writing skills: A follow-up study. PLOS ONE. 10 oct 2017;12(10):e0185895. doi:10.1371/journal.pone.0185895

Abozaid H, Park YS, Tekian A. Peer review improves psychometric characteristics of multiple choice questions. Med Teach. avr

;39(sup1):S50-4. doi:10.1080/0142159X.2016.1254743 PubMed PMID: 28103718.

Karthikeyan S, O’Connor E, Hu W. Barriers and facilitators to writing quality items for medical school assessments - a scoping review.

BMC Med Educ. 2 mai 2019;19(1):123. doi:10.1186/s12909-019-1544-8 PubMed PMID: 31046744; PubMed Central PMCID:

PMC6498649.

Ali K, Zahra D. Ten tips for effective use and quality assurance of multiple-choice questions in knowledge-based assessments. Eur

J Dent Educ Off J Assoc Dent Educ Eur. mai 2024;28(2):655-62. doi:10.1111/eje.12992 PubMed PMID: 38282273.

Keskes S, Ghazali H, Chermiti I, Ben Turkia H, Ben Salah N, Boujelbene N, et al. Analyse docimologique des grilles critériées

dans une épreuve d’examen clinique objectif structuré en médecine d’urgence : évaluation de la validité et de la fiabilité. Tunis Med.

;104(2):281-287. doi:10.62438/tunismed.v104i02.6440.

Fichiers supplémentaires

Publiée

2026-10-11