How Well Are We Doing at Teaching Critical Appraisal Skills to Our Residents? A Needs Assessment of Plastic Surgery Journal Club - PubMed

Objective: To perform a needs assessment of journal club in plastic surgery residency programs. Specifically, this study focused on potential gaps in journal club associated with teaching and assessing critical appraisal of the literature, an important component of medical education and practice.

Methods: This is a qualitative study that utilized an online survey tool to collect information about the characteristics of journal club in plastic surgery residency programs in both Canada and the United States. Both program directors and residents were surveyed.

Results: When presented with a range of objectives, both program director and resident responses identified that teaching critical appraisal skills was often the main goal of journal club in their program (67.1%). Most trainees perceived that journal club was at least somewhat effective in improving their critical appraisal skills. Despite this perception, many residents felt that they had minimal to no experience in critical appraisal of the literature upon entry into their respective residency programs (46.2%), and only 29.2% indicated that they received formal instruction regarding critical appraisal. Three-quarters of residents indicated that there was no tool provided to aid them in their analysis of the literature. Finally, most residents also responded that they were not assessed objectively with regard to their performance.

Conclusions: Although residents in our study perceive journal club to at least somewhat improve their critical appraisal skills, evidence in the literature has been controversial. It cannot be assumed that residents are learning the skills they need by simply attending and reading the articles associated with journal club. Future study should focus on the best way to meet these objectives.

Objectif: Effectuer une évaluation des besoins des clubs de lecture dans les programmes de résidence en chirurgie plastique. La présente étude portait plus précisément sur les lacunes potentielles des clubs de lecture pour l’enseignement et l’évaluation critique des publications, un élément important de l’enseignement et de la pratique de la médecine.

Méthodologie: La présente étude qualitative a fait appel à un sondage en ligne pour colliger de l’information sur les caractéristiques des clubs de lecture dans les programmes de résidence en chirurgie plastique, à la fois au Canada et aux États-Unis. Tant les directeurs de programme que les étudiants ont été sondés.

Résultats: Lorsqu’on leur présentait une série d’objectifs, les directeurs de programme et les résidents répondaient que, souvent, les clubs de lecture étaient d’abord destinés à enseigner des compétences en évaluation critique (67,1 %). La plupart des étudiants trouvaient que les clubs de lecture étaient au moins quelque peu efficaces pour améliorer leurs compétences en évaluation critique. Malgré cette perception, de nombreux résidents trouvaient qu’ils avaient une expérience minimale, sinon inexistante, de l’évaluation critique des publications à leur arrivée en résidence (46,2 %), et seulement 29,2 % indiquaient avoir reçu une formation formelle en évaluation critique. Les trois quarts des résidents précisaient qu’aucun outil ne leur était fourni pour les aider à analyser les publications. Enfin, la plupart ajoutaient que leur performance n’avait pas fait l’objet d’une évaluation objective.

Conclusions: Même si les résidents à l’étude trouvaient que les clubs de lecture amélioraient au moins quelque peu leurs compétences en évaluation clinique, les preuves tirées des publications sont controversées. Il est impossible de présumer que les résidents acquièrent les compétences dont ils ont besoin simplement en assistant aux clubs de lecture et en lisant les articles exigés. De prochaines études devront porter sur le meilleur moyen de respecter ces objectifs.

1. 1. Linzer M. The journal club and medical education: over one hundred years of unrecorded history. Postgrad Med J. 1987;63(740):475–478. - PMC - PubMed
2. 1. Sidorov J. How are internal medicine residency journal clubs organized, and what makes them successful? Arch Intern Med. 1995;155(11):1193–1197. - PubMed
3. 1. Dirschl DR, Tornetta P, Bhandari M. Designing, conducting, and evaluating journal clubs in orthopaedic surgery. Clin Orthop Relat Res. 2003;(413):146–157. - PubMed
4. 1. Moro JK, Bhandari M. Planning and executing orthopedic journal clubs. Indian J Orthop. 2007;41(1):47–54. - PMC - PubMed
5. 1. Honey CP, Baker JA. Exploring the impact of journal clubs: a systematic review. Nurse Educ Today. 2011;31(8):825–831. - PubMed