《Urology》:Longitudinal Trends in Urology In-Service Examination Performance: 2016 – 2023
编辑推荐:
尿科住院医师考试(ISE)2016-2023年成绩呈整体下降趋势,PGY2-5下降显著,尤其结石疾病、生理/免疫/肾上腺学等学科子主题表现下滑(p<0.001),而PGY1在液体/移植/高血压等领域略有提升(p=0.05)。疫情后(2020-2023)多数PGY层级和学科成绩进一步降低,但重复题目得分稳定(69.3% vs 69.7%)。
Jill S. Patel | Kayla M. Keenan | Erik B. Lehman | Christopher S. Cooper | Patrick Kerley | Sam S. Chang | Shelby Englert | Donna Connelly | Mark P. Cain | Matthew Baden | Jay D. Raman
宾夕法尼亚州赫尔希市宾夕法尼亚州立大学赫尔希米尔顿·S·赫尔希医疗中心
摘要
目的
评估2016年至2023年间泌尿科在职考试(ISE)的长期趋势,并识别随时间变化的表现模式。
方法
对美国泌尿协会提供的ISE总分进行回顾性队列分析。分析了2016年至2023年间各研究生年级(PGY1-5)及子主题的平均正确率。2020年被用作子分析中COVID-19大流行的起始时间标记。采用双样本t检验确定统计显著性(α ≤ 0.05)。
结果
共分析了680份成绩。平均分数随着研究生年级的提高而上升(PGY1为43-46%,PGY5为68-71%),但总体上呈下降趋势。线性趋势分析显示,PGY2-5年的成绩下降幅度显著,其中PGY3-5年的下降最为明显和强烈。在结石病(64.2%降至56.1%,p=0.01)和生理学/免疫学/肾上腺(70.2%降至56.5%,p<0.001)这两个子主题中,所有研究生年级的成绩都有所下降。此外,儿科(PGY2-4)、先天性异常/胚胎学/解剖学(PGY1-2,4)和影像学(PGY3-4)的成绩也有所下降。相比之下,PGY1年在液体与电解质/移植/高血压/血管/肾脏学方面的成绩略有提高(50.5%对比56.0%,p=0.05)。217道重复题目的得分保持稳定(69.3%对比69.7%)。
结论
2016年至2023年间,所有研究生年级的ISE平均成绩均有所下降,其中泌尿科一般子主题的降幅最大。2020年之后的成绩在大多数研究生年级和内容领域中均较低,而重复题目的得分保持稳定。这些趋势可能反映了考试难度的增加、内容的扩展、题目构成的变化、学习策略的演变以及临床经验的差异,而非知识水平的下降。
引言
泌尿科在职考试(ISE)是一项每年进行的标准化多项选择题测试,旨在评估住院医师的基础知识,为他们准备临床实践和资格考试。该考试帮助项目评估住院医师的知识水平、监测进展,并在个人和项目层面识别潜在的差距。先前的数据显示,随着住院医师培训的深入,他们的成绩普遍呈上升趋势。
历史上,美国泌尿协会(AUA)和美国泌尿委员会(ABU)合作开发了ISE作为教育工具,帮助住院医师准备ABU资格考试(ABU QE)。虽然ISE是一种形成性评估,用于识别住院医师的优势和知识短板,但ABU QE是一项高风险考试,旨在确保其具备安全独立执业的最低知识标准。
现代医学考试越来越强调与布鲁姆分类法相匹配的高阶认知技能。需要分析和综合推理的题目比单纯回忆型题目更具挑战性,先前的研究表明,即使对于基础知识扎实的学习者,更注重高阶问题的考核也可能降低其表现。ABU QE的历史失败率很低,低至3%。然而,住院医师和项目通常依赖ISE等评估工具来识别临床知识上的不足。一些项目建议达到最低ISE分数,尤其是在PGY-3及以上阶段,因为较高的分数与更好的ABU QE表现相关。不过,其他研究表明,鉴于ISE的低失败率和个体表现的差异,ISE可能更适合用于识别需要额外教育支持的住院医师。
本研究的目的是评估2016年至2023年间ISE分数的长期趋势和表现模式,因其与ABU QE的表现相关。
方法
方法
对2016年至2023年的泌尿科ISE表现数据进行了回顾性队列分析。美国泌尿协会提供了每年的平均正确率,并按研究生年级(PGY1-5)和16个预定义的子主题领域进行了分层。所有数据均已去标识化,并以汇总形式报告(每个数字代表特定年份某一主题内所有研究生年级的分数总和)。
主要目的是评估不同培训阶段住院医师的表现趋势。
结果
2016年至2023年间,共收集了680份ISE总分用于分析年度变化趋势。此外,还将2016年至2019年和2020年至2023年的成绩分别进行分组,以确定COVID-19大流行期间趋势是否发生变化。
讨论
我们的研究得出几个关键发现:首先,尽管平均分数随着研究生年级的提高而上升,但总体表现在这八年期间逐渐下降;其次,泌尿科一般领域的成绩下降最为明显,包括结石病、生理学/免疫学/肾上腺、儿科、先天性异常/胚胎学/解剖学和影像学;第三,虽然2020年之后的成绩普遍较低,但实际上在之前就已经开始下降。
结论
2016年至2023年间,所有研究生年级的泌尿科ISE表现均有所下降,尤其是在泌尿科一般子主题中。这一趋势在COVID-19大流行之前就已经开始,并持续存在,表明其受到多种因素的影响。在评估住院医师是否具备ABU QE的备考能力时,应综合考虑整体ISE表现和临床技能。
伦理批准
由于本研究不涉及人类受试者或患者数据,因此免于接受宾夕法尼亚州立大学机构审查委员会的审查。
资金
本研究未获得公共、商业或非营利部门的任何特定资助。
作者贡献声明
Mark P. Cain:撰写、审阅和编辑。
Donna Connelly:撰写、审阅和编辑。
Shelby Englert:撰写、审阅和编辑。
Sam S. Chang:撰写、审阅和编辑。
Kayla M. Keenan:撰写、审阅和编辑;撰写初稿。
Jill S. Patel:撰写、审阅和编辑;撰写初稿;方法学设计;数据分析;概念构建。
Jay D. Raman:撰写、审阅和编辑;撰写初稿;监督;方法学设计;数据分析。
关于写作过程中使用生成式AI和AI辅助技术的声明
作者在撰写本手稿时未使用生成式AI或AI辅助技术。
利益冲突声明
作者声明以下可能构成利益冲突的财务关系/个人关系:Jay D. Raman——曾任美国泌尿协会教育办公室主任;现任美国泌尿委员会口试和笔试委员会委员。
Christopher S. Cooper——美国泌尿委员会考试委员会主席。
Patrick Kerley——美国泌尿协会员工。
Sam S. Chang——曾任美国泌尿委员会考试委员会主席;现任美国泌尿委员会受托人。
Shelby Englert——美国泌尿协会员工。
Donna Connelly——
致谢
作者感谢美国泌尿协会和美国泌尿委员会在本研究中的支持及提供的数据。