引言:
缺乏可靠的工具来衡量实施过程和结果会削弱人们对研究结果和策略有效性的信心。本研究旨在从两个来源收集先前发布的《模拟实施质量评分标准》(IQR-SIM)的有效性证据:响应过程和内部结构。
方法:
IQR-SIM分为三个实施阶段,每个阶段又包含若干主题。这些主题下的条目代表了有效实施的可操作步骤。该评分标准采用3点评分制(1、2、3分),同时提供“不知道/无法评估”和“不适用”这两个非评分选项。研究人员通过对国际模拟中心进行半结构化访谈来收集详细的项目描述。三名经过培训的评分者使用IQR-SIM对这些访谈数据进行了评估。通过统计评分和非评分选项的使用频率来评估评分者的评分情况。通过评估评分者间的可靠性来考察评分的变异性,同时分析内部一致性可靠性以确定所有条目是否测量了相同的构念。
结果:
共有来自7个国际模拟中心的20个项目参与了研究。第一阶段(利益相关者参与和背景探索)中完全完成条目的比例最高(54.6%的条目获得了3分)。主题1b(获得相关利益相关者的支持)的完成率也较高(68.3%)。条目9(关于人力资源需求的规划)获得了最高的3分比例(83.3%)。内部一致性可靠性良好(Cronbach alpha=0.85)。评分者间的相关性系数为中等(ICC=0.57),不同评分者之间的ICC值介于0.39到0.52之间。
结论:
本研究建立了关于IQR-SIM响应过程和内部结构的多站点有效性证据,支持其用于评估基于模拟的项目的实施质量。研究表明,IQR-SIM可以应用于不同的模拟中心和项目类型,从而提高了其在实施评估中的广泛应用性。


