医学影像装备首台(套)重大技术装备试验验证平台
PET/MR设备的临床可用性评价方法研究
作者:     发布日期:2024-02-06
点击率:

[摘 要] 目的 探讨正电子发射型磁共振成像系统(Positron Emission Tomography/Magnetic Resonance Imaging,PET/MR)设备的人机接口协同性,探讨该类设备在临床中的可用性评价方法。方法 采用层次分析法构建可用性评价体系,设立专家组并计算专家权威系数,以德尔菲法设计可用性调查问卷,以操作设备的技师和医生为调查对象,收集全国范围内联影PET/MR设备的问卷打分表。结果 共收集79份调查问卷,涉及医院18家。其中生理信号门控单元接口可用性评价评分最低,PET无源质控可用性评价评分最高;副高级、高级职称人员对指标评分略高于中级及以下人员;人员的不同操作时长对各项接口的评分具有相同趋势,使用者在3个月内的评分明显低于另外两组,差异均有统计学意义(P<0.05);不同操作时长人员对6个特定评价参数评分差异均有统计学意义(P<0.05)。结论 基于层次分析法建立的可用性评价体系能够用于PET/MR设备临床可用性评价,基于德尔菲法形成的可用性调查问卷为探讨PET/MR设备可用性评价方法提供参考。

[关键词] 正电子发射型磁共振成像系统;临床可用性;评价方法;医疗设备Study on the Clinical Usability and Evaluation Methods of PET/MR Equipment WU Ping, RONG Yao, WU Tianqi, QIAO Lei, BAI Mei, WU Hang Department of Medical Engineering, Xuanwu Hospital, Capital Medical University, Beijing 100053, China Abstract: Objective To explore the human-machine interface collaboration of positron emission tomography/magnetic resonance imaging (PET/MR) equipment, and to explore the clinical usability evaluation method of this kind of equipment. Methods The usability evaluation system was established by using analytic hierarchy process, an expert group was set up and the expert authority coefficient was calculated. The usability questionnaire was designed by Delphi method, and the technicians and doctors who operated the equipment were investigated, and the questionnaire scoring table of UIH PET/MR equipment was collected nationwide. Results A total of 79 survey questionnaires were collected, involving 18 hospitals. The usability evaluation score of the physiological signal gating unit interface is the lowest, and the PET passive quality control usability evaluation score is the highest; Personnel with deputy senior or senior professional titles have slightly higher scores on indicators than those with intermediate or lower levels; The scores of personnel with different operating hours on various interfaces have the same trend, and the scores of users within 3 months are significantly lower than the other two groups, with significant differences (P<0.05); There were significant differences in the scores of six specific evaluation parameters among personnel with different operating hours (P<0.05). Conclusion The usability evaluation system established based on the Analytic Hierarchy Process can be used for the clinical usability evaluation of PET/MR devices. The usability survey questionnaire formed based on the Delphi method provides a strong reference for exploring the usability evaluation methods of PET/MR devices. Key words: PET/MR; clinical usability; evaluation method; medical device

[中图分类号] R197.39

[文献标识码] A

doi:10.3969/j.issn.1674-1633.2023.12.000

[文章编号] 1674-1633(2023)12-0000-00 

引言

随着科学科技的进步,医疗设备作为疾病诊断治疗的辅助手段,其产品功能在集成性和综合性上快速发展。

一体化正电子发射型磁共振成像系统(Positron EmissionTomography/Magnetic Resonance Imaging,PET/MR) 是集成了放射性核素在体内聚集成像和磁共振成像功能 [1],并将 PET 分子图像与 MR 结构图像结合在一起的

全新高端医疗影像设备。根据《中国医疗器械行业数据报告(2022)》[2] 调查结果显示,我国核医学类设备市场以进口品牌为主,2017—2021 年全国核医学类设备主要品牌保有率中,进口品牌保有率最高的为美国 GE(2021 年约为 57%),国产品牌保有率最高的为上海联影(2021 年约为 3%)。随着国产 PET/MR 设备的发展,市场对该类设备的要求不仅局限于安全有效性,更是对其稳定可靠的功能性和良好的人机协同性提出了更高的要求。因此,医疗设备在使用过程中的可用性评价成为亟待解决的问题。医疗器械可用性(Usability)是指期用户在预期使用场景下正常使用医疗器械时,保证医疗器械安全有效使用的用户接口易用特性 [3]。其中接口是指用户与医疗器械的全部人机交互 [4] 方式,包括医疗器械的形状尺寸、显示反馈、连接组装、操作控制、培训材料等。本文旨在讨论国产 PET/MR 设备的人机接口协同性,探讨该类设备在临床中的可用性评价方法。

       

1 材料和方法

1.1 研究材料

本文研究对象为上海联影公司 PET/MR 设备,型号为 uPMR790,该设备于 2018 年上市。

1.2 研究方法

本文采用层次分析法 [5] 统筹构建可用性评价方法,层次分析法是基于网络系统理论和多目标综合评价的层

次权重决策分析方法即将与决策总是有关的元素分解成目标、准则、方案等层次并进行定性和定量分析的决策

方法 [6]。具体步骤为下文所示 :

(1)确定评价目标 [7]。本文所述案例拟讨论 PET/MR 设备软件界面和硬件接口的可用性评价。医疗器械可用性评价应结合用户、使用场景和用户接口 3 个核心要素予以综合考量。

(2)建立层次模型。层次模型以自上而下的思路对目标进行分解,其中待评价主要用户为影像科技师和医师等 ;待评价装备的使用环境,包括技术环境和物理环境等,保证在评价过程中待评价装备是在预期使用场景下正常使用 ;待评价的用户操作任务主要包括设备日常质控和患者扫描、图像后处理及高级功能任务等。

(3)设立专家组 [8]。本项目专家组人数共 20 人,其中从业临床实操技师及医生共 15 人(占比 75%),设备研发人员 5 人(占比 25%)。工作经验的人数和占比分别为 <5 年为 10 人,占比 50% ;5—10 年为 4 人,占比 20% ;10—20 年为 5 人,占比 25% ;>20 年为 1 人,占比 5%。从事相关行业 5 年以上的专家占总人数的50%,基本符合项目需求。依据专家简历和自评情况,计算专家权威程度评分包含两个决定性因素 :专家打分的判断依据 Ai 和专家对问题的熟悉程度 As。专家判断依据量化打分包含实践经验和理论分析两部分,“理论分析”因子和“实践经验”因子的分值从高到底包括 0.5、0.4、0.3、0.2、0.1和 0 分,其评分为两部分总分。专家熟悉程度 As 量化 打分标准见表 1。 专家的权威程度用权威系数 Ag 表示,计算方法如公式(1)所示 : Ag= Ai+As/2(1)

以均值进行归一化计算后的第 i 位专家的权威程度系数为 Agi,计算方法如公式(2)所示 :(4)设计调查问卷。本文根据实际需求和评价目标确定评价参数,形成调查问卷。调查问卷包括答卷人个 人信息和设备可用性两部分内容。将评价参数依据自顶 而下的原则进行分解,共分为三级,其中 :依据设备软 件或硬件设定一级指标 2 项,依据 PET 无源质控、PET有源质控等因素设定二级指标 13 项,依据具体评价方案设定三级指标 84 项。问卷设计包括指标明细及指标 重要程度(即指标权重)两部分内容,每条指标附具体解释及打分规则,每条指标按满分 100 分计算,专家根据重要程度自行打分。(5)计算评价指标权重。本文采用德尔菲法确定评价量表中各项指标的权重,德尔菲法(也称专家调查法,是一种反馈匿名函询法)是依靠专家知识及智慧评估并判定指标权重的一种重要方法,具有匿名性、统计性和反馈性等特征,保证评价结果较为科学合理。根据专家权威程度系数和专家对各项指标的评分,计算各评价指标的评分权重。本问卷的三级指标分为共性三级指标和特殊三级指标两种。在计算第 i 位专家对第 k3 个三级指标的评分 Xik3 时具有差异 :共性三级指标具体包括 :按钮响应及时性的重要性、按钮布局合理性的重要性、操作菜单响应及时性的重要性、操作菜单布局合理性的重要性、操作提示明确性的重要性、接口设计导致发生误操作影响的重要性、各接口完成预期任务的重要性 7 个,对应二级接口指标共 12 个。需要对其二级指标进行权重拆分计算,以获得三级指标权重分值。计算方法如公式(3)所示 :

 

Xik3 = C ×Cim2 ik3 Max(Cik3 )(3)

其中,Cik3 为第 i 位专家对第 k3 个三级指标的评分,Max(Cik3 ) 为所有专家对第 k3 个三级指标评分中的最大 值,m2 为第 k3 个三级指标对应的二级指标序数,Cim2 为第i 位专家对第 m2 个二级指标的评分。特殊三级指标采用直接评分的方式,所评分值即为Xik3 。第 k3 个三级指

标的加权平均分 Zk3 计算方法如公式(4)所示 :

 

Wk 3 = 1 (Agi . Xik3 ) N N i=1 Σ(4)

其中,N 为专家人数。 第 k3 个三级指标权重系数 Wk 3 计算方法如公式(5)所示 :

Wk 3 =Zk3 /ΣZk3 (5)

(6)参与调查对象。本文根据用户对设备的熟悉程度设定参与测试人员的类型与数量,现阶段主要为操作设备的技师和医生,用户采取手机微信识别调查问卷二维码的方式独立完成问卷调查,以保证测试结果客观有效。

1.4 统计分析方法

本文使用 SPSS 22.0 软件进行统计学分析,统计方法选择秩和检验,以 P<0.05 为差异有统计学意义。

2 结果

2.1 指标体系和专家权威系数

本文建立的评价指标体系如图 1 所示,依据上述计算方法及计算公式,可以得到本调查问卷中各项评价指标的评分及权重。专家判断依据 Ai 在 [0.58-1.0] 之间,平均值为 0.824。专家对指标的熟悉程度 As 在 [0.55-1.00]之间,平均值为 0.79。专家权威程度系数 Ag 在 [0.6875-1.00] 之间,平均值为 0.807。在该项目的研究中所获取的专家整体权威水平符合基本研究要求。归一化后的专家权威程度系数为 Agi。注:指标1:按钮相应及时性;指标3:菜单响应及时 性;指标2:按钮布局合理性;指标4:菜单布局合理性; 指标5:提示明确;指标7:是否能够完成预期任务;指标 9:操作便捷性;指标11:信号接收稳定性;指标6:是否已发生误操作指标;指标8:参数调整是否便捷;指标10:信号接收及时性;指标12:覆盖范围符合预期;指标13:状态识别明确;指标14:附件使用符合预期。

2.2 评价结果

本次参与调查对象涉及医院 18 家,共计 82 人次,其中有效问卷 79 份。

2.2.1 二级指标评分

二级指标评分如图 2 所示,生理信号门控单元接可用性评价评分最低,PET 无源质控可用性评价评分高,各指标之间无显著性差异。

 

 

2.2.2 职称与评分统计

设备操作者的职称是能够直接反应其在该领域工作的专业程度,本文讨论操作者职称对指标评分的影响,将被调查者分为初级及以下、中级、副高级、高级四个组别,不同职称人员对各指标的评价分数统计表如表 2所示。由表中可见,副高级、高级职称人员对指标评分略高于中级及以下人员,但组间无显著性差异。

2.2.3 操作时长与评分统计

由于人为因素在设备临床可用性评价中具有重要作用,操作者使用设备的时间年限决定了其临床工作熟悉程度。本文将被调查者的设备操作时间分为 3 个月以内、3~12 个月和 12 个月以上三个组别,其评分结果见表 3。由表中可见,不同操作时长人员对各项接口的评分具相同趋势,即少于 3 个月人员各项评分均小于其他两人员、3~12 个月人员各项评分均大于其他两组人员。使用者在 3 个月内的评分明显低于另外两组别,差异具有显著性(Z=-2.021,P=0.043<0.05);对逐个接口变量进行统计学检验,其中 PET 无源质控(P=0.027)、MR 扫描重建(P=0.023)、参数测量接口(P=0.034)、控制盒接口(p=0.033)、控制面板接口(P=0.011)、线圈接口(P=0.023)六个变量差异均具有显著性(P<0.05)。

3 讨论

国家卫生健康委于 2023 年 3 月 21 日发布《大型医用设备配置许可管理目录(2023 年)通知》[9] 表明,PET/MR 由甲类调整为乙类管理,随着配置要求的降低,未来 PET/MR 设备作为一种多模态融合的成像技术以及其在神经、肿瘤、心血管疾病的诊断和评估优势 [10-11],其装机量将有所增加,据此,建立国产 PET/MR 设备临床可用性评价方案的需求更加紧迫 [12-15],探讨该类设备临床可用性将对推动国产高端影像设备发展、提高市场占有率具有更重要的意义。经调查,PET 无源质控可用性评价指标评分最高,说明 PET 无源校正相关按钮和菜单的响应及时性和布局合理性、相关提示、避免误操作、预期任务完成情况等方面的可用性较优于其他指标 ;生理信号门控单元接口可用性评价指标评分最低,说明生理信号门控单元在操作便捷性、指示灯提示、信号接收及时性和稳定性、预期任务完成情况等方面的可用性较劣于其他接口,可能与设备硬件设计有关 [16],也可能是人为因素,包括但不限于操作者的熟悉程度、熟练程度、过往经验等。各指标之间差异无显著性,表明该设备的人机接口协同性整体稳定,无明显缺陷,能够满足临床辅助诊断使用 经过操作者职称、操作时长分别与评分进行统计分 析发现,副高及以上职称人员的指标评分略高于中级及 以下职称人员,但组间无显著性差异 ;人员操作时长不 同,其对各项接口的评分具有相同趋势且具有显著性差 异。该结果满足学习曲线 [17-18](也称为经验曲线)趋势, 即随着操作者经验的丰富,其操作速度提高、错误率降 低,且能够提出由经验产生的设备设计改进建议 [19-21]。 人为因素在设备临床可用性评价中具有重要作用 [22], 本文仅讨论人员职称和设备操作时长两个影响因素,未 涉及人员相关其他因素,后续工作拟扩大调查人员维度, 探讨人因在设备可用性评价中的影响作用。随着国产 PET/MR 设备的不断发展,设备性能指标和接口设计均 会有不同程度的改变,本文基于德尔菲法建立的评价指 标参数体系需要参考设备技术发展、临床评价反馈、不 良事件等多方面依据,不断更新指标,以适应设备技术 发展,保持评价方法的客观性。

4 结论

本文建立 PET/MR 设备可用性评价参数体系,分别通过专家权威系数和问卷调查打分的方式确定评价参 数权重与参数评价分值。经统计分析,PET 无源质控可 用性较好,该设备整体的人机接口协同性基本稳定,无 明显缺陷 ;所有参与调查对象中,初、中级职称人员对设备可用性评分略低于(副)高级职称人员,但无显著 性差异 ;操作者使用时长不同,对设备可用性评分不同但评分具有相同趋势,使用者在 3 个月内的评分明显低于另外两组别,差异具有显著性 ;操作者使用时长不同,对特定六个参数的评价具有显著性差异。本文基于层次分析法建立的可用性评价体系能够用于国产 PET/MR设备临床可用性评价,基于德尔菲法形成的可用性调查问卷为探讨国产 PET/MR 设备可用性评价方法提供参考。

[参考文献]

[1] 刘鹏, 富丽萍. 一体化PET/MR技术研究进展[J]. 中国医疗设备, 2019, 34(12): 160-164. Liu P, Fu LP. Technical Progress of Integrated PET/MR[J].China Med Devices, 2019, 34(12): 160-164.

[2] 金东, 陈玉俊, 崔筱平. 中国医疗器械行业数据报告(2023) 设备编[M]. 北京: 社会科学文献出版社, 2023.

[3] 张鑫, 孟邹清, 李春霞, 等. 医学影像设备可用性评价集成方法[J]. 仪器仪表标准化与计量, 2021(6): 16-18. Zhang X, Meng ZQ, Li CX, et al. Integrated method forusability evaluation of medical imaging equipment[J]. Instrum Stand Metrol, 2021(6): 16-18.

[4] Paradowski M, Fletcher A. Using task analysis to improve usability of fatigue modelling software[J]. Int J Hum Comput Stud, 2004, 60 (1): 101-115.

[5] 魏会龙, 施秋华, 周金文, 等. 基于层次分析法的深圳市地面 坍塌危险性评价[J]. 中国矿业, 2021, 30(S2): 110-116. Wei HL, Shi QH, Zhou JW, et al. Risk assessment of groundcollapse in Shenzhen based on analytic hierarchy process[J]. China Min Mag, 2021, 30(S2): 110-116.

[6] 刘佩玉, 何伟嘉, 张小曼. 基于用户版自我管理类的移动医疗APP评价体系构建[J]. 中国医疗设备, 2022, 37(1): 102-105. Liu PY, He WJ, Zhang XM. Constructing of mobile health APPevaluation system based on user version of self-management[J]. China Medical Devices, 2022, 37(1): 102-105.

[7] 张鑫, 孟邹清, 霍文磊, 等. 医疗设备售后服务评价指标体系 与模型研究[J]. 中国仪器仪表, 2021(1): 26-30. Zhang X, Meng ZQ, Huo WL, et al. Evaluation indexsystem and model of after-sales service of high-end medical equipment[J]. China Instrum, 2021(1): 26-30.

[8] 赵古月, 尹建东, 郭文力, 等. 2018年医用磁共振设备使用体验调查分析[J]. 中国医疗设备, 2019, 34(8): 15-18. Zhao GY, Yin JD, Guo WL, et al. Investigation and analysis onthe user experience of medical magnetic resonance equipment in 2018[J]. China Med Devices, 2019, 34(8): 15-18.

[9] 财务司. 国家卫生健康委关于发布大型医用设备配置许可管 理目录(2023年)的通知[EB/OL]. (2023-03-21) [2023-08-24]. http://www.nhc.gov.cn/caiwusi/s10743/202303/b48f20bbb 17a490193adab666a2a3ead.shtml.

[10] Bailey D, Pichler B, Gückel B, et al. Combined PET/MRI: from Status Quo to Status Go. Summary Report of the Fifth International Workshop on PET/MR Imaging; February 15–19, 2016; Tübingen, Germany[J]. Mol Imaging Biol, 2016, 18(5): 637-650.

[11] Fendler WP, Czernin J, Herrmann K, et al. Variations in PET/ MRI operations: Results from an international survey among 39 active sites[J]. J Nucl Med, 2016, 57(12): 2016-2021.

[12] 汪凌峰. 微创外科手术机器人力控制技术研究[D]. 重庆: 重 庆理工大学, 2020.

[13] 王慧亮. 可用性工程在大型医用电气设备研发中的应用——以放射治疗设备为例[J]. 中国医疗器械信息, 2018,

24(15): 28-32. Wang HL. Application of usability engineering in thedevelopment of large-scale medical electrical equipment--take radiotherapy equipment as an example[J]. China Med Dev Inf, 2018, 24(15): 28-32

[14] 杨景轶. 基于情境意识的人机交互界面可用性测试研究[D].北京: 北京邮电大学, 2015.

[15] 张宜川. 医疗器械人因工程与可用性测试[J]. 中国医疗器械信息, 2019, 25(15): 12-16. Zhang YC. Testing for medical device human factors engineering and usability[J]. China Medical Device Information, 2019, 25(15): 12-16.

[16] 严毅, 陆文健, 任广彬, 等. 基于多维评价模型的国产迈瑞呼吸机可用性评价研究[J]. 中国医疗设备, 2023, 38(9): 41-45. Yan Y, Lu SJ, Ren GB, et al. Usability evaluation research of domestic mindray ventilators based on multi-dimensional evaluation model[J]. China Med Devices, 2023, 38(9): 41-45.

[17] 张晓, 邓露, 徐威, 等. 达芬奇机器人手术医疗团队学习曲线分析与手术室护理团队辅助策略[J]. 机器人外科学杂志(中英文), 2023, 4(1): 57-62. Zhang X, Deng L, Xu W, et al. Analysis on the learning curve of Da Vinci robotic surgical team and nursing strategies for operating room[J]. Chin J Robot Surg, 2023, 4(1): 57-62.

[18] 智信, 平航宇, 彭伟, 等. 鸿鹄机器人辅助全膝关节置换术 学习曲线初步研究[J]. 中华骨与关节外科杂志, 2023, 16(4): 340-346. Zhi X, Ping HY, Peng W, et al. Learning curve of SkyWalkerrobot-assisted total knee arthroplasty[J]. Chin J Bone Joint Surg, 2023, 16(4): 340-346.

[19] 刘良, 张晓盼, 韩少强, 等. 国内在用磁共振线圈的配置和使用评价研究[J]. 中国医疗设备, 2022, 37(10): 109-113. Liu L, Zhang XP, Han SQ, et al. Evaluation study on theconfiguration and performance of in-use magnetic resonance coils in China[J]. China Med Devices, 2022, 37(10): 109-113.

[20] Fishwick M. Emotional Design: Why We Love (Or Hate) Everyday Things[M]. New York: Basic Books, 2004.

[21] 李永锋, 朱丽萍. 基于模糊层次分析法的产品可用性评价方 法[J]. 机械工程学报, 2012, 48(14): 183-191. Li YF, Zhu LP. Product usability evaluation method based on fuzzy analytic hierarchy process[J]. J Mech Eng, 2012, 48(14): 183-191.

[22] 李澍, 郝烨, 张超, 等. 医用手术机器人可用性评价方法 研究[J]. 中国医疗设备, 2020, 35(9): 9-12. Li S, Hao Y, Zhang C, et al. Evaluation method on usability of medical surgical robot[J]. China Med Devices, 2020, 35(9):

9-12

 

 

 


影像与放疗设备
NeuVision 690 全智能悬吊能谱功能性DR
数字化医用X射线摄影系统 DigiEye680P
新东方1000LB型产品