System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本申请涉及医学影像,特别是涉及一种操作评估方法、系统、计算机设备和存储介质。
技术介绍
1、随着人工智能技术在临床医学领域的深度渗透,其对手术过程的精细分析正逐步展现其巨大潜力。通过运用人工智能方法,对手术执行及医生培训过程中的操作行为进行全面而深入的评估,不仅有助于提高医疗质量,还能促进医生个人成长。
2、目前的操作评估方法大多只对手术画面进行了识别,不能准确识别出术中事件和医生操作,特别是对于操作过程中突发的特殊事件,无法对医生的处理操作进行有效评估。
3、针对相关技术中存在无法对医生的处理操作进行有效评估的问题,目前还没有提出有效的解决方案。
技术实现思路
1、基于此,有必要针对上述技术问题,提供一种能够有效评估处理操作的操作评估方法、系统、计算机设备和存储介质。
2、第一个方面,在本实施例中提供了一种操作评估方法,包括:
3、连续获取多帧手术图像和操作人员的行为图像;
4、根据所述手术图像和所述行为图像,识别得到当前操作和当前事件;并确定与所述当前事件对应的操作建议;
5、根据所述当前操作和所述操作建议,对所述操作人员进行单一操作评估,得到单一操作评估得分。
6、在其中的一些实施例中,所述根据所述手术图像和所述行为图像,识别得到当前操作和当前事件,包括:
7、基于预训练的动作捕捉模型,提取所述手术图像中器械的关键点,得到器械姿态;以及,提取所述行为图像中所述操作人员的关键点,得到
8、根据所述器械姿态和所述人体姿态,识别得到所述当前操作;
9、根据所述手术图像,识别得到所述当前事件。
10、在其中的一些实施例中,所述确定与所述当前事件对应的操作建议,包括:
11、将拼接后的所述当前操作和所述当前事件输入预训练的建议模型,输出所述操作建议;所述操作建议以所述建议模型的分类标签表示。
12、在其中的一些实施例中,所述根据所述当前操作和所述操作建议,对所述操作人员进行单一操作评估,得到单一操作评估得分,包括:
13、基于预训练的评估模型,对所述当前操作和所述操作建议的一致性进行评估,得到所述单一操作评估得分;
14、所述评估模型的输入为所述当前操作和所述操作建议经过量化对齐后的文本描述。
15、在其中的一些实施例中,所述根据所述当前操作和所述操作建议,对所述操作人员进行单一操作评估,得到单一操作评估得分,包括:
16、根据所述当前操作和所述操作建议的相似度,得到所述单一操作评估得分。
17、在其中的一些实施例中,还包括:
18、获取整个操作过程中所述操作人员的操作流程;所述操作流程包括不同操作阶段的不同操作;
19、通过对比所述操作流程和预设流程,对所述操作人员进行整体操作评估,得到整体操作评估得分。
20、在其中的一些实施例中,所述通过对比所述操作流程和预设流程,对所述操作人员进行整体操作评估,得到整体操作评估得分,包括:
21、对比确定所述操作流程和所述预设流程中每个操作的一致性;
22、根据每个所述操作的一致性和预设权重,加权得到所述整体操作评估得分。
23、第二个方面,在本实施例中提供了一种操作评估系统,包括:
24、获取模块,用于连续获取多帧手术图像和操作人员的行为图像;
25、识别模块,用于根据所述手术图像和所述行为图像,识别得到当前操作和当前事件;并确定与所述当前事件对应的操作建议;
26、评估模块,用于根据所述当前操作和所述操作建议,对所述操作人员进行单一操作评估,得到单一操作评估得分。
27、第三个方面,在本实施例中提供了一种计算机设备,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一个方面所述的操作评估方法。
28、第四个方面,在本实施例中提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述第一个方面所述的操作评估方法。
29、与相关技术相比,在本实施例中提供的操作评估方法、系统、计算机设备和存储介质,通过连续获取多帧手术图像和操作人员的行为图像;根据所述手术图像和所述行为图像,识别得到当前操作和当前事件;并确定与所述当前事件对应的操作建议;根据所述当前操作和所述操作建议,对所述操作人员进行单一操作评估,得到单一操作评估得分。通过本实施例,能够从手术图像和行为图像两个方面准确识别当前事件和当前操作,对于操作过程中的不同事件,也能够根据事件对应的操作建议对处理操作进行有效评估,解决了无法对医生的处理操作进行有效评估的问题。
30、本申请的一个或多个实施例的细节在以下附图和描述中提出,以使本申请的其他特征、目的和优点更加简明易懂。
本文档来自技高网...【技术保护点】
1.一种操作评估方法,其特征在于,包括:
2.根据权利要求1所述的操作评估方法,其特征在于,所述根据所述手术图像和所述行为图像,识别得到当前操作和当前事件,包括:
3.根据权利要求1或2任一项所述的操作评估方法,其特征在于,所述确定与所述当前事件对应的操作建议,包括:
4.根据权利要求1所述的操作评估方法,其特征在于,所述根据所述当前操作和所述操作建议,对所述操作人员进行单一操作评估,得到单一操作评估得分,包括:
5.根据权利要求1所述的操作评估方法,其特征在于,所述根据所述当前操作和所述操作建议,对所述操作人员进行单一操作评估,得到单一操作评估得分,包括:
6.根据权利要求1所述的操作评估方法,其特征在于,还包括:
7.根据权利要求6所述的操作评估方法,其特征在于,所述通过对比所述操作流程和预设流程,对所述操作人员进行整体操作评估,得到整体操作评估得分,包括:
8.一种操作评估系统,其特征在于,包括:
9.一种计算机设备,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的操作评估方法的步骤。
...【技术特征摘要】
1.一种操作评估方法,其特征在于,包括:
2.根据权利要求1所述的操作评估方法,其特征在于,所述根据所述手术图像和所述行为图像,识别得到当前操作和当前事件,包括:
3.根据权利要求1或2任一项所述的操作评估方法,其特征在于,所述确定与所述当前事件对应的操作建议,包括:
4.根据权利要求1所述的操作评估方法,其特征在于,所述根据所述当前操作和所述操作建议,对所述操作人员进行单一操作评估,得到单一操作评估得分,包括:
5.根据权利要求1所述的操作评估方法,其特征在于,所述根据所述当前操作和所述操作建议,对所述操作人员进行单一操作评估,得到单一操作评估得分,包括:
【专利技术属性】
技术研发人员:余鸿浩,蒋科学,周奇明,
申请(专利权)人:浙江华诺康科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。