【技术实现步骤摘要】
本专利技术涉及医疗器械领域，尤其涉及一种采用ar眼镜进行远程诊疗的系统和方法。
技术介绍
1、随着互联网+技术的普及，目前的诊疗已经不再拘泥于线下面对面问诊了，很多医疗单位开始在日常看诊中引入远程诊疗来进行线上看诊。
2、互联网远程诊疗技术的进步一定程度上解决了医疗行业面临的医疗资源配置不均、医疗服务能力和水平参差不齐等问题，提升了危重症的识别及救治能力、患者看病的效率；但是互联网远程诊疗中现有技术难以解决院外危、急症患者无法第一时间通过第一视角将患者体征及各项资料实时传递至高级别专家并进行互动指导，基层医生接诊时缺少足够有效的医疗案例辅助决策等问题，所以人们需要一种基于ar眼镜进行远程医疗的方法和技术来解决上述问题。
3、ar眼镜相较传统的远程医疗系统具有自由、便捷的特点，不受时间、地点的限制，可在院前或院内根据实际需求随时发起。
技术实现思路
1、为了克服现有技术的上述缺陷，本专利技术提供了一种采用ar眼镜进行远程诊疗的系统和方法，以解决
技术介绍
中提出的问题。
2、为了实现上述专利技术目的，本专利技术一方面提供了一种采用ar眼镜进行远程诊疗的系统，所述系统包括：
3、用户端，所述用户端为app产品，所述用户端包括用于让患者进行预约的预约会诊模块、图文问诊模块、患者信息管理模块；
4、ar眼镜端，包括ar眼镜设备，所述ar眼镜端用于会诊发起医生使用，所述ar眼镜端通过视频、音频的形式采集患者信息；
5、ai系
6、专家端，所述专家端包括云端存储模块、智慧诊疗模块、视频标注模块、电子白板模块和知识库模块，所述ar眼镜端采集到的患者信息同步传给所述专家端，供专家医生查看；
7、患者通过所述预约会诊模块预约医生会诊，会诊医生通过所述所述ar眼镜端通过视频、音频的形式采集患者信息，采集的患者信息传输至所述专家端，配合所述ai系统对患者患病信息进行分析，所述专家端在专家诊断完成后将结果回传到所述图文问诊模块。
8、进一步的，所述专家端包括app端或者web网页端，支持电脑、平板电脑、手机登录。
9、进一步的，所述云端存储模块是根据ar眼镜端、客户端所获取的患者信息、实时影像/音频、检查单的数据，进行数据实时存储和推流，支持媒体及数据流合并录制及存储，每当远程创建一个会诊房间，实时捕捉并关联来自目标会诊科室的各专家端对ar画面的动态实时标注，多端音、画、媒体流或/和数据流标注同步合屏传递及录制，以确保医疗过程资料完整存储。
10、进一步的，所述视频标注模块中，医生端结合辅助诊断意见和ar眼镜端获取的患者全时动态视频实时体征进行综合分析，进行全时视频互动标注指导治疗，视频标注详细实现方式如下：
11、通过ar模块对获取的患者全时视频进行镜头分割，然后记录每一帧图像及相应音频数据及时间戳；
12、对图像进行预处理，裁剪、旋转、翻转、缩放以提取出关键点特征，将视频所标注信息的特征值、标注内容、标注位置、标注起始时间戳、标注结束时间戳、视频画面的图像特征值、音频通道数据特征值、对应关系写入标注库；
13、实时交互转码时，获取当前要显示的视频画面特征值的标注位置和尺寸采用相对坐标和相对尺寸，记录标注位置、标注尺寸相对于视频画面长、宽的比值，将视频标注后的图片帧、音频、标注特征按照顺序重新组合合成视频数据，在对应时间偏移点附近，进行直方图匹配，计算标注点第一帧特征值和当前画面特征值的距离，这一距离在制定的阈值范围内，则在该帧画面开始显示标注，具体计算方法如下：
14、原视频文件a和转码视频文件b，在相同的时间步长分隔下计算，a文件得到的特征为{a1、a2、a3…an}，b文件得到的特征为{b1、b2、b3…bm}，其中m≤n；
15、对b特征字符串依次偏移t的整数倍，计算对应特征字符串位置的单向过零数的平均距离：
16、
17、求dj的最小值，如果最小值在小于制定的阈值，则认为两个视频文件匹配上了，记最小值对应的j值为jf，则jft为视频文件b对于视频文件a的时间偏移量，如果偏移量超过设定max值，则认为是异常帧丢弃掉，保证音、画、标注同步回显至诊室内各终端，精准定位病灶点，远程进行治疗。
18、进一步的，所述电子白板模块中：点击电子白板，远程会诊双方都可以看到白板内容，并可以同步在电子白板上进行写字、画图、编辑，同时支持电子白板内容的保存，后续存储至该会诊记录的内容中，支持随时查看和调取。
19、进一步的，所述知识库模块中，在远程会诊系统中构建了知识库模块，里面细分类别存储了各种医疗知识，存储内容包括但不限于急救知识、外科治疗知识、内科治疗知识、儿科治疗知识、骨科治疗知识、神经科治疗知识信息；存储方式不限于文字、图片、视频信息；在会诊的过程中，会诊专家在给与会诊申请者指导的时候，可以通过关键词搜索或者语音方式调取相关的内容，会展示相关的介绍、图片和视频，会诊专家选择某条知识信息后点击“打开”，可以通过ar眼镜端的界面同步展示到屏幕上，会诊申请者可以通过会诊室共享屏幕清晰看到，并根据知识库信息和专家的同步指导进行治疗操作，提升治疗效率和准确性。
20、进一步的，所述智慧诊疗模块是以ai系统为基础输出ai辅助决策，通过nlp技术智能识别患者的关键症状因子，并通过机器学习算法智能诊断或者智能匹配对应的标准案例库，提供辅助诊疗标准化流程给医生参考操作，若操作过程遇紧急问题无法处理可即时呼叫上级专家介入解决疑难问题，为基层医生提供了良好的辅助决策能力。
21、进一步的，所述ai辅助诊疗模式包括以下步骤：
22、数据收集：
23、收集大量的医疗数据，包括病人的基本信息、病历信息、各种类型检查结果的指标值、诊断结果、治疗方案，作为训练数据集；
24、数据预处理：
25、对于数据的预处理分为两部分：
26、第一部分是对于结构化数据的预处理，如病人的年龄、性别以及各项检查结果的指标值，进行数据清洗、标准化、特征化的处理，其中标准化是针对训练数据进行数据归一化处理，消除数据之间的量纲，保证模型训练的有效性，通过线性函数归一化将数据映射到[0,1]区间内，从而消除奇异样本数据导致的不良影响，提升模型的精度；
27、指标归一化公式为：
28、
29、式中：l'表示归一化后的值；l表示实时数据值；lmax及lmin分别表示各特征序列中的最大值和最小值；
30、第二部分是对于非结构化文本数据的预处理，采用自然语言处理对文本信息进行清洗、分词、标准化处理、特征化处理；
31、清洗是去除文本中的噪声和无用信息，例如特殊字符、html标签、url链接、不规范的表达，提高文本数据的质量和可用本文档来自技高网...
【技术保护点】
1.一种采用AR眼镜进行远程诊疗的系统，其特征在于，所述系统包括：
2.根据权利要求1所述的采用AR眼镜进行远程诊疗的系统，其特征在于，所述专家端包括APP端或者web网页端，支持电脑、平板电脑、手机登录。
3.根据权利要求1所述的采用AR眼镜进行远程诊疗的系统，其特征在于，所述云端存储模块是根据AR眼镜端、客户端所获取的患者信息、实时影像/音频、检查单的数据，进行数据实时存储和推流，支持媒体及数据流合并录制及存储，每当远程创建一个会诊房间，实时捕捉并关联来自目标会诊科室的各专家端对AR画面的动态实时标注，多端音、画、媒体流或/和数据流标注同步合屏传递及录制，以确保医疗过程资料完整存储。
4.根据权利要求1所述的采用AR眼镜进行远程诊疗的系统，其特征在于，所述视频标注模块中，医生端结合辅助诊断意见和AR眼镜端获取的患者全时动态视频实时体征进行综合分析，进行全时视频互动标注指导治疗，视频标注详细实现方式如下：
5.根据权利要求1所述的采用AR眼镜进行远程诊疗的系统，其特征在于，所述电子白板模块中：点击电子白板，远程会诊双方都可以看到白
6.根据权利要求1所述的采用AR眼镜进行远程诊疗的系统，其特征在于，所述知识库模块中，在远程会诊系统中构建了知识库模块，里面细分类别存储了各种医疗知识，存储内容包括但不限于急救知识、外科治疗知识、内科治疗知识、儿科治疗知识、骨科治疗知识、神经科治疗知识信息；存储方式不限于文字、图片、视频信息；在会诊的过程中，会诊专家在给与会诊申请者指导的时候，可以通过关键词搜索或者语音方式调取相关的内容，会展示相关的介绍、图片和视频，会诊专家选择某条知识信息后点击“打开”，可以通过AR眼镜端的界面同步展示到屏幕上，会诊申请者可以通过会诊室共享屏幕清晰看到，并根据知识库信息和专家的同步指导进行治疗操作，提升治疗效率和准确性。
7.根据权利要求1所述的采用AR眼镜进行远程诊疗的系统，其特征在于，所述智慧诊疗模块是以AI系统为基础输出AI辅助决策，通过NLP技术智能识别患者的关键症状因子，并通过机器学习算法智能诊断或者智能匹配对应的标准案例库，提供辅助诊疗标准化流程给医生参考操作，若操作过程遇紧急问题无法处理可即时呼叫上级专家介入解决疑难问题，为基层医生提供了良好的辅助决策能力。
8.根据权利要求1所述的采用AR眼镜进行远程诊疗的系统，其特征在于，所述AI辅助诊疗模式包括以下步骤：
9.根据权利要求1所述的采用AR眼镜进行远程诊疗的系统，其特征在于，所述AI辅助相似案例匹配模式包括以下步骤：
10.一种基于AR眼镜的远程诊疗方法，其特征在于，所述远程诊疗方法使用如权利要求1-权利要求9中所述的远程诊疗系统进行诊疗，所述远程诊疗方法包括以下步骤：
...【技术特征摘要】
1.一种采用ar眼镜进行远程诊疗的系统，其特征在于，所述系统包括：
2.根据权利要求1所述的采用ar眼镜进行远程诊疗的系统，其特征在于，所述专家端包括app端或者web网页端，支持电脑、平板电脑、手机登录。
3.根据权利要求1所述的采用ar眼镜进行远程诊疗的系统，其特征在于，所述云端存储模块是根据ar眼镜端、客户端所获取的患者信息、实时影像/音频、检查单的数据，进行数据实时存储和推流，支持媒体及数据流合并录制及存储，每当远程创建一个会诊房间，实时捕捉并关联来自目标会诊科室的各专家端对ar画面的动态实时标注，多端音、画、媒体流或/和数据流标注同步合屏传递及录制，以确保医疗过程资料完整存储。
4.根据权利要求1所述的采用ar眼镜进行远程诊疗的系统，其特征在于，所述视频标注模块中，医生端结合辅助诊断意见和ar眼镜端获取的患者全时动态视频实时体征进行综合分析，进行全时视频互动标注指导治疗，视频标注详细实现方式如下：
5.根据权利要求1所述的采用ar眼镜进行远程诊疗的系统，其特征在于，所述电子白板模块中：点击电子白板，远程会诊双方都可以看到白板内容，并可以同步在电子白板上进行写字、画图、编辑，同时支持电子白板内容的保存，后续存储至该会诊记录的内容中，支持随时查看和调取。
6.根据权利要求1所述的采用ar眼镜进行远程诊疗的系统，其特征在于，所述知识库模块中，在远程会诊系统中构建了知识库模块，里面细分...
【专利技术属性】
技术研发人员：王昀路，
申请(专利权)人：浙江生一光学感知科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。