[发明专利]一种PICC现实增强系统、现实增强方法及移动终端

权利要求书

1.一种PICC现实增强系统，其特征在于：

至少包括AR虚拟交互模块；

所述AR虚拟交互模块，被配置为：

根据操作手臂的特征点标记结果，进行手动位置和图像画面的同步，结合预置的血管超声影像，进行AR虚拟交互显示；

所述AR虚拟交互模块，还被配置为：

根据预置的血管超声影像与压感数据的对应关系，进行不同压感数据下超声图像的显示；

所述AR虚拟交互模块，还被配置为：

将仿真探头移动与屏幕表面像素关联，在选择定点的情况下，在移动终端显示屏上移动得到的数据经过映射关系，将数据返回至手臂；

通过数据返回像素位置与血管超声视频实现帧的关联，对操作过程中涉及到的所有数据进行调整；

所述AR虚拟交互模块，还被配置为：

根据预置的手臂血管分离图像数据，在预设操作下，进行动静脉分布的显示；

还包括操作流程展示模块；

所述操作流程展示模块，被配置为：按步骤进行PICC置管流程的音视频展示，且首次注册用户第一次观看时全部步骤或者部分步骤只支持按顺序展示，第二次观看时支持步骤选择；

步骤选择时，可对流程简介和流程概览进行操作切换，流程简介对当前操作步骤要点进行介绍，流程概览显示置管部分全部流程，每一步骤均包括概览图、时长、播放量和视频内容；

场景设计采用强空间化结构，将场景内的非人物要素压缩为统一背景，保留人物平面设计要素，使用灰域标定位置；

动作设计使用降速演示，在对标准操作流程进行特征抽取后，标记操作中的重点位置，对操作手法的轨迹进行展示，实现源内容重定向；

还包括器材模型展示模块；

所述器材模型展示模块，被配置为：对预存储的医疗模型进行展示，初次进入时出现新手教学模块，通过点选相应列表项切换至不同的医疗模型，能够用于在场景内对模型的观察，能够实现用户与模型的交互，包括但不限于缩放、移动、旋转和动画播放；

初次进入时，显示新手引导教学内容，使用语音提示引导后续操作，功能按钮位于界面底部，由透视、涂抹两部分组成，界面左上角设有返回按钮，可以返回主菜单，场景内部预置光照，启用系统内置相机显示主画面，识别目标图时，使用特征匹配进行后续显示；

识别成功后出现预置置管侧手臂及操作中垫于肢体下方的治疗巾，并提示进行耦合剂涂抹操作；页面底部的功能按钮透视可以对当前操作手臂进行血管分离，显示主要动静脉的分布情况；

点击涂抹按钮可实现肢体评估部位涂抹耦合剂的动作，涂抹目标位置结束后，需要根据语音提示点击手臂标记部位，出现超声探头及操作手势部分，画面上方出现血管超声评估画面；

拖动探头可实现超声影像移动，通过对操作手臂的特征点进行标记，匹配手动位置及图像画面的同步，找到合适血管标记位置完成AR交互操作，AR虚拟交互界面中的血管超声影像为原设备器械画面，已经过压制处理；

通过分析由专业护士拍摄的实际操作视频，提炼肢体血管评估的关键点位；测试超声探头在涂抹耦合剂的情况下与皮肤表面发生的压感数据，制作不同位置的探头位置变化及对应手势变化，调整、记录不同压感数据下超声图像的显示情况，以保证影像数据的对应关系。

2.一种PICC现实增强方法，其特征在于：利用权利要求1所述的PICC现实增强系统；

包括以下三个步骤，且各个步骤的顺序可调换：

步骤(1)：按步骤进行PICC置管流程的音视频展示，且首次注册用户第一次观看时全部步骤或者部分步骤只支持按顺序展示，第二次观看时支持步骤选择；

步骤(2)根据操作手臂的特征点标记结果，进行手动位置和图像画面的同步，结合预置的血管超声影像，进行AR虚拟交互显示；

仿真探头移动与屏幕表面像素关联，在选择定点的情况下，在移动终端显示屏上移动得到的数据经过映射关系，将数据返回至手臂；

通过数据返回像素位置与血管超声视频实现帧的关联，对操作过程中涉及到的所有数据进行调整；

步骤(3)对预存储的医疗模型进行展示，初次进入时出现新手教学模块，通过点选相应列表项切换至不同的医疗模型，能够用于在场景内对模型的观察，能够实现用户与模型的交互，包括但不限于缩放、移动、旋转和动画播放。

3.一种移动终端，其特征在于：

包括：权利要求1所述的PICC现实增强系统；

或者，利用权利要求2所述的PICC现实增强方法。