一种处方显示方法以及系统技术方案

本发明专利技术涉及医疗信息展示技术领域，公开了一种处方显示方法以及系统。通过本发明专利技术创造，提供了一种适用于小儿推拿处方的处方显示方案，即先通过基于视觉的人体动作识别技术，自动识别在小儿推拿疗程中的各个小儿推拿手法，再通过基于手法识别结果对小儿推拿处方中正在施行的小儿推拿手法、已施行过的小儿推拿手法和未施行过的小儿推拿手法进行不同详细程度及不同展示效果的区别显示，可以帮助父母或新手在小儿推拿疗程中逐渐掌握推拿要领及实时推拿进度，使得在家根据小儿推拿处方对小孩进行小儿推拿成为可能，并可实现对小儿推拿疗程进行有效监督的目的，便于实际应用和推广。便于实际应用和推广。便于实际应用和推广。

【技术实现步骤摘要】
一种处方显示方法以及系统


[0001]本专利技术属于医疗信息展示
，具体地涉及一种处方显示方法以及系统。

技术介绍

[0002]小儿推拿是建立在中医学整体观念的基础上，以阴阳五行和脏腑经络等学说为理论指导，运用各种手法刺激穴位，使经络通畅及气血流通，以达到调整脏腑功能及治病保健目的的一种方法。小儿推拿的治疗法则与内治法基本一样，谨守病机，以期治病求本，调整阴阳，扶正祛邪。在中医基础理论的指导下，广泛应用于小儿泄泻、呕吐、食积、厌食、便秘、腹痛、脱肛、感冒、咳嗽、哮喘、发热、遗尿、夜啼、肌性斜颈、落枕和惊风等疾病，有较好的效果。
[0003]目前，针对某种小儿症状而开出的小儿推拿处方一般包含有多个小儿推拿手法，例如针对感冒咳嗽(两岁小儿，两岁以上酌加，以下酌减)，对应的小儿推拿处方包含有依次推拿的清肺金(即一种现有的小儿推拿手法，对应的手法描述信息为：位置为无名指末节螺纹面；定位为掌侧，无名指指根至指端处；通常以末节指纹推向指尖方向为清，也称清肺经)300次、补脾土(即另一种现有的小儿推拿手法)300次、补肾水(即另一种现有的小儿推拿手法)300次、揉外劳宫(即另一种现有的小儿推拿手法)100次、推三关(即另一种现有的小儿推拿手法)300次、分推肩胛骨(即另一种现有的小儿推拿手法)50～100次和揉肺俞(即另一种现有的小儿推拿手法)100次等。但是这些手法对于非从业人员而言，是比较陌生的，使得父母或新手难以掌握推拿要领及推拿进度，只能委托经过专门培训的小儿推拿师对孩子进行推拿，不但成本较高，耗费时间，也无法对小儿推拿疗程起到有效的监督作用，不利于小儿推拿技术的推广和应用。

技术实现思路

[0004]为了解决父母或新手难以掌握小儿推拿要领及推拿进度和无法对小儿推拿疗程进行有效监督的问题，本专利技术目的在于提供一种适用于小儿推拿处方的处方显示方法以及系统，可以先通过基于视觉的人体动作识别技术，自动识别在小儿推拿疗程中的各个小儿推拿手法，再通过基于手法识别结果对小儿推拿处方中正在施行的小儿推拿手法、已施行过的小儿推拿手法和未施行过的小儿推拿手法进行不同详细程度及不同展示效果的区别显示，进而帮助父母或新手在小儿推拿疗程中逐渐掌握推拿要领及实时推拿进度，使得在家根据小儿推拿处方对小孩进行小儿推拿成为可能，并可实现对小儿推拿疗程进行有效监督的目的，利于小儿推拿技术的推广和应用。
[0005]第一方面，本专利技术提供了一种处方显示方法，包括：
[0006]获取由摄像头实时采集的小儿推拿视频，其中，所述摄像头的镜头视野固定涵盖小儿推拿现场；
[0007]采用基于视觉的人体动作识别算法，对所述小儿推拿视频中的多帧连续视频图像进行推拿手法识别处理，得到推拿手法识别结果；
[0008]根据所述推拿手法识别结果，确定出正在施行的小儿推拿手法和已施行过的小儿推拿手法；
[0009]在显示包含有多个小儿推拿手法的小儿推拿处方时，控制显示屏以第一展示效果实时显示在所述多个小儿推拿手法中正在施行的小儿推拿手法的详细信息，以及控制所述显示屏以第二展示效果实时显示在所述多个小儿推拿手法中已施行过的小儿推拿手法的简略信息，以及控制所述显示屏以第三展示效果实时显示在所述多个小儿推拿手法中未施行过的小儿推拿手法的简略信息，其中，所述第一展示效果、所述第二展示效果和所述第三展示效果为预设的三个不同展示效果。
[0010]基于上述
技术实现思路
，提供了一种适用于小儿推拿处方的处方显示方案，即先通过基于视觉的人体动作识别技术，自动识别在小儿推拿疗程中的各个小儿推拿手法，再通过基于手法识别结果对小儿推拿处方中正在施行的小儿推拿手法、已施行过的小儿推拿手法和未施行过的小儿推拿手法进行不同详细程度及不同展示效果的区别显示，可以帮助父母或新手在小儿推拿疗程中逐渐掌握推拿要领及实时推拿进度，使得在家根据小儿推拿处方对小孩进行小儿推拿成为可能，并可实现对小儿推拿疗程进行有效监督的目的，便于实际应用和推广。
[0011]在一个可能的设计中，采用基于视觉的人体动作识别算法，对所述小儿推拿视频中的多帧连续视频图像进行推拿手法识别处理，得到推拿手法识别结果，包括：
[0012]通过窗口滑动方式从所述小儿推拿视频中提取出一组多帧连续视频图像；
[0013]针对所述多帧连续视频图像中的各帧视频图像，进行人体关节点提取处理，得到对应的人体关节点数据，其中，所述人体关节点数据中包含有多个人体关节点在对应视频图像采集时的空间特征信息，所述多个人体关节点属于同一人体且能够表征人体做出推拿动作；
[0014]针对小儿推拿处方中的各个小儿推拿手法，将所述多帧连续视频图像及人体关节点数据送入对应的且基于快慢双通道网络的推拿手法识别模型，输出得到是否存在对应推拿动作的二分类识别结果，其中，所述快慢双通道网络包括有快速通道子网络、慢速通道子网络和综合处理输出层，所述快速通道子网络用于采用第一抽帧方式从所述多帧连续视频图像中抽取出多个第一图像，然后对所述多个第一图像进行3D卷积处理，所述慢速通道子网络用于采用第二抽帧方式从所述多帧连续视频图像中抽取出至少一个第二图像，然后对所述至少一个第二图像进行2D卷积处理，并综合来自所述快速通道子网络的3D卷积处理结果进行3D卷积处理，所述综合处理输出层用于根据所述快速通道子网络和所述慢速通道子网络的3D卷积处理结果，采用softmax函数得到是否存在对应推拿动作的二分类识别结果，所述第一图像为在视频图像上未加载对应的人体关节点数据的原图像，所述第二图像为在视频图像上加载有对应的人体关节点数据的新图像，所述第二抽帧方式的抽帧个数少于所述第一抽帧方式的抽帧个数，所述二分类识别结果包含有指示存在对应推拿动作的置信度；
[0015]根据所述各个小儿推拿手法的二分类识别结果，将与最大置信度对应的小儿推拿手法作为与所述多帧连续视频图像对应的推拿手法识别结果。
[0016]在一个可能的设计中，当所述摄像头的数目有多个且以不同视角使对应的镜头视野固定涵盖所述小儿推拿现场时，采用基于视觉的人体动作识别算法，对所述小儿推拿视
频中的多帧连续视频图像进行推拿手法识别处理，得到推拿手法识别结果，包括：
[0017]针对各个摄像头，通过窗口滑动方式从对应的小儿推拿视频中提取出一组在同一时段采集的多帧连续视频图像；
[0018]采用基于视觉的人体动作识别算法，分别对所述各个摄像头的多帧连续视频图像进行推拿手法识别处理，得到与所述各个摄像头一一对应的推拿手法识别结果，其中，所述推拿手法识别结果包含有指示存在某个小儿推拿手法的置信度；
[0019]根据所有摄像头的推拿手法识别结果，将与最大置信度对应的小儿推拿手法作为与所述同一时段对应的推拿手法识别结果。
[0020]在一个可能的设计中，采用基于视觉的人体动作识别算法，对所述小儿推拿视频中的多帧连续视频图像进行推拿手法识别处理，得到推拿手法识别结果，包括：
[0021]通过窗口滑动方式从所述小儿推拿视频中提取出一组多帧连续视频图像本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种处方显示方法，其特征在于，包括：获取由摄像头实时采集的小儿推拿视频，其中，所述摄像头的镜头视野固定涵盖小儿推拿现场；采用基于视觉的人体动作识别算法，对所述小儿推拿视频中的多帧连续视频图像进行推拿手法识别处理，得到推拿手法识别结果；根据所述推拿手法识别结果，确定出正在施行的小儿推拿手法和已施行过的小儿推拿手法；在显示包含有多个小儿推拿手法的小儿推拿处方时，控制显示屏以第一展示效果实时显示在所述多个小儿推拿手法中正在施行的小儿推拿手法的详细信息，以及控制所述显示屏以第二展示效果实时显示在所述多个小儿推拿手法中已施行过的小儿推拿手法的简略信息，以及控制所述显示屏以第三展示效果实时显示在所述多个小儿推拿手法中未施行过的小儿推拿手法的简略信息，其中，所述第一展示效果、所述第二展示效果和所述第三展示效果为预设的三个不同展示效果。2.如权利要求1所述的处方显示方法，其特征在于，采用基于视觉的人体动作识别算法，对所述小儿推拿视频中的多帧连续视频图像进行推拿手法识别处理，得到推拿手法识别结果，包括：通过窗口滑动方式从所述小儿推拿视频中提取出一组多帧连续视频图像；针对所述多帧连续视频图像中的各帧视频图像，进行人体关节点提取处理，得到对应的人体关节点数据，其中，所述人体关节点数据中包含有多个人体关节点在对应视频图像采集时的空间特征信息，所述多个人体关节点属于同一人体且能够表征人体做出推拿动作；针对小儿推拿处方中的各个小儿推拿手法，将所述多帧连续视频图像及人体关节点数据送入对应的且基于快慢双通道网络的推拿手法识别模型，输出得到是否存在对应推拿动作的二分类识别结果，其中，所述快慢双通道网络包括有快速通道子网络、慢速通道子网络和综合处理输出层，所述快速通道子网络用于采用第一抽帧方式从所述多帧连续视频图像中抽取出多个第一图像，然后对所述多个第一图像进行3D卷积处理，所述慢速通道子网络用于采用第二抽帧方式从所述多帧连续视频图像中抽取出至少一个第二图像，然后对所述至少一个第二图像进行2D卷积处理，并综合来自所述快速通道子网络的3D卷积处理结果进行3D卷积处理，所述综合处理输出层用于根据所述快速通道子网络和所述慢速通道子网络的3D卷积处理结果，采用softmax函数得到是否存在对应推拿动作的二分类识别结果，所述第一图像为在视频图像上未加载对应的人体关节点数据的原图像，所述第二图像为在视频图像上加载有对应的人体关节点数据的新图像，所述第二抽帧方式的抽帧个数少于所述第一抽帧方式的抽帧个数，所述二分类识别结果包含有指示存在对应推拿动作的置信度；根据所述各个小儿推拿手法的二分类识别结果，将与最大置信度对应的小儿推拿手法作为与所述多帧连续视频图像对应的推拿手法识别结果。3.如权利要求1所述的处方显示方法，其特征在于，当所述摄像头的数目有多个且以不同视角使对应的镜头视野固定涵盖所述小儿推拿现场时，采用基于视觉的人体动作识别算法，对所述小儿推拿视频中的多帧连续视频图像进行推拿手法识别处理，得到推拿手法识别结果，包括：
针对各个摄像头，通过窗口滑动方式从对应的小儿推拿视频中提取出一组在同一时段采集的多帧连续视频图像；采用基于视觉的人体动作识别算法，分别对所述各个摄像头的多帧连续视频图像进行推拿手法识别处理，得到与所述各个摄像头一一对应的推拿手法识别结果，其中，所述推拿手法识别结果包含有指示存在某个小儿推拿手法的置信度；根据所有摄像头的推拿手法识别结果，将与最大置信度对应的小儿推拿手法作为与所述同一时段对应的推拿手法识别结果。4.如权利要求1所述的处方显示方法，其特征在于，采用基于视觉的人体动作识别算法，对所述小儿推拿视频中的多帧连续视频图像进行推拿手法识别处理，得到推拿手法识别结果，包括：通过窗口滑动方式从所述小儿推拿视频中提取出一组多帧连续视频图像；采用基于视觉的人体动作识别算法，对所述多帧连续视频图像进行推拿手法识别处理，得到推拿手法识别结果；根据所述推拿手法识别结果，确定出正在施行的小儿推拿手法和已施行过的小儿推拿手法，包括：在根据所述推拿手法识别结果判定...

【专利技术属性】
技术研发人员：何杨，
申请(专利权)人：上海良方健康科技有限公司，
类型：发明
国别省市：