一种基于超声图像引导的机器人诊断系统的智能扫查方法技术方案

本发明专利技术提出一种基于超声图像引导的机器人诊断系统的智能扫查方法，所述方法通过夹持装置将超声探头安装到六自由度机器臂末端，通过双目摄像头确定人体与六自由度机械臂末端超声探头的相对位姿，然后，六自由度机械臂带动超声探头到达人体的初始相对零位置，随后，超声诊断仪接收超声探头输入的扫描信号成像，并发送至智能识别装置，最后，智能识别装置进行超声图像的分类与分割来确定器官及其位置，根据器官成像面积的大小控制六自由度机器臂的运动，实现对人体各个器官的智能扫查。

An intelligent scanning method of robot diagnosis system based on ultrasonic image guidance

The invention proposes an intelligent scanning method of robot diagnosis system based on ultrasonic image guidance. The method installs the ultrasonic probe to the end of the six freedom robot arm through the clamping device, determines the relative pose of the human body and the ultrasonic probe at the end of the six freedom robot arm through the binocular camera, and then the six freedom robot arm drives the ultrasonic probe to the initial relative zero of the human body Position, then, the ultrasonic diagnostic instrument receives the scanning signal input from the ultrasonic probe for imaging, and sends it to the intelligent recognition device. Finally, the intelligent recognition device classifies and segments the ultrasonic image to determine the organ and its position, controls the movement of the six degree of freedom robot arm according to the size of the organ imaging area, and realizes the intelligent scanning of all organs of the human body.

【技术实现步骤摘要】
一种基于超声图像引导的机器人诊断系统的智能扫查方法
本专利技术属于超声扫查
，特别是涉及一种基于超声图像引导的机器人诊断系统的智能扫查方法。
技术介绍
超声诊断仪在临床医学中有着广泛应用，能够从头到脚对身体各个部位进行超声影像检查与诊断应用。相比于CT、核磁等大型设备，超声检查无辐射，可动态成像，特别在门诊疾病初筛和体检中有着广泛应用。一方面，超声影像科医生数量有限，在众多三甲级医院、大型体检中心等机构都出现候诊时间长，排长队的问题；另一方面，由于超声影像读片存在的技术难点，没有多年的从业经验无法满足完成扫查及诊断的要求，社区医院、家庭等方便就诊的机构存在不易推广的现象。随着技术的发展，特别是计算机视觉、人工智能、机器人技术的发展，通过机器人可以辅助医生实现对人体各个器官的自动扫查，降低医生的工作强度，提高医生工作效率以及超声图像质量。基于此，本专利技术提出一种基于超声图像引导的机器人诊断系统的智能扫查方法。
技术实现思路
本专利技术目的是为了实现通过机器人对人体进行智能超声扫查的目标，提出了一种基于超声图像引导的机器人诊断系统的智能扫查方法，提高超声扫查速度和图像采集质量，得到人体器官的超声图像。本专利技术是通过以下技术方案实现的，本专利技术提出一种基于超声图像引导的机器人诊断系统的智能扫查方法，控制器控制所述诊断系统的实际操作，所述方法包括以下步骤：步骤一：通过夹持装置1将超声探头2安装到六自由度机械臂3末端，通过双目摄像头4确定人体5与六自由度机械臂3末端超声探头2的相对位姿；步骤二：六自由度机械臂3带动超声探头2对人体5进行相对零位置的初始对准，超声诊断仪6接收超声探头2输入的扫描信号成像，并发送至智能识别装置7；步骤三：智能识别装置7进行超声图像的分类与分割来确定器官及其位置，根据器官成像面积的大小控制六自由度机械臂3的运动，保存期望扫查器官的成像面积最大时该器官的超声标准面图像；步骤四：将智能扫查得到的超声标准面图像发送给医生或其它智能医学诊断装置进行后续的疾病诊断。进一步地，所述步骤一具体为：步骤一一、将超声探头2安装到六自由度机械臂3末端的夹持装置1上：超声探头2的夹持装置1分为两部分，即固定部分和活动部分，所述固定部分通过四个螺栓与六自由度机械臂3末端的工具输出法兰刚性连接，所述活动部分与一套筒连接，用于夹住超声探头2；所述夹持装置1采用活动设计，固定部分和活动部分之间的夹角以15°的步长变化；步骤一二、通过双目摄像头4确定人体5与六自由度机械臂3末端超声探头2的相对位姿：建立双目摄像头4与六自由度机械臂3末端超声探头2的相对坐标关系，再建立双目摄像头4与人体5的相对坐标关系，最终得到人体5与六自由度机械臂3末端超声探头2的相对位姿。进一步地，所述步骤二具体为：步骤二一、获取人体5三维数据：通过双目摄像头4进行场景的三维模型重建，获得人体5的点云图，利用八叉树对重建的三维模型进行精简，对数据进行压缩，并去除异常点，获得人体5点云轮廓线；步骤二二、六自由度机械臂3动态优化路径：设定肚脐位置为相对零位置进行初始对准，根据六自由度机械臂3末端超声探头2相对于人体5肚脐位置的坐标，按照最短路径原则进行路径规划，六自由度机械臂3带动超声探头2到达肚脐位置，并对超声探头2按人体5方向施加按压控制力；步骤二三、生成超声图像并发送至智能识别装置7：超声诊断仪6开始工作接收超声探头2输入的人体5扫描信号进行超声成像，通过VGA视频采集卡将超声诊断仪6中的超声图像发送至智能识别装置7。进一步地，所述步骤三具体为：步骤三一、超声图像的分类与分割：六自由度机械臂3按照先验知识规划期望扫查器官的路径，智能识别装置7通过人工智能算法对扫查得到的超声图像进行器官分类，找到期望扫查的器官的超声标准面，通过对超声标准面图像中的期望扫查器官进行图像分割，计算器官成像面积；步骤三二、基于超声图像反馈控制六自由度机械臂3运动，进行局部运动调整：控制六自由度机械臂3按照使得期望扫查器官的超声标准面面积变大的指标进行相关位姿的运动，保存期望扫查器官的成像面积最大时该器官的超声标准面图像，实现了期望器官的智能扫查。进一步地，所述步骤二二中，对超声探头2按人体5方向施加30N的按压控制力。本专利技术的有益效果：本专利技术通过实时采集超声诊断仪的超声成像信息进行六自由度机械臂的运动控制，通过智能识别装置对采集的超声图像进行分类与分割，实时确定器官的种类及其位置，能够得到期望扫查器官的最大成像面积，能够快速、准确的对人体各个器官区域进行智能超声扫查。本专利技术基于超声图像反馈控制六自由度机械臂进行智能扫查，简化了人工扫查过程，此外，本方法利用超声进行扫查，适用范围广，使用方式简便。附图说明图1为本专利技术所述方法流程图；图2为本专利技术所述机器人诊断系统结构图；图3为超声探头夹持装置示意图。具体实施方式下面将结合本专利技术实施例中的附图对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。结合图1-图3，本专利技术通过夹持装置1将超声探头2安装到六自由度机械臂3的末端，通过双目摄像头4确定人体5与六自由度机械臂3末端超声探头2的相对位姿，然后，对超声探头2到人体5的路径进行规划，通过六自由度机械臂3带动超声探头2到达人体5的相对零位置并施加按压控制力，超声诊断仪6接收超声探头2输入的扫描信号成像，并发送至智能识别装置7，最后，智能识别装置7进行超声图像的分类与分割来确定器官及其位置，根据器官成像面积的大小控制六自由度机械臂3的运动，实现对人体5各个器官区域的智能扫查成像。本专利技术提出一种基于超声图像引导的机器人诊断系统的智能扫查方法，控制器是整个系统的控制中心，用于控制所述诊断系统的实际操作，所述方法包括以下步骤：步骤一：通过夹持装置1将超声探头2安装到六自由度机械臂3末端，通过双目摄像头4确定人体5与六自由度机械臂3末端超声探头2的相对位姿；所述步骤一具体为：步骤一一、将超声探头2安装到六自由度机械臂3末端的夹持装置1上：超声探头2的夹持装置1分为两部分，即固定部分和活动部分，所述固定部分通过四个螺栓与六自由度机械臂3末端的工具输出法兰刚性连接，所述活动部分与一套筒连接，用于夹住超声探头2；所述夹持装置1采用活动设计，固定部分和活动部分之间的夹角以15°的步长变化，在保证连接刚度的前提下，提高了灵活性。通过测量和设计，在活动部分与固定部分垂直时，探头的纵轴恰与工具输出法兰纵轴重合，坐标原点相距158mm。步骤一二、通过双目摄像头4确定人体5与六自由度机械臂3末端超声探头2的相对位姿：建立双目摄像头4与六自由度机械臂3末端超声探头2的相对坐标关系，再建立双目摄像头4与人体5的本文档来自技高网...

【技术保护点】
1.一种基于超声图像引导的机器人诊断系统的智能扫查方法，控制器控制所述诊断系统的实际操作，其特征在于：所述方法包括以下步骤：/n步骤一：通过夹持装置(1)将超声探头(2)安装到六自由度机械臂(3)末端，通过双目摄像头(4)确定人体(5)与六自由度机械臂(3)末端超声探头(2)的相对位姿；/n步骤二：六自由度机械臂(3)带动超声探头(2)对人体(5)进行相对零位置的初始对准，超声诊断仪(6)接收超声探头(2)输入的扫描信号成像，并发送至智能识别装置(7)；/n步骤三：智能识别装置(7)进行超声图像的分类与分割来确定器官及其位置，根据器官成像面积的大小控制六自由度机械臂(3)的运动，保存期望扫查器官的成像面积最大时该器官的超声标准面图像；/n步骤四：将智能扫查得到的超声标准面图像发送给医生或其它智能医学诊断装置进行后续的疾病诊断。/n

【技术特征摘要】
1.一种基于超声图像引导的机器人诊断系统的智能扫查方法，控制器控制所述诊断系统的实际操作，其特征在于：所述方法包括以下步骤：
步骤一：通过夹持装置(1)将超声探头(2)安装到六自由度机械臂(3)末端，通过双目摄像头(4)确定人体(5)与六自由度机械臂(3)末端超声探头(2)的相对位姿；
步骤二：六自由度机械臂(3)带动超声探头(2)对人体(5)进行相对零位置的初始对准，超声诊断仪(6)接收超声探头(2)输入的扫描信号成像，并发送至智能识别装置(7)；
步骤三：智能识别装置(7)进行超声图像的分类与分割来确定器官及其位置，根据器官成像面积的大小控制六自由度机械臂(3)的运动，保存期望扫查器官的成像面积最大时该器官的超声标准面图像；
步骤四：将智能扫查得到的超声标准面图像发送给医生或其它智能医学诊断装置进行后续的疾病诊断。


2.根据权利要求1所述的方法，其特征在于：所述步骤一具体为：
步骤一一、将超声探头(2)安装到六自由度机械臂(3)末端的夹持装置(1)上：超声探头(2)的夹持装置(1)分为两部分，即固定部分和活动部分，所述固定部分通过四个螺栓与六自由度机械臂(3)末端的工具输出法兰刚性连接，所述活动部分与一套筒连接，用于夹住超声探头(2)；所述夹持装置(1)采用活动设计，固定部分和活动部分之间的夹角以15°的步长变化；
步骤一二、通过双目摄像头(4)确定人体(5)与六自由度机械臂(3)末端超声探头(2)的相对位姿：建立双目摄像头(4)与六自由度机械臂(3)末端超声探头(2)的相对坐标关系，再建立双目摄像头(4)与人体(5)的相对坐标关系，最终得到人体(5)与六自由度机械臂(3)末端超声探头(2)的相对位姿。


...

【专利技术属性】
技术研发人员：金晶，姜宇，李丹丹，赵悦，沈毅，
申请(专利权)人：哈尔滨工业大学，
类型：发明
国别省市：黑龙;23