机械臂控制方法、装置、系统和存储介质制造方法及图纸

本申请涉及一种机械臂控制方法、装置、系统、存储介质和计算机程序产品。所述方法包括：采集目标对象注视显示设备的实时眼部视频；根据实时眼部视频，通过眼动跟踪，确定目标对象在显示设备中的实时注视点位置；根据实时注视点位置，确定机械臂调整模式；在机械臂调整模式为内窥镜调整模式的情况下，则根据实时注视点位置，控制内窥镜机械臂运动，直到内窥镜角度达到预设角度，并更新机械臂调整模式为工具调整模式；在机械臂调整模式为工具调整模式的情况下，则获取内窥镜的当前采集图像；根据实时注视点位置，在当前采集图像中确定目标区域；根据目标区域，控制工具机械臂运动。采用本方法能够提高机械臂控制效率。方法能够提高机械臂控制效率。方法能够提高机械臂控制效率。

【技术实现步骤摘要】
机械臂控制方法、装置、系统和存储介质


[0001]本申请涉及机器人控制
，特别是涉及一种机械臂控制方法、装置、系统、存储介质和计算机程序产品。

技术介绍

[0002]现有的机械臂控制方法往往是手动给出目标区域，再控制机械臂运动到目标区域中。然而，这种机械臂控制方法，在需要根据实际情况实时更新目标区域的场景中，存在机械臂控制效率低的问题。

技术实现思路

[0003]基于此，有必要针对现有的机械臂控制方法存在机械臂控制效率低的问题，提供一种能够提高机械臂控制效率的机械臂控制方法、装置、系统、计算机可读存储介质和计算机程序产品。
[0004]第一方面，本申请提供了一种机械臂控制方法。所述方法包括：
[0005]采集目标对象注视显示设备的实时眼部视频，显示设备用于显示内窥镜对待测区域的实时采集图像；
[0006]根据实时眼部视频，通过眼动跟踪，确定目标对象在显示设备中的实时注视点位置；
[0007]根据实时注视点位置，确定机械臂调整模式；
[0008]在机械臂调整模式为内窥镜调整模式的情况下本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种机械臂控制方法，其特征在于，所述方法包括：采集目标对象注视显示设备的实时眼部视频，所述显示设备用于显示内窥镜对待测区域的实时采集图像；根据所述实时眼部视频，通过眼动跟踪，确定所述目标对象在显示设备中的实时注视点位置；根据所述实时注视点位置，确定机械臂调整模式；在所述机械臂调整模式为内窥镜调整模式的情况下，则根据所述实时注视点位置，控制内窥镜机械臂运动，直到内窥镜角度达到预设角度，并更新所述机械臂调整模式为工具调整模式；在所述机械臂调整模式为所述工具调整模式的情况下，则获取内窥镜的当前采集图像；根据所述实时注视点位置，在所述当前采集图像中确定目标区域；根据所述目标区域，控制工具机械臂运动。2.根据权利要求1所述的方法，其特征在于，所述根据所述实时注视点位置，控制内窥镜机械臂运动，包括：判断所述实时注视点位置是否位于所述显示设备的内窥镜调整区域内；在所述实时注视点位置位于所述内窥镜调整区域内的情况下，根据所述内窥镜调整区域在所述显示设备中的位置，确定转动角度；基于所述转动角度，控制内窥镜机械臂运动。3.根据权利要求1所述的方法，其特征在于，所述根据所述实时注视点位置，在所述当前采集图像中确定目标区域，包括：获取所述实时注视点位置的被关注时长和被关注次数；根据所述被关注时长和所述被关注次数，确定以所述实时注视点位置为中心的实时区域；在预设时长内，任意两个时刻的实时注视点位置之间的距离在预设区域内时，将所述当前采集图像中，所述实时注视点位置对应的实时区域确定为目标区域。4.根据权利要求1所述的方法，其特征在于，所述根据所述目标区域，控制工具机械臂运动，包括：根据所述目标区域在所述当前采集图像中的位置，通过显示坐标系和机器人坐标系的转换关系，得到机器人坐标系下工具机械臂的器械末端位置；根据所述器械末端位置，通过逆运动学，确定所述工具机械臂的各个关节扭动量；控制所述工具机械臂按照各个关节扭动量进行运动。5.根据权利要求1至4任一项所述的方法，其特征在于，所述根据所述实时眼部视频，通过眼动跟踪，确定所述目标对象在显示设备中的实时注视点位置，包括：根据所述实时眼部视频，通过瞳孔识别，得到瞳孔位置和普尔钦斑位置；根据...

【专利技术属性】
技术研发人员：请求不公布姓名，
申请(专利权)人：上海微创医疗机器人集团股份有限公司，
类型：发明
国别省市：