信息处理装置、信息处理方法和信息处理程序制造方法及图纸

一种信息处理装置(100)，设置有：估计单元(132)，该估计单元(132)基于图像信息来估计关于手指的姿势的时间序列信息，该图像信息包括对象和相对于对象的手指移动，该移动包括相对于对象的手指接触移动。估计单元(132)通过使用第一机器学习模型来估计关于手指的姿势的时间序列信息，该第一机器学习模型是通过学习而获得的以基于包括对象和手指移动的图像信息来估计关于手指的姿势的时间序列信息。息来估计关于手指的姿势的时间序列信息。息来估计关于手指的姿势的时间序列信息。

【技术实现步骤摘要】
【国外来华专利技术】信息处理装置、信息处理方法和信息处理程序


[0001]本专利技术涉及信息处理装置、信息处理方法和信息处理程序。

技术介绍

[0002]传统上，为了向其他人(学生等)传输乐器表演者、传统工艺工人、厨师等的手指的优秀精细操作并支持其他人的熟练度，已知一种记录并再现手指的操作的技术。例如，提出了一种技术，其中，根据在多个投影方向上投影的手指的图像，指定表示在多个投影方向上存在关于手指的关注点的概率的概率图，并且根据多个指定的概率图，估计关于手指的关注点的三维位置。
[0003]现有技术文献
[0004]专利文献
[0005]专利文献1：WO 2018/083910 A

技术实现思路

[0006]本专利技术要解决的技术问题
[0007]然而，在上述传统技术中，并不总是能够适当地估计手指的姿势。例如，在上述现有技术中，仅估计手指的关注点的三维位置，不必适当地估计手指的姿势。
[0008]因此，本公开提出了一种能够适当地估计手指的姿势的信息处理装置、信息处理方法以及信息处理程序。<br/>[0009]本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种信息处理装置，包括：估计单元，基于图像信息估计关于手指的姿势的时间序列信息，所述图像信息包括：对象和所述手指相对于所述对象的操作，所述手指相对于所述对象的操作包括所述手指相对于所述对象的接触操作。2.根据权利要求1所述的信息处理装置，其中，所述估计单元通过使用第一机器学习模型来估计关于所述手指的所述姿势的所述时间序列信息，所述第一机器学习模型进行学习，以基于包括所述手指的所述操作和所述对象的所述图像信息来估计关于所述手指的所述姿势的所述时间序列信息。3.根据权利要求1所述的信息处理装置，其中，所述估计单元估计所述手指的每个关节或每个指尖、手掌、手背或手腕的特征点的位置、速度、加速度或轨迹、或者所述手指的每个关节的角度、角速度或角加速度的时间序列信息，作为关于所述手指的所述姿势的所述时间序列信息。4.根据权利要求1所述的信息处理装置，其中，所述图像信息是由高速单色相机或高速红外相机拍摄的图像信息。5.根据权利要求1所述的信息处理装置，其中，所述图像信息是通过被安装以从多个不同方向拍摄所述对象的多个相机获取的多条图像信息。6.根据权利要求5所述的信息处理装置，其中，多个所述相机附接至围绕所述对象的门状结构；并且多条所述图像信息中的每条是在通过安装在每个所述相机附近的光源照亮所述手指的状态下拍摄的多条图像信息。7.根据权利要求1所述的信息处理装置，其中，所述图像信息是由安装在所述对象的两侧以及所述对象上方的三个或更多个相机拍摄的多条图像信息。8.根据权利要求1所述的信息处理装置，其中，所述图像信息是以从所述手指的指尖到手腕的范围作为拍摄范围拍摄的图像信息。9.根据权利要求1所述的信息处理装置，其中，所述估计单元基于执行所述手指的所述操作的手的背部的图像信息来估计关于所述手指的所述姿势的所述时间序列信息。10.根据权利要求9所述的信息处理装置，其中，所述估计单元通过使用第二机器学习模型来估计关于所述手指的所述姿势的所述时间序列信息，所述第二机器学习模型进行学习，以基于执行所述手指的所述操作的所述手的所述背部的所述图像信息来估计关于所述手指的所述姿势的所述时间序列信息。11.根据权利要求1所述的信息处理装置，其中，所述估计单元基于由安装在用户的手的拇指和背部上的多个IMU传感器检测的感测数据来估计关于用户的所述手指的所述...

【专利技术属性】
技术研发人员：西冈勇人，奥贵纪，古屋晋一，
申请(专利权)人：索尼集团公司，
类型：发明
国别省市：