可穿戴装置和从先前会话检索并显示关键词的方法及介质制造方法及图纸

本公开提供可穿戴装置和方法及介质。可穿戴装置可以包括：可穿戴图像传感器；处理器，被编程为：从可穿戴图像传感器接收可穿戴装置的用户在时间窗口期间的第一交互中与之交互的个体的面部图像；接收在时间窗口的至少一部分期间在图像传感器附近捕获的声音数据；处理声音数据以识别至少一个关键词；将关键词和面部图像之间的关联储存在存储器中；从可穿戴图像传感器接收该个体在不同于时间窗口期间的时间的第二交互期间的另一个面部图像；使用图像处理来确定第一交互中的个体是第二交互中的个体；访问存储器以从第一交互定位至少一个关键词；在第二交互期间，使得在对用户可见的显示器上显示至少一个关键词，从而向用户提醒第一交互的主题。

Wearable devices and methods and media for retrieving and displaying keywords from previous sessions

【技术实现步骤摘要】
可穿戴装置和从先前会话检索并显示关键词的方法及介质本申请是申请日为2018年4月23日、申请号为201880003444.7(国际申请号为PCT/IB2018/000474)、专利技术名称为“用于分析图像的可穿戴装置和方法”的专利技术专利申请的分案申请。相关申请的交叉引用本申请要求于2017年4月23日提交的美国临时专利申请第62/488,789号、于2017年4月23日提交的美国临时专利申请第62/488,791号、以及于2017年5月8日提交的美国临时专利申请第62/503,034号的优先权权益。所有前述申请均通过引用整体并入本文。
本公开总体上涉及用于从用户的环境捕获并处理图像并使用从捕获的图像导出的信息的设备和方法。更具体地，本公开涉及可穿戴装置和从先前会话检索并显示关键词的方法及介质。
技术介绍
如今技术进步使得可穿戴设备能够自动捕获图像并储存与捕获的图像相关联的信息。某些设备已经被用来在通常称为“生活记录(lifelogging)”的练习中数字地记录一个人生活中的方面和个人经历。一些个体记录他们的生活，因此他们可以从过去的活动(例如社交事件、旅行等)中找回瞬间。生活记录在其它领域(例如，商业、健身和医疗保健以及社交研究)也可以具有显著的益处。生活记录设备对于跟踪日常活动是有用的同时，可以基于对捕获的图像数据的分析而通过增强人在其环境中与反馈交互的能力和其它高级功能上得到改进。尽管用户可以用他们的智能手机捕获图像，并且一些智能手机应用可以处理捕获的图像，但智能手机鉴于其尺寸和设计可能不是用作生活记录装置的最佳平台。生活记录装置应该小且轻，因此它们可以易于穿戴并且不需要来自用户的密集注意和操作。此外，随着包含可穿戴装置的图像捕获设备的改进，可以提供附加功能以帮助用户在环境中和环境周围导航，识别他们遇到的人和物体，并向用户提供关于他们的周围环境和活动的反馈。因此，需要一种用于自动捕获并处理图像以向装置的用户提供有用信息的装置和方法、以及用于处理和利用由装置收集的信息的系统和方法。
技术实现思路
与本公开一致的实施例提供了用于从用户的环境自动捕获并处理图像的设备和方法，以及用于处理与从用户的环境捕获的图像有关的信息的系统和方法。在一个实施例中，一种用于捕获并处理图像的可穿戴装置可以包括可穿戴图像传感器以及至少一个处理设备，该可穿戴图像传感器被配置为从可穿戴装置的用户的环境捕获多个图像。至少一个处理设备可以被编程为：分析多个图像以识别多个人；分析多个图像以确定用户与多个人中的每个人之间的亲和度(affinity)级别；获得多个人中的每个人的图像表示；以及基于亲和度级别，生成包括图像表示的可视化。在一个实施例中，一种可穿戴装置可以包括可穿戴图像传感器以及至少一个处理设备，该可穿戴图像传感器被配置为从可穿戴装置的用户的环境捕获多个图像。至少一个处理设备可以被编程为：从该可穿戴图像传感器接收用户与之交互的个体的多个面部图像；将至少一个链接属性与多个面部图像中的每个面部图像相关联地储存，至少一个链接属性包含环境特性、地理位置、关联词、社交互联或时间指示符中的至少一个；以及使可视表示被显示。该可视表示可以包含多个面部图像，并且多个面部图像可以基于至少一个链接属性来布置。在一个实施例中，一种在采用可与移动通信设备配对的可穿戴图像传感器的系统中使用的非暂时性计算机可读介质，该计算机可读介质包含指令。该指令在由至少一个处理器执行时可以使至少一个处理器执行步骤，包括：由用户穿戴的可穿戴图像传感器接收用户与之交互的个体的多个面部图像；以与多个面部图像中的每个面部图像相关联的方式，储存至少一个链接属性，至少一个链接属性包含环境特性、地理位置、关联词、社交互联或时间指示符中的至少一个；以及在面部云中显示多个面部图像。多个面部图像可以基于至少一个链接属性来布置。在一个实施例中，非暂时性计算机可读介质含有指令。该指令在由至少一个处理器执行时可以使至少一个处理器执行步骤，包括：从由用户穿戴的可穿戴图像传感器接收用户已经与之交互的个体的多个面部图像；接收从声音文件解析的词语的列表，声音文件在与在穿戴者附近存在多个个体的检测相关联的时间段期间被捕获；在存储器中将解析的词语的列表与对应的个体相关联；以及在显示器的屏幕上呈现其词语列表含有重叠的常用词的个体的多个面部图像的子集。在一个实施例中，一种非暂时性计算机可读介质可以含有指令，该指令在由至少一个处理器执行时使至少一个处理器进行步骤。步骤可以包括：接收用户与之交互的多个个体的面部图像；接收对于多个面部图像中的每个面部图像的至少一个链接属性；在存储器中将多个面部图像中的每个面部图像与对于多个面部图像中的对应一个面部图像接收的至少一个链接属性相关联；以及对于选择的链接属性，在显示器的屏幕上呈现共享所选择的链接属性的多个面部图像的集合。在一个实施例中，一种非暂时性计算机可读介质可以含有指令，该指令在由至少一个处理器执行时使至少一个处理器进行步骤。步骤可以包括：从由用户穿戴的可穿戴图像传感器接收在时间窗口中捕获的至少一个图像；接收在时间窗口期间在该图像传感器附近捕获的声音文件；处理声音文件以识别声音文件中的至少一个词语；将词语与物体图像之间的关联储存在存储器中；在远离时间窗口的时间，接收至少一个关键词的搜索输入；访问存储器以定位至少一个关键词和至少一个物体图像之间的关联；以及使得物体图像在用户的移动通信设备上显示，该移动通信设备与该可穿戴图像传感器分开。在一个实施例中，一种非暂时性计算机可读介质可以含有指令，该指令在由至少一个处理器执行时使至少一个处理器进行步骤。步骤可以包括：从由用户穿戴的可穿戴图像传感器接收用户在第一日历日期与之交互的个体的第一多个面部图像；与第一多个个体中的每个个体相关联地，储存第一日历日期的指示符；从由用户穿戴的可穿戴图像传感器接收用户在第二日历日期与之交互的个体的第二多个面部图像；与第二多个个体中的每个个体相关联地，储存第二日历日期的指示符；接收用户的第一输入请求，用于调回在第一日历日期的交互；响应于第一输入，向用户显示第一多个个体中的至少一些个体的图像；接收用户的第二输入请求，用于调回在第二日历日期的交互；以及响应于第二输入，向用户显示第二多个个体中的至少一些个体的图像。在一个实施例中，一种用于捕获并处理图像的可穿戴装置可以包括可穿戴图像传感器以及至少一个处理设备，该可穿戴图像传感器被配置为从可穿戴装置的用户的环境捕获多个图像。至少一个处理设备可以被编程为：分析多个图像以检测至少一个人；选择与检测到的人相关联的至少一个记录；分析多个图像以识别与检测到的人相关联的上下文信息；以及基于上下文信息来更新至少一个记录。在一个实施例中，一种用于捕获并处理图像的可穿戴装置可以包括可穿戴图像传感器以及至少一个处理设备，该可穿戴图像传感器被配置为从可穿戴装置的用户的环境捕获多个图像。至少一个处理设备可以被编程为：分析多个图像以检测至少一个人；基于检测到的人来确定上下文类别；分析多个图像以识别可视上下文指示符；以及将可视上下文指示符与所确定的上下文类别相关联。在一个实施例中，一种可穿戴装置可以包括可穿戴图像传感器和至少一个处理器，该可穿戴图像传感器被配置为从用户的环境捕获多个图像本文档来自技高网...

【技术保护点】
1.一种可穿戴装置，所述可穿戴装置包括：可穿戴图像传感器；以及至少一个处理器，被编程为：从该可穿戴图像传感器接收该可穿戴装置的用户在时间窗口期间的第一交互中与之交互的个体的面部图像；接收在所述时间窗口的至少一部分期间在该图像传感器附近捕获的声音数据；处理所述声音数据以识别至少一个关键词；将关键词和面部图像之间的关联储存在存储器中；从该可穿戴图像传感器接收该个体在不同于所述时间窗口期间的时间的第二交互期间的另一个面部图像；使用图像处理来确定第一交互中的个体是第二交互中的个体；访问所述存储器以从第一交互定位至少一个关键词；以及在第二交互期间，使得在对用户可见的显示器上显示至少一个关键词，从而向用户提醒第一交互的主题。

【技术特征摘要】
2017.04.23 US 62/488,789;2017.04.23 US 62/488,791;1.一种可穿戴装置，所述可穿戴装置包括：可穿戴图像传感器；以及至少一个处理器，被编程为：从该可穿戴图像传感器接收该可穿戴装置的用户在时间窗口期间的第一交互中与之交互的个体的面部图像；接收在所述时间窗口的至少一部分期间在该图像传感器附近捕获的声音数据；处理所述声音数据以识别至少一个关键词；将关键词和面部图像之间的关联储存在存储器中；从该可穿戴图像传感器接收该个体在不同于所述时间窗口期间的时间的第二交互期间的另一个面部图像；使用图像处理来确定第一交互中的个体是第二交互中的个体；访问所述存储器以从第一交互定位至少一个关键词；以及在第二交互期间，使得在对用户可见的显示器上显示至少一个关键词，从而向用户提醒第一交互的主题。2.根据权利要求1所述的可穿戴装置，其中处理所述声音数据以识别至少一个关键词包括访问远程服务器。3.根据权利要求1所述的可穿戴装置，其中所述显示器被包含在与该可穿戴装置配对的移动通信设备中。4.根据权利要求1所述的可穿戴装置，其中将关键词和面部图像之间的关联储存在存储器中包括将所述关联储存在远程服务器中。5.根据权利要求1所述的可穿戴装置，其中所述存储器被包含在可通过一个或多个网络访问的远程服务器中。6.根据权利要求1所述的可穿戴装置，其中所述声音数据从包含该可穿戴图像传感器的壳体内的声音传感器获得。7.根据权利要求1所述的可穿戴装置，其中所述声音数据从被包含在移动通信设备内的声音传感器获得。8.根据权利要求1所述的可穿戴装置，其中所述声音数据的至少一部分被储存，该部分根据交互频率级别来确定。9.根据权利要求1所述的可穿戴装置，其中所述声音数据的至少一部分被储存，该部分根据该个体的重要性级别来确定。10.根据权利要求1所述的可穿戴装置，其中所述至少一个处理器被进一步编程为根据用户和该个体之间的关系、关键词、位置、同义词或主题来搜索已储存的关键词。11.一种在采用可与移动通信设备配对的可穿戴图像传感器的系统中使用的非暂时性计算机可读介质，所述计算机可读介质含有指令，所述指令在由至少一个处理器执行时使所述至少一个处理器执行步骤，所述步骤包括：从由用户穿戴的可穿戴图像传感器接收用户在时间窗口期间的第一交互中与之交互的个体的面部图像；接收在所述时间窗口期间在该图像传感器附近捕获的声音数据；处理所述声音数据以识别所述声音数据中的至少一个关键词；将关键词和面部图像之间的关联储存在存储器中；从由用户穿戴的该可穿戴图像传感器接收该个体在不同于所述时间窗口期间的时...

【专利技术属性】
技术研发人员：Y韦克斯勒，A沙舒阿，
申请(专利权)人：奥康科技有限公司，
类型：发明
国别省市：以色列,IL