用于使用位置传感器和扩音器信号与用户交互的方法和装置制造方法及图纸

本发明专利技术的实施例涉及使用位置传感器和扩音器信号与用户交互的方法和装置。一种装置包括：一个或多个位置传感器，其被配置为输出一个或多个信号；以及一个或多个扩音器，其被配置为形成对应的扩音器信号。所述装置还包括一个或多个处理器，所述一个或多个处理器被配置为促使所述装置至少实施以下内容：使用来自所述一个或多个位置传感器的所述一个或多个信号，确定至少一个对象相对于所述装置的方向；由所述装置使用来自该装置中的扩音器的信号来识别由所述至少一个对象发出的声学信号的一个或多个属性；以及促使所述装置实施操作以响应于所述方向和所识别的一个或多个属性被确定为对应于所述操作。还公开了另外的装置、方法和程序产品。

Methods and devices for interacting with users using position sensors and loudspeaker signals

【技术实现步骤摘要】
用于使用位置传感器和扩音器信号与用户交互的方法和装置本申请是2015年8月10日申请的申请号为201510487234.8、专利技术名称为“使用位置传感器和扩音器信号与装置的用户交互”的专利申请的分案申请。
本专利技术一般涉及诸如电子或移动设备这样的装置，并且特别涉及与所述装置的用户交互。
技术介绍
此部分旨在为在权利要求中详述的本专利技术提供背景或上下文。本文中的说明书可以包括可被诉求的概念，但所述概念不必是那些之前已经设想、实现或描述过的。因此，除非在本文中另外指出，否则在此部分中描述的不是本申请中的说明书和权利要求的现有技术，并且不通过包括在此部分中而承认其为现有技术。移动设备正变得更流行、更小和多变。例如，智能电话和平板计算机正变得普及。最近，智能眼镜、智能手表等已变得流行，并且正在变得甚至更流行。这些多变的移动设备中的每个不得不具有某种接口，用户可以与所述接口进行通信。即，用户需要移动设备(或该设备上的应用)来实施某种功能，并且用于该设备的接口是用户命令设备实施所述功能的方式。许多用户接口由触摸支配，例如通过在触摸屏幕上的手势或者经由与物理按钮或其它元件的用户交互。然而，这些基于触摸的接口元件并不总是易于访问。作为示例，如果用户正在步行或慢跑并使用智能手表或智能电话，则该用户不得不访问该手表或电话，找到基于触摸的接口元件，并且通过特定方式与该元件进行交互。这一系列事件可能打断步行或慢跑，或者就该用户而言可能至少导致某种程度的恼火。改进与诸如智能电话、平板计算机、智能眼镜或智能手表这样的移动设备的用户交互将是有益的。
技术实现思路
在示例性实施例中，一种装置包括：一个或多个位置传感器，其被配置为输出一个或多个信号；以及一个或多个扩音器，其被配置为形成对应的扩音器信号。所述装置还包括一个或多个处理器，所述一个或多个处理器被配置为促使所述装置至少实施以下内容：使用来自所述一个或多个位置传感器的所述一个或多个信号来确定至少一个对象相对于所述装置的方向；由所述装置使用来自该装置中的扩音器的信号来识别由所述至少一个对象发出的声学信号的一个或多个属性；以及促使所述装置实施操作以响应于确定所述方向和所识别的一个或多个属性对应于所述操作。在另一示例性实施例中，一种装置包括：用于感知位置和用于输出对应的一个或多个信号的构件；以及用于感知音频的构件，其被配置为形成对应的音频信号。所述装置还包括以下构件：用于使用来自用于感知位置的构件的所述一个或多个信号来确定至少一个对象相对于所述装置的方向的构件；用于由所述装置使用来自该装置中用于感知音频的构件的信号来识别由所述至少一个对象发出的声学信号的一个或多个属性的构件；以及用于促使所述装置实施操作以响应于确定所述方向和所识别的一个或多个属性对应于所述操作的构件。一种示例性计算机程序产品包括计算机可读存储介质，其中，所述计算机可读存储介质承载了体现在其中的用于与计算机一起使用的计算机程序代码。所述计算机程序代码包括：用于使用来自装置的一个或多个位置传感器的一个或多个信号来确定至少一个对象相对于所述装置的方向的代码；用于由所述装置使用来自该装置中的扩音器的信号来识别由所述至少一个对象发出的声学信号的一个或多个属性的代码；以及用于促使所述装置实施操作以响应于确定所述方向和所识别的一个或多个属性对应于所述操作的代码。在进一步的示例性实施例中，一种方法包括以下步骤：使用来自装置的一个或多个位置传感器的一个或多个信号来确定至少一个对象相对于所述装置的方向；由所述装置使用来自该装置中的扩音器的信号来识别由所述至少一个对象发出的声学信号的一个或多个属性；以及促使所述装置实施操作以响应于确定所述方向和所识别的一个或多个属性对应于所述操作。附图说明当结合附图阅读时，本专利技术的实施例的前述和其它方面在下面对示例性实施例的详细描述中变得更显而易见，其中：图1示出了适于实现本专利技术的示例性实施例的例如移动设备(智能电话)这样的装置的框图；图2示出了移动设备正被用户的手指敲击；图3示出了移动设备正被用户的手指触摸；图4示出了用户在附近发出声音但不触摸移动设备；图5被诸如移动设备的装置实施为使用位置传感器和扩音器信号提供与该移动设备的用户交互，并且是示例性逻辑流程图的框图，该示例性逻辑流程图示出了根据本文中的示例性实施例的一种示例性方法的操作、体现在计算机可读存储器中的计算机程序指令的执行结果和/或由用硬件实现的逻辑实施的功能；图6示出了用户在附近发出声音但不触摸移动设备；图7是使用触摸和声音的组合的示例的框图，并且是示例性逻辑流程图，该示例性逻辑流程图示出了根据本文中的示例性实施例的一种示例性方法的操作、体现在计算机可读存储器中的计算机程序指令的执行结果和/或由用硬件实现的逻辑实施的功能；图8是具有针对触摸的位置属性和针对音频的峰值能量的示例性数据库。具体实施方式如上面所述，改进与诸如智能电话、平板计算机、智能眼镜或智能手表这样的移动设备的用户交互将是有益的。人们与其设备进行交互的不同方式的数量逐日增长。其中一些原因例如为以下：设备的增长的尺寸使得正常的单手操作有困难；针对增长数量的像慢跑或滑板滑雪这样的活动随身携带设备；以及穿戴型而非携带型的诸如智能眼镜和智能手表这样的可穿戴计算设备的涌现要求移动设备制造商专利技术新的用于与移动设备进行交互的方式。这样的设备包括不同的传感器，从而使得用户可以与该移动设备进行交互。例如，触摸传感器在多数移动设备(其中，“移动”指示用户可以携带并轻松地移动该设备)中易于可用。触摸传感器依赖于用户指尖的触摸来确定指尖的位置。悬停传感器(hoversensor)是相对新的传感器，其允许在用户不触摸悬停传感器或设备的情况下确定用户手指(或其它对象)的位置。触摸和悬停传感器这两者都可以与诸如触摸屏这样的显示器集成到一起或放置到其附近。触摸和悬停传感器可以被看作是位置传感器，因为它们可以确定例如用户的手或手指以及其它对象的位置。悬停传感器擅长检测用户手所位于的方向。然而，悬停传感器不擅长检测用户发出声音事件所在的准确时刻。来自由扩音器所检测到的声音事件的声音信号可以轻松地用于检测用户交互的准确时刻。当前存在几种用于利用定向声音命令与设备进行交互的方式。然而通常，为了检测具有方向的音频交互，需要额外的设备或附件。很少使用内置到移动设备中的扩音器。常规方法使用加速计来确定敲击是否已发生，然后使用扩音器来确定该敲击的方向。缺点是这些方法使用加速计。加速计可能对例如跑步时常见的噪声信号感到混淆。专利技术人已认识到，悬停传感器擅长检测用户手所位于的方向。然而，悬停传感器不擅长检测用户发出声音事件所在的准确时刻。扩音器可轻松用于检测用户交互的准确时刻，这在特定情况下有帮助。特别地，如果意图在于控制游戏，则能够精确地对控制进行计时是有益的(例如不把游戏汽车驾驶离开道路)。另一示例可以是，如果用户正在快进歌曲或视频，则要停止快进并返回到正常速度的时刻对于好的用户体验来说是关键的时间。在其中设备不被触摸的用户交互的情况下，悬停传感器可以是有益的。因此，本文中的第一种示例性解决方案(其使用单个扩音器并且响应于通过由用户触摸设备所产生的声学信号)通过使用悬停传感器来检测声音的方向而避免了以上问题，其中，所述悬停传本文档来自技高网...

【技术保护点】
1.一种方法，其包括：使用来自一个或多个位置传感器的一个或多个信号，以便确定至少一个对象相对于装置的方向；使用来自一个或多个扩音器的信号，以便确定基于所述至少一个对象所导致的声学信号的一个或多个属性；基于所确定的方向和所述声学信号的一个或多个属性，在所述装置处实施操作。

【技术特征摘要】
2014.08.14 US 14/4597471.一种方法，其包括：使用来自一个或多个位置传感器的一个或多个信号，以便确定至少一个对象相对于装置的方向；使用来自一个或多个扩音器的信号，以便确定基于所述至少一个对象所导致的声学信号的一个或多个属性；基于所确定的方向和所述声学信号的一个或多个属性，在所述装置处实施操作。2.根据权利要求1所述的方法，其进一步包括：在提供来自所述一个或多个扩音器的信号时，将所述声学信号的一个或多个属性以及所确定的方向与参考配对进行比较。3.根据权利要求2所述的方法，其中，所述参考配对选自多个参考配对，并且其中，每个参考配对包括方向以及一个或多个属性。4.根据权利要求3所述的方法，其进一步包括：将所确定的一个或多个属性以及所确定的方向匹配于所选择的参考配对。5.根据权利要求1所述的方法，其中，所述声学信号包括以下中的至少一个：声音，并且确定所述声学信号的所述一个或多个属性包括识别所述声音的一个或多个属性；以及振动，并且确定所述声学信号的所述一个或多个属性包括识别所述振动的一个或多个属性。6.根据权利要求1所述的方法，其中，所述声学信号包括以下之一：基于所述至少一个对象在所述装置上的接触所生成的声音和振动中的至少一个；以及利用所述至少一个对象而发出的声音，其中，在发出所述声音时所述至少一个对象不接触所述装置。7.根据权利要求1所述的方法，其中，所述至少一个对象包括以下中的至少一个：手指；用户的手；铅笔；擦除器；手套；记录笔；以及钢笔。8.根据权利要求1所述的方法，其中，所述一个或多个位置传感器包括以下中的至少一个：一个或多个悬停传感器；以及一个或多个触摸传感器。9.根据权利要求1所述的方法，其进一步包括：确定来自所述一个或多个扩音器的信号当超过门限时的时刻；以及响应于确定来自所述一个或多个扩音器的信号当超过所述门限时的时刻，确定所述方向和利用所述至少一个对象而发出的声学信号的所述一个或多个属性。10.根据权利要求8所述的方法，其中，所述一个或多个位置传感器包括至少一个悬停传感器，并且确定所述方向使用了来自所述至少一个悬停传感器的信息。11.根据权利要求8所述的方法，其中，当所述一个或多个位置传感器包括所述一个或多个触摸传感器时，所述方法进一步包括：确定所述至少一个对象相对于所述装置的方向；使用来自所述一个或多个触摸传感器的信息，确定基于所述至少一个对象在所述装置上的触摸的一个或多个属性；将所述触摸的所述一个或多个属性以及所述声学信号的所述一个或多个属性与数据库中的触摸属性和声学信号属性进行比较，以便确定匹配；以及基于所确定的匹配来实施所述操作。12.一种装置，其包括：一个或多个处理器；以及包括计算机程序代码的一个或多个存储器，所述一个或多个存储器以及计算机程序代码被配置为与所述一个或多个处理器一起使得所述装置至少：使用来自一个或多个位置传感器的一个或多个信号，...

【专利技术属性】
技术研发人员：M·维勒尔莫，K·奥兹卡恩，
申请(专利权)人：诺基亚技术有限公司，
类型：发明
国别省市：芬兰,FI