基于捕捉到的笔画信息来与助理组件交互制造技术

本文描述了接收在用户使用输入捕捉设备输入手写笔记时捕捉到的笔画信息的计算机实现的技术。该技术然后自动地对捕捉到的笔画信息执行分析以产生输出分析信息。基于该输出分析信息，该技术使用助理组件来标识对捕捉到的笔画信息的响应和/或标识要执行的动作。该技术然后与捕捉到的原始笔画信息一起呈现该响应。附加地或替换地，该技术执行该动作。在一种情形中，该响应是基于文本的响应；该基于文本的响应可以按自由形式的手写样式呈现以给予用户虚拟助理正在响应该用户自己的笔记的印象。在另一情形中，该响应使用户参与任何类型的交互式活动。

Interaction with assistant components based on captured stroke information

This paper describes a computer implemented technology to receive strokes information captured by users when using input capture devices to input handwritten notes. The technology then performs automatic analysis of the captured stroke information to produce output analysis information. Based on the output analysis information, the technology uses an assistant component to identify the response to the captured stroke information and / or to identify the action to be executed. The technology then presents the response together with the original stroke information captured. Alternately or alternately, the technology performs the action. In one case, the response is a text based response; the text based response can be presented in a free form handwriting style to give the user's virtual assistant the impression that the user's own notes are ringing. In another case, the response allows users to participate in any type of interactive activity.

【技术实现步骤摘要】
【国外来华专利技术】基于捕捉到的笔画信息来与助理组件交互
技术介绍
计算行业提供促成记笔记的各种应用。许多这样的应用专用于简单地捕捉并且稍后检索手写内容的核心任务。虽然这些应用是有用的，但在该
中存在相当大的改进空间。概述本文描述了接收在用户使用输入捕捉设备输入手写笔记时捕捉到的笔画信息的计算机实现的技术。该技术然后自动地对捕捉到的笔画信息执行分析以产生输出分析信息，而不是被用户提示这样做。基于该输出分析信息，该技术使用助理组件来标识将要呈现给用户的对捕捉到的笔画信息的响应和/或标识要执行的动作。在一些场景中，响应可以是基于输出分析信息选择的包含更多内容的对话的一部分。该技术然后显示捕捉到的笔画信息。该技术还呈现所标识的响应(如果有)和/或执行所标识的动作。在一些实现中，该技术可以按自由形式的手写样式制定响应以给予虚拟助理正在以自由形式手写的形式响应该用户的印象。例如，考虑其中用户输入以下笔记的情形：包含实体项“Jill”和“Tuesday(周二)”的“CallJillonTuesday(周二打电话给Jill)”。该技术可使用语言分析来识别该笔记中的实体项。该技术还可标识笔记的总体意图，例如对应于在一周本文档来自技高网...

【技术保护点】
一种用于存储计算机可读指令的计算机可读存储介质，所述计算机可读指令在由一个或多个处理设备执行时执行一种方法，包括：从输入捕捉设备接收捕捉到的笔画信息，所述输入捕捉设备响应于捕捉到由用户在与所述输入捕捉设备相关联的输入表面上做出的徒手墨水笔画来产生所述捕捉到的笔画信息；将所述捕捉到的笔画信息变换成识别出的笔画信息；自动对所述识别出的笔画信息执行分析以生成输出分析信息；基于所述输出分析信息来标识对所述捕捉到的笔画信息的响应，和/或基于所述输出分析信息来标识将要执行的动作，而不由所述用户提示这样做；在画布显示设备上显示所述捕捉到的笔画信息；以及向所述用户呈现所述响应和/或执行所述动作。

【技术特征摘要】
【国外来华专利技术】2015.09.03 US 14/844,0091.一种用于存储计算机可读指令的计算机可读存储介质，所述计算机可读指令在由一个或多个处理设备执行时执行一种方法，包括：从输入捕捉设备接收捕捉到的笔画信息，所述输入捕捉设备响应于捕捉到由用户在与所述输入捕捉设备相关联的输入表面上做出的徒手墨水笔画来产生所述捕捉到的笔画信息；将所述捕捉到的笔画信息变换成识别出的笔画信息；自动对所述识别出的笔画信息执行分析以生成输出分析信息；基于所述输出分析信息来标识对所述捕捉到的笔画信息的响应，和/或基于所述输出分析信息来标识将要执行的动作，而不由所述用户提示这样做；在画布显示设备上显示所述捕捉到的笔画信息；以及向所述用户呈现所述响应和/或执行所述动作。2.如权利要求1所述的计算机可读存储介质，其特征在于，所述响应是涵盖一个或多个响应的对话的一部分，并且其中所述方法进一步包括基于所述输出分析信息来从对话集合中选择所述对话。3.如权利要求1所述的计算机可读存储介质，其特征在于，所述方法进一步包括：以自由形式的手写样式表达所述响应以提供所表达的响应；以及在所述画布显示设备上显示所表达的响应。4.一种由一个或多个计算设备实现的用于基于捕捉到的笔画信息使用户参与对话的系统，包括：墨水分析组件，所述墨水分析组件被配置成：从输入捕捉设备接收捕捉到的笔画信息，所述输入捕捉设备响应于捕捉到由用户在与所述输入捕捉设备相关联的输入表面上做出的徒手墨水笔画来产生所述捕捉到的笔画信息；将所述捕捉到的笔画信息变换成识别出的笔画信息；以及自动对所述识别出的笔画信息执行分析以生成输出分析信息；助理组件，所述助理组件被配置成：基于所述输出分析信息来标识用户将参与的合适对话，而不由所述用户提示这样做，所述对话涵盖一个或多个响应；以及基于所述对话以及所述输出分析信息来制定对所述捕捉到的笔画信息的响应；以及被配置成在画布显示设备上显示所述捕捉到的笔画信息并且还被配置成呈现所述响应的画布呈...

【专利技术属性】
技术研发人员：JK·马尔凯维奇，N·E·B·奥尔，L·D·克拉克，K·塔凯，N·李，
申请(专利权)人：微软技术许可有限责任公司，
类型：发明
国别省市：美国,US