多模态信息处理装置制造方法及图纸

输出信息生成部(3)与来自输入部(1)的信息对应地生成与输出部(5a、5b、…)的种类无关的抽象化输出信息(4)。输出部(5a、5b、…)的意思解释部(54a、54b、…)基于监视自身输出部的工作状况的状况监视部(51a、51b、…)的监视结果，根据抽象化输出信息(4)，生成具体化输出信息(55a、55b、…)。处理执行部(56a、56b、…)进行与具体化输出信息(55a、55b、…)对应的处理。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及用于将对多个不同的输出设备或输出器件输出的信息作为统一的信息进行处理的多模态(multimodal)信息处理装置。
技术介绍
以往，存在以下方法：在由多种输出设备或输出器件(例如，显示器或语音再现设备等)输出作为同一目地的输出信息的情况下，预先准备每个输出设备或输出器件的输出信息(文本数据和语音数据等)。但是，这样的方法需要预先设想了输出设备或输出器件的种类及其输出信息的形式的设计，当输出设备或输出器件发生变化时，需要重新设计。因此，为了解决该课题，例如在专利文献1所记载的装置中，具有决定输出器件的单元、和对输出信息的数据形式进行转换的单元，通过转换为输出器件能够处理的数据形式并输出到输出器件，即使不预先考虑多个输出数据的形式，也实现了良好的信息输出系统。现有技术文献专利文献专利文献1:日本特开2001-265370号公报
技术实现思路
专利技术所要解决的课题现如今，伴随输出设备或输出器件的多样化，能够在信息处理装置中利用的输出设备或输出器件增多，并且，在系统构建后还变更的情况增多。但是，例如在设为专利文献1所示那样的、信息处理装置侧具有决定输出处理装置的单元以及对输出信息的数据形式进行转换的单元的结构的情况下，存在如下课题：每当存在可连接的输出设备或输出器件的变更、或任意的输出设备或输出器件的
数据形式的变更时，必须重新对信息处理装置侧进行设计。此外，构成为在信息处理装置侧生成输出设备或输出器件能够处理的输出数据形式，因此在各输出设备或输出器件进行考虑到当前状况的输出的情况下，信息处理装置需要设计成取得各输出设备或输出器件的状况，并生成与所取得的状况对应的输出信息。因此，存在如下课题：每当变更任意的输出设备或输出器件的动作时，需要对信息处理装置侧重新进行设计。本专利技术正是为了解决上述那样的课题而完成的，其目的在于，得到一种即使在变更了与信息处理装置连接的输出设备或输出器件的情况下，也不需要对信息处理装置侧进行变更的多模态信息处理装置。用于解决课题的手段本专利技术的多模态信息处理装置的输出部根据输入信息来进行处理，在该多模态信息处理装置中，具有输出信息生成部，所述输出信息生成部与输入信息对应地生成与输出部的种类无关的抽象化输出信息，输出部具有：状况监视部，其监视自身输出部的工作状况；意思解释部，其基于状况监视部的监视结果，根据抽象化输出信息，生成具体化信息；以及处理执行部，其进行与具体化信息对应的处理。专利技术效果本专利技术的多模态信息处理装置使得与输入信息对应地生成与输出部的种类无关的抽象化输出信息，输出部基于自身输出部的工作状况的监视结果，根据抽象化输出信息生成具体化信息来进行对应的处理，因此即使在变更了与信息处理装置连接的输出设备或输出器件的情况下，也不需要对信息处理装置侧进行变更。附图说明图1是示出本专利技术实施方式1的多模态信息处理装置的结构图。图2是示出本专利技术实施方式1的多模态信息处理装置的动作的流程图。图3是示出本专利技术实施方式1的多模态信息处理装置的生成抽象化输出信息的处理的说明图。图4是示出本专利技术实施方式1的多模态信息处理装置的生成具体化输出信息的处理的说明图。图5是示出本专利技术实施方式1的多模态信息处理装置的连接有多个输出部的情况
下的处理的说明图。图6是示出本专利技术实施方式2的多模态信息处理装置的结构图。图7是示出本专利技术实施方式2的多模态信息处理装置的动作的流程图。具体实施方式以下，为了更详细地说明本专利技术，按照附图说明用于实施本专利技术的方式。实施方式1.图1是示出本专利技术实施方式1的多模态信息处理装置的结构图。图1所示的多模态信息处理装置具有输入部1、输出信息生成部3和输出部5a、5b、…。输入部1是受理用户的输入以及来自设备的输入的处理部，由多个输入单元1a、1b、1c、…构成。这些输入单元1a、1b、1c、…是取得用户的输入信息的单元或取得来自设备的信息的单元，各自的输出作为输入信息2a、2b、2c、…被输出到输出信息生成部3。输出信息生成部3是信息处理装置中的生成输出信息的处理部，该输出信息生成部3根据输入信息2a、2b、2c、…，生成不依存于输出部5a、5b、…的输出信息，并作为抽象化输出信息4而输出，输出信息生成部3具有输入信息整合部31、抽象化输出信息的输出规格33、和抽象化输出信息生成部34。输入信息整合部31是如下的处理部：对从输入部1输入的1个以上的输入信息2a、2b、2c、…进行解释，并作为抽象化输入信息32而输出，该抽象化输入信息32是不依存于输入单元1a、1b、1c、…的输入信息。此外，抽象化输出信息的输出规格33是记述有表示抽象化输入信息32与抽象化输出信息4之间的关系的信息的数据库。此外，抽象化输出信息生成部34是如下的处理部：参照抽象化输出信息的输出规格33，根据抽象化输入信息32，生成抽象化输出信息4。输出部5a、5b、…是根据抽象化输出信息4生成能够处理的输出信息并执行的输出设备或输出器件，分别具有状况监视部51a、51b、…、解释规格53a、53b、…、意思解释部54a、54b、…、处理执行部56a、56b、…。另外，这里，输出器件是指后述的语音输出器或显示器这样的结构要素比较少的器件、或作为构成输出设备的要素的器件，输出设备是指例如空调这样的结构要素比较多的设备或器件的集合体这样的设备。状况监视部51a、51b、…监视各自的输出部5a、5b、…的工作状况，并作为状况信息52a、52b、…输出。解释规格53a、53b、…是记述有抽象化输出信息4和状况信息52a、52b、…的解释方法的数据库。意思解释部54a、54b、…是如下的处理部：根据抽象化输出信息4、状况信息52a、52b、…和解释规格53a、53b、…，生成作为输出设备或输出器件能够处理的输出信息的具体化输出信息55a、55b、…。处理执行部56a、56b、…是作为输出设备或输出器件来执行实际的处理的处理部。在上述输入部1中，各输入单元1a、1b、1c、…取得的输入信息2a、2b、2c、…是硬件密钥(hardware key)的输入信号或鼠标的坐标信息、语音识别的文本数据或所输入的语音信号、姿势识别(gesture recognition)的解释结果或所输入的图像信号、其它设备的动作完成信号等，只要是包含处理能够利用的信息的形式，则可以是任何信息。输出信息生成部3的输入信息整合部31所生成的抽象化输入信息32是数值数据、文本数据、二进制数据、比特数据、或将这些数据组合得到的数据等，只要是抽象化输出信息生成部34能够不依存于输入单元1a、1b、1c、…而能够解释的信息或数据形式，则可以是任何信息。输出信息生成部3的抽象化输出信息的输出规格33是用于根据抽象化输入信息32生成抽象化输出信息4的信息，可以由抽象化输出信息生成部34解释为用制表符分隔的文本或XML等标记语言记述的外部定义文件/数据库，也可以编码为抽象化输出信息生成部34的处理用程序，只要是能够对抽象化输入信息32和抽象化输出信息4进行关联的形式，则可以是任何信息。输出信息生成部3的抽象化输出信息生成部34生成的抽象化输出信息4是数值数据、文本数据、二进制数据、比特数据、或将这些数据组合后的数据等，只要是抽象化输出信息本文档来自技高网...

【技术保护点】
一种多模态信息处理装置，其中，输出部根据输入信息来进行处理，该多模态信息处理装置的特征在于，所述多模态信息处理装置具有输出信息生成部，所述输出信息生成部与所述输入信息对应地生成与所述输出部的种类无关的抽象化输出信息，所述输出部具有：状况监视部，其监视自身输出部的工作状况；意思解释部，其基于该状况监视部的监视结果，根据所述抽象化输出信息，生成具体化信息；以及处理执行部，其进行与所述具体化信息对应的处理。

【技术特征摘要】
【国外来华专利技术】2014.02.24 JP 2014-0331021.一种多模态信息处理装置，其中，输出部根据输入信息来进行处理，该多模态信息处理装置的特征在于，所述多模态信息处理装置具有输出信息生成部，所述输出信息生成部与所述输入信息对应地生成与所述输出部的种类无关的抽象化输出信息，所述输出部具有：状况监视部，其监视自身输出部的工作状况；意思解释部，其基于该状况监视部的监视结果，根据所述抽象化输出信息，生成具体化信息；以及处理执行部，其进行与所述具体化信息对应的处理。2.根据权利要求1所述的多模态信息处理装置，其特征在于，所述输出部具有表示所述抽象化输出信息与所述具体化信息之间的关系的解释规格，所述意思解释部参照所述解释规格，对所述抽象化输出信息进行解释来生成所述具体化信息。3.根据权利要求1所述的多模态信息处理装置，其特征在于，所述意思解释部考虑使用所述输出部的用户的与该输出部的...

【专利技术属性】
技术研发人员：川岛启吾，大塚贵弘，山浦正，
申请(专利权)人：三菱电机株式会社，
类型：发明
国别省市：日本;JP