主动式互动导览系统以及主动式互动导览方法技术方案

本发明专利技术提供一种主动式互动导览系统，包括显示设备、目标物图像采集设备、用户图像采集设备以及处理装置。目标物图像采集设备取得动态对象图像。用户图像采集设备取得用户图像。处理装置自用户图像识别并选定被服务对象，采集被服务对象的脸部特征。若脸部特征匹配脸部特征点，则处理装置检测被服务对象的视线并据以识别被服务对象注视的目标对象，生成对应于被服务对象的脸部位置三维坐标、对应于目标对象的位置三维坐标以及深度宽度信息，据以计算视线穿越显示设备的交点位置，并将目标对象的虚拟信息显示于显示设备的交点位置。虚拟信息显示于显示设备的交点位置。虚拟信息显示于显示设备的交点位置。

【技术实现步骤摘要】
主动式互动导览系统以及主动式互动导览方法


[0001]本专利技术是有关于一种互动导览技术，且特别是有关于一种主动式互动导览系统以及主动式互动导览方法。

技术介绍

[0002]随着图像处理技术与空间定位技术的发展，透明显示器的应用已逐渐受到重视。此类的技术可让显示设备搭配动态对象，再辅以虚拟相关信息，并且依照用户的需求来产生交互式的体验，可使信息以更为直观的方式呈现。再者，关联于动态对象的虚拟信息可显示于透明显示器装置的特定位置上，让用户可通过透明显示设备同时观看到动态对象与叠加于动态对象上的虚拟信息。
[0003]然而，当用户距离显示设备较远时，采集用户图像的装置可能无法判断用户的视线，如此一来，系统将无法判断用户在注视的动态对象为何，便无法将正确的虚拟信息显示于显示设备上，甚至无法将对应于用户注视的动态对象的虚拟信息叠加于动态对象上。
[0004]此外，当系统检测到多个用户同时在观看动态对象时，每个用户的视线方向可能不尽相同，系统便无法确定要显示哪一个动态对象相关的虚拟信息，如此一来将使得互动导览系统无法呈现用户正在观看的动态本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种主动式互动导览系统，其特征在于，包括：可透光的显示设备，设置于至少一用户以及多个动态对象之间；目标物图像采集设备，耦接于该显示设备，用以取得动态对象图像；用户图像采集设备，耦接于该显示设备，用以取得用户图像；以及处理装置，耦接该显示设备，该处理装置用以于该动态对象图像中识别该些动态对象，并跟踪该些动态对象，以及于该用户图像中识别该至少一用户并选定一被服务对象，采集该被服务对象的脸部特征并判断该脸部特征是否匹配多个脸部特征点，若该脸部特征匹配该些脸部特征点，则该处理装置检测该被服务对象的视线，若该脸部特征未匹配该些脸部特征点，则该处理装置执行图像分割以将该用户图像分割成多张待识别图像，对于该些待识别图像的每一者分别进行用户识别以检测该被服务对象的该视线，其中该视线穿越该显示设备以注视该些动态对象的一目标对象；其中该处理装置更用以根据该视线识别该被服务对象注视的该目标对象，生成对应于该被服务对象的脸部位置三维坐标以及对应于该目标对象的位置三维坐标以及该目标对象的深度宽度信息，据以计算该视线穿越该显示设备的交点位置，并将对应于该目标对象的虚拟信息显示于该显示设备的该交点位置。2.根据权利要求1所述的主动式互动导览系统，其特征在于，该些待识别图像包含一中央待识别图像以及多个周边待识别图像。3.根据权利要求1所述的主动式互动导览系统，其特征在于，该些待识别图像中的一者与相邻的另一者具有重叠区域。4.根据权利要求3所述的主动式互动导览系统，其特征在于，该些待识别图像中的一者与所述相邻的另一者可为上下相邻、左右相邻或对角线相邻。5.根据权利要求1所述的主动式互动导览系统，其特征在于，该目标物图像采集设备、该用户图像采集设备以及该处理装置是采用分别进行包含使用平行运算的程序代码撰写方式，并搭配多核心的中央处理器采用多线程进行平行处理。6.根据权利要求1所述的主动式互动导览系统，其特征在于，该用户图像采集设备包括RGB图像感测模块、深度感测模块、惯性感测模块以及GPS定位感测模块。7.根据权利要求1所述的主动式互动导览系统，其特征在于，若该脸部特征匹配该些脸部特征点，则该处理装置利用该些脸部特征点计算该被服务对象的脸部位置及该视线的视线方向，并生成对应于该被服务对象的编号以及该脸部位置三维坐标。8.根据权利要求7所述的主动式互动导览系统，其特征在于，该处理装置于该用户图像中识别该至少一用户并根据一服务场域范围选定该被服务对象，其中该服务场域范围具有一初始尺寸。9.根据权利要求8所述的主动式互动导览系统，其特征在于，当该被服务对象移动时，该处理装置以该被服务对象的该脸部位置三维坐标为中心点动态调整该服务场域范围的左右尺寸。10.根据权利要求9所述的主动式互动导览系统，其特征在于，当该处理装置于该用户图像中的该服务场域范围未识别到该被服务对象时，将该服务场域范围重置为该初始尺寸。11.根据权利要求1所述的主动式互动导览系统，其特征在于，更包括：
数据库，耦接该处理装置，用以储存对应该些动态对象每一者的多个对象特征点；其中当该处理装置识别出该被服务对象注视的该目标对象后，该处理装置采集该目标对象的像素特征，将该像素特征与该些对象特征点进行比对；倘若该像素特征匹配该些对象特征点，该处理装置生成对应于该目标对象的编号、对应该目标对象的该位置三维坐标以及该目标对象的深度宽度信息。12.根据权利要求1所述的主动式互动导览系统，其特征在于，该处理装置判断对应于该目标对象的该虚拟信息是否迭合显示于该显示设备的该交点位置；倘若该虚拟信息未迭合显示于该显示设备的该交点位置，该处理装置针对该虚拟信息的位置进行偏移校正。13.一种主动式互动导览方法，适用于具有可透光的显示设备、目标物图像采集设备、用户图像采集设备以及处理装置的主动式互动导览系统，其特征在于，该显示设备设置于至少一用户以及多个动态对象之间，该处理装置用以执行该主动式互动导览方法，该主动式互动导览方法包括：藉由该目标物图像采集设备取得动态对象图像，于该动态对象图像中识别该些动态对象，并跟踪该些动态对象；藉由该用户图像采集设备取得用户图像，于该用户图像...

【专利技术属性】
技术研发人员：刘得鋕，郑莛薰，赵玉如，陈健龙，林郁欣，
申请(专利权)人：财团法人工业技术研究院，
类型：发明
国别省市：