用于环境简档生成的方法和装置制造方法及图纸

提供了一种用于生成环境简档的方法。用于生成环境简档的方法包括：通过借助至少一个记录设备捕获环境来生成环境的图像，基于图像来检测环境中对象的改变，以及基于对象的改变来生成环境简档。

【技术实现步骤摘要】
【国外来华专利技术】用于环境简档生成的方法和装置
与示例性实施例一致的方法和装置涉及用于基于利用诸如点云相机的记录设备对环境的感测来生成环境简档的方法和装置。
技术介绍
下面的背景论述包括可有用于理解本专利技术的信息。并不承认此处提供的任何信息是现有技术或与当前请求保护的专利技术相关，或者具体或隐式引用的任何公开物是现有技术。大多数常规推荐系统依赖用户的数字生活来识别用户的选择并生成简档。基于这样生成的简档，可以向用户呈现合适的推荐。描述前述原理的现有技术文档中的一些是美国公开第20120232977号和美国公开第20120233003号。美国公开第20120232977号描述了识别用户的金融行为及用户的收藏并且基于此辅助用户。金融行为数据可基于信用、借记和其他活期存款账户的购买/交易来确定。其还进行实时的视频流分析以从视频中发现对象并且通过选择/推荐产品和企业来辅助用户。美国公开第20120233003号描述了在经由移动设备进行购买以用于电子商务活动时通过对产品/物品进行实时视频分析来辅助用户。除了基于用户的数字生活生成简档之外，还可以基于真实生活环境并且更具体地基于在环境中感测的对象和活动来创建简档。除了生成推荐之外，这样生成的简档还可有利地用于例如在家庭自动化系统、安保系统等中生成警告。为了生成这样的简档，可能必须依赖各种电子设备，包括例如图像捕获设备、声音捕获设备等。描述基于对环境的感测生成简档的文档中的一些为美国专利第8081158号、美国公开第20080167913号、美国公开第20040037469号、美国公开第20030088832号和美国专利第8068879号。美国专利第8081158号描述了利用相机来捕获图像并且基于图像特性来递送屏幕内容。该想法主要是识别用户的年龄及性别并且相应地递送屏幕内容(例如，广告、程序等)。美国公开第20080167913号描述了在计算机系统的部件的指定接近度内检测物理对象，其中计算机系统将用于所述物理对象的接入对象识别符呈递给内容门户。该专利技术基于对象的物理特性促进递送内容(例如，广告、游戏、多媒体片段等)。对象可以为任何东西(例如，瓶子、玻璃制品、手指、帽子等)并且应当在台式计算机系统的部件的指定接近度内。该想法是识别产品(或其分类)并且呈现相关内容以显示在台式计算机系统上。美国公开第20040037469号描述了利用传感器设备进行对象检测并且然后基于检测到的对象控制显示设备。该专利技术涉及用于对信息显示设备(例如，广告载体)的面向对象的控制的设备。所讨论的对象主要是人，但是也可以为其他对象，诸如车辆。美国公开第20030088832号描述了用于显示广告信息的系统和方法，其中系统能够感测在显示器的直接环境中的个人的存在并获得其特性。这种想法识别用户的特性(比如，用户的移动、性别、年龄和种族)并利用该信息以将材料呈现在显示单元上。美国专利第8068879号描述了个人通信设备上的传感器，其监测设备周围的环境。基于对该监测的分析，将适当的视觉消息显示在设备的外显示屏上。视觉消息针对设备周围的人，而不是针对设备的用户。从上面的文档可以观察到，图像捕获设备和对捕获的图像的分析在该领域中起关键作用。前述文件主要利用诸如RGB相机的图像捕获设备进行对象检测/识别，并且因此不能够确定深度参数。然而，将会领会，包括深度参数(或者换言之，基于存在于环境中的对象的形状)的简档的生成提供更好质量的简档。尽管在处理期间能够对抗这样的限制，但是归因于对过度的图像处理技术的要求，其导致成本效率低，从而使得简档生成系统不高效。除了上述之外，已经发现，当处理从RGB相机获得的低分辨率图像用于简档生成时，生成的简档的质量不令人满意。尽管能够通过利用高分辨率相机来对抗这样的限制，但是其导致成本效率低。即便简档生成系统利用具体设计成捕获高分辨率图像的捕获设备，由于捕获设备要求预定的照明或者充足开明的环境来检测任何对象或活体或在环境中发生的任何移动，所以与环境的照明水平相关的问题还仍然在获得期望的结果方面扮演令人扫兴的角色。
技术实现思路
技术问题因此，仍然存在提供用于基于对环境中对象的感测、环境中发生的改变、环境中发生的活动和环境中发生的交互来生成环境的简档的改进的方法和系统的需要。问题的解决方案示例性实施例的一个方面涉及用于通过检测在通过利用具有点云相机的记录设备生成的图像中的对象的改变来生成对象周围的环境的简档的用于生成环境简档的方法及其环境简档生成装置。根据示例性实施例的一个方面，提供了一种用于生成环境简档的方法，所述方法包括：通过借助至少一个记录设备捕获环境来生成环境的图像；基于图像检测环境中对象的改变；以及基于对象的改变来生成环境的环境简档。至少一个记录设备可包括RGB相机、热相机、深度相机和点云相机中的一者。所述方法可进一步包括基于环境简档为与环境相关的用户生成推荐。生成可包括基于检测到对象的改变的时间和对象的改变的类型来生成环境简档。所述方法可进一步包括利用音频传感器来分析环境的音频信号，其中检测包括基于音频信号检测对象的改变。生成可包括基于图像与用户之间的相关性生成环境简档。对象的改变可包括对于对象的添加、删除、替换、修改、位置的改变中的一者。所述方法可进一步包括基于对象的改变输出用于用户的推荐、通知和警告中的至少一者。检测可包括测量对象的改变的频率，并且生成可包括基于对象的改变的频率生成环境简档。所述方法可进一步包括基于对象的改变确定用户对对象的使用模式，其中生成包括基于用户的使用模式来生成环境简档。根据示例性实施例的另一方面，提供了一种用于生成环境简档的装置，所述装置包括：图像生成器，配置为通过捕获环境来生成环境的图像；检测器，配置为基于图像来检测环境中对象的改变；以及简档生成器，配置为基于对象的改变来生成环境简档。图像生成器可包括RGB相机、热相机、深度相机和点云相机中的至少一者。简档生成器可基于环境简档为与环境相关的用户生成推荐。简档生成器可基于检测到对象的改变的时间和对象的改变的类型来生成环境简档。所述装置可进一步包括配置为分析环境的音频信号的音频传感器，其中检测器基于音频信号检测对象的改变。简档生成器可基于图像与用户之间的相关性生成环境简档。对象的改变可包括对于对象的添加、删除、替换、修改、位置的改变中的至少一者。简档生成器可基于对象的改变输出用于用户的推荐、通知和警告中的至少一者。简档生成器可基于对象的改变的频率生成环境简档。简档生成器可基于用户对对象的使用模式来生成环境简档，用户对对象的使用模式基于对象的改变来确定。根据示例性实施例的另一方面，提供了一种用于生成环境简档的方法，所述方法包括：利用至少一个记录设备捕获表示环境的参数；基于参数检测环境中的至少一个对象；以及基于对象来生成指示环境的特性的环境简档。参数可包括对象的点云数据。检测可包括：基于点云数据提取对象的3D外观；以及从对象数据库检索匹配3D外观的对象信息。对象可包括与环境相关的人。生成可包括将所述参数与先前与从环境检测到的旧参数进行比较；基于比较的结果检测环境的改变；以及基于改变分析环境的特性。环境的特性可包括与环境相关的人的行为模式。所述方法可进一步包括基于环境简档输出用于控制环境中存在的至少一个设备的控制信号。附图说本文档来自技高网...

【技术保护点】
一种用于生成环境简档的方法，所述方法包括：通过借助至少一个记录设备捕获环境来生成所述环境的图像；基于所述图像检测所述环境中对象的改变；以及基于所述对象的改变来生成所述环境的环境简档。

【技术特征摘要】
【国外来华专利技术】2014.08.08 IN 2266/DEL/2014;2015.06.03 KR 10-2015-1.一种用于生成环境简档的方法，所述方法包括：通过借助至少一个记录设备捕获环境来生成所述环境的图像；基于所述图像检测所述环境中对象的改变；以及基于所述对象的改变来生成所述环境的环境简档。2.根据权利要求1所述的方法，其中所述至少一个记录设备包括RGB相机、热相机、深度相机和点云相机中的至少一者。3.根据权利要求1所述的方法，还包括：基于所述环境简档为与所述环境相关的用户生成推荐。4.根据权利要求1的方法，其中，所述生成包括：基于检测到所述对象的改变的时间和所述对象的改变的类型来生成所述环境简档。5.根据权利要求1所述的方法，还包括：利用音频传感器来分析所述环境的音频信号，其中所述检测包括基于所述音频信号检测所述对象的改变。6.根据权利要求1所述的方法，其中所述生成包括基于所述图像与用户之间的相关性生成所述环境简档。7.根据权利要求1所述的方法，其中所述对象的改变包括对于对象的添加、删除、替换、修改、位置的改变中的至少一者。8....

【专利技术属性】
技术研发人员：N布加利亚，A塔内加，M简恩，PK卡尔拉，S库马尔，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国,KR