内容辨识装置、内容辨识方法以及记录介质制造方法及图纸

本发明专利技术提供一种内容辨识装置以及内容辨识方法，既能提高影像内容的辨识精度又能降低影像内容的辨识所涉及的处理。该辨识数据生成装置具备指纹生成部、筛选部和核对部。指纹生成部针对获取到的多个影像内容候选来分别生成指纹。筛选部利用从外部输入的辨识数据所含的附属信息来筛选影像内容候选。核对部核对由筛选部筛选出的影像内容候选的指纹和辨识数据所含的指纹，从影像内容候选之中确定与辨识数据所含的指纹对应的影像内容。

Content identification device and content identification method

The invention provides a content identification device and a content identification method, which can improve the recognition accuracy of the image content and reduce the processing of the recognition of the image content. The identification data generating device is provided with a fingerprint generating part, a screening part and a checking part. A fingerprint generating section generates a fingerprint for each of the plurality of image content candidates. The screening unit selects the candidate for the image content using the information contained in the input data from the outside. The checking part checks the fingerprint of the image content selected by the screening department and the fingerprint contained in the identification data, and determines the image content corresponding to the fingerprint contained in the identification data from the image content candidate.

【技术实现步骤摘要】
【国外来华专利技术】
本公开涉及对影像内容进行辨识的内容辨识装置以及内容辨识方法。
技术介绍
已提出利用经由云来辨识内容的技术的通信服务的方案。若利用该技术，则能够实现对所输入的影像进行辨识并经由通信网络获取与该影像关联的附加信息、将获取到的附加信息与影像内容一起显示于显示画面的电视接收装置(以下简记为“电视机”)。对所输入的影像进行辨识的技术被称作“ACR(Automatic Content Recognition：自动内容识别)”。ACR有时利用指纹技术。专利文献1以及专利文献2公开了指纹技术。在该技术中，探测映在影像内的图像帧中的面部等的轮廓，基于探测到的轮廓来生成指纹，将所生成的指纹与数据库中蓄积的数据进行核对。在先技术文献专利文献专利文献1：美国专利申请公开第2010/0318515号说明书专利文献2：美国专利申请公开第2008/0310731号说明书
技术实现思路
本公开提供既能提高影像内容的辨识精度又能降低影像内容的辨识所涉及的处理的内容辨识装置以及内容辨识方法。本公开中的内容辨识装置具备指纹生成部、筛选部和核对部。指纹生成部针对获取到的多个影像内容候选来分别生成指纹。筛选部利用从外部输入的辨识数据所含的附属信息来筛选影像内容候选。核对部核对由筛选部筛选出的影像内容候选的指纹和辨识数据所含的指纹，从影像内容候选之中确定与辨识数据所含的指纹对应的影像内容。本公开中的内容辨识装置既能提高影像内容的辨识精度又能降低影像内容的辨识所涉及的处理。附图说明图1是表示实施方式1中的内容辨识系统的一构成例的框图。图2是表示实施方式1中的接收装置的一构成例的框图。图3是示意性地表示实施方式1中的接收装置所发送的辨识数据的一例的图。图4是示意性地表示实施方式1中的指纹数据库所保存的辨识数据的一例的图。图5是示意性地表示实施方式1中的影像提取部所提取的各帧速率的图像帧和静态区域的关系的一例的图。图6是示意性地表示实施方式1中的影像提取部所提取的各帧速率的图像帧和动态区域的关系的一例的图。图7是表示实施方式1中的指纹生成部的一构成例的框图。图8是表示实施方式1中的内容辨识系统所具备的内容辨识装置的一动作例的流程图。图9是表示实施方式1中的生成辨识数据时的处理的一例的流程图。图10是示意性地表示实施方式1中的辨识数据的生成处理过程之中的图像帧的变化的一例的图。图11是表示实施方式1中的图像帧间的变化量的计算处理的一例的流程图。图12是示意性地表示实施方式1中的图像帧的缩减变换处理的一例的图。图13是示意性地表示实施方式1中的图像帧间的变化量的计算处理的一例的图。图14是表示实施方式1中的静态指纹的生成处理的一例的流程图。图15是示意性地表示实施方式1中的基于图像帧间的变化量而生成的静态指纹的一例的图。图16是表示实施方式1中的动态指纹的生成处理的一例的流程图。图17是示意性地表示实施方式1中的未生成动态指纹的图像帧的一例的图。图18是示意性地表示实施方式1中的基于图像帧间的变化量而生成的动态指纹的一例的图。图19是表示实施方式1中的指纹过滤部所执行的过滤处理的一例的流程图。图20是表示实施方式1中的指纹过滤部所执行的属性过滤处理的一例的流程图。图21是示意性地表示实施方式1中的指纹过滤部所执行的属性过滤处理的一具体例的图。图22是表示实施方式1中的指纹过滤部所执行的属性序列过滤处理的一例的流程图。图23是示意性地表示实施方式1中的指纹过滤部所执行的属性序列过滤处理的一具体例的图。图24是表示实施方式1中的辨识数据的核对处理的一例的流程图。图25是示意性地表示实施方式1中的静态指纹的核对处理的一例的图。图26是示意性地表示实施方式1中的动态指纹的核对处理的一例的图。图27是表示实施方式1中的影像内容的辨识条件的一例的图。图28是示意性地表示实施方式1中的影像内容的核对处理的一例的图。图29是用于说明关于影像内容的辨识而成为问题的点的图。具体实施方式以下，适当参照附图来详细说明实施方式。不过，存在省略必要以上的详细说明的情况。例如，存在省略已经熟知的事项的详细说明以及对于实质上相同的构成的重复说明等的情况。这是为了避免以下的说明变得不必要的冗余，使得本领域的技术人员易于理解。另外，所附的附图以及以下的说明是为使本领域的技术人员充分理解本公开而提供的，并非根据这些内容来限定要求保护的范围所记载的主题。此外，各图只是示意图，不一定是严格意义上图示出的图。此外，在各图中，对于相同的构成要素赋予相同的符号。(实施方式1)[1-1.内容辨识系统]首先，利用图1来说明本实施方式中的内容辨识系统。图1是表示实施方式1中的内容辨识系统1的一构成例的框图。如图1所示，内容辨识系统1具备：广播站2、STB(Set Top Box：机顶盒)3、接收装置10、内容辨识装置20和广告服务器装置30。广播站2是构成为将影像内容变换为影像信号并作为电视广播信号(以下，仅记为“广播信号”)进行广播的发送装置。影像内容例如是通过无线或有线的广播或通信而被广播的广播内容，包含电视节目等节目内容、和商用消息(CM)等广告用的影像内容(以下，记为“广告内容”)。节目内容和广告内容伴随着时间的经过而相互切换。广播站2向STB3以及内容辨识装置20发送影像内容。例如，广播站2通过广播而向STB3发送影像内容，并且通过通信而向内容辨识装置20发送影像内容。STB3是构成为接收从广播站2广播的广播信号并输出基于接收到的广播信号的影像信号等的调谐器/解码器。STB3从由广播站2广播的广播信号之中，接收基于用户的指示而选台的广播频道。然后，对接收到的广播频道的影像内容进行解码，将解码出的影像内容经由通信路径而输出至接收装置10。另外，通信路径例如是HDMI(注册商标)(High-Definition Multimedia Interface：高清晰度多媒体接口)等。接收装置10例如是电视机等影像接收装置。接收装置10经由通信网络105而与内容辨识装置20以及广告服务器装置30连接。接收装置10从接收到的影像内容的帧序列之中提取多个图像帧，基于提取出的图像帧来生成辨识数据。接收装置10将所生成的辨识数据发送至内容辨识装置20，从内容辨识装置20接收影像内容的辨识结果。接收装置10基于影像内容的辨识结果而从广告服务器装置30获取附加信息，将获取到的附加信息与影像内容一起实质上实时地显示于显示画面。另外，辨识数据例如是表征影像内容的数据，是用于影像内容的辨识(例如ACR)的数据。具体而言，辨识数据包含基于图像帧间的图像的变化而生成的指纹(哈希值)。此外，图像帧是构成影像内容的图片。在图像帧中包含逐行扫描方式下的帧、隔行扫描方式下的场等。内容辨识装置20例如是服务器装置。内容辨识装置20根据所输入的多个影像内容来生成各个辨识数据，通过核对从这些辨识数据之中筛选出的辨识数据和从接收装置10发送的辨识数据，由此来执行影像内容的辨识处理。以下，将影像内容的辨识处理也记为“图像辨识处理”或“图像辨识”。若该核对成功，则内容辨识装置20从这多个影像内容之中选择一个影像内容来作为图像辨识的结果。即，这多个影像内容分别是有可能作为与从接收装置10发送的辨识数据对应的影像内容而被选择的影像内容的本文档来自技高网...

【技术保护点】
一种内容辨识装置，具备：指纹生成部，针对获取到的多个影像内容候选来分别生成指纹；筛选部，利用从外部输入的辨识数据所含的附属信息来筛选所述影像内容候选；和核对部，核对由所述筛选部筛选出的所述影像内容候选的指纹和所述辨识数据所含的指纹，从所述影像内容候选之中确定与所述辨识数据所含的指纹对应的影像内容。

【技术特征摘要】
【国外来华专利技术】2014.08.21 JP 2014-1687091.一种内容辨识装置，具备：指纹生成部，针对获取到的多个影像内容候选来分别生成指纹；筛选部，利用从外部输入的辨识数据所含的附属信息来筛选所述影像内容候选；和核对部，核对由所述筛选部筛选出的所述影像内容候选的指纹和所述辨识数据所含的指纹，从所述影像内容候选之中确定与所述辨识数据所含的指纹对应的影像内容。2.根据权利要求1所述的内容辨识装置，其中，所述指纹至少被分类为静态指纹和动态指纹这两个种类，在所述辨识数据中包含表示所述指纹的种类的类别信息来作为所述附属信息，所述筛选部比较所述辨识数据所含的所述类别信息和所述影像内容候选的指纹的种类来进行所述影像内容候选的筛选。3.根据权利要求2所述的内容辨识装置，其中，所述筛选部比较所述辨识数据所含的所述类别信息的排列顺序和与所述影像内容候选的指纹的种类有关的排列顺序来进行所述影像内容候选的筛选。4.根据权利要求2所述的内容辨识装置，其中，在所述辨识数据中包含表示所述辨识数据所含的指纹的生成时刻的信息，所述筛选部基于表示所述生成时刻的信息和所述影像内容候选的指纹的生成时刻来进行所述影像内容候选的指纹的选择。5.根据权利...

【专利技术属性】
技术研发人员：薮博史，
申请(专利权)人：松下知识产权经营株式会社，
类型：发明
国别省市：日本;JP