图像记录装置、场景转换提取方法及图像语音记录装置制造方法及图纸

提供一种可以与图像的记录并行地进行图像的场景转换提取的图像记录装置和场景转换提取方法。图像记录装置（１００）具有：对图像数据ＰＩＮ进行编码的编码器（１０１）；记录从编码器（１０１）输出的编码流的ＨＤＤ（１０５）；把从编码器（１０１）输出的编码流转送给ＨＤＤ（１０５）的流控制部（１０３）；场景转换提取部（１１０），对从编码器（１０１）输出的编码流进行解码，提取被解码的图像数据的场景转换；以及录制控制部（１０２），从编码器（１０１）按照编码流的编码单位获取编码结束通知Ｉ↓［ＥＮ］，并输出针对场景转换提取部（１１０）的场景转换提取指示Ｃ↓［ＳＣ］。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及一种可以与图像的记录并行地检测图像的场景转换(Scene Change)的图像记录装置、及通过该图像记录装置实施的场景转 换提取方法。并且，本专利技术涉及一种可以与电视广播节目的录制并行地 进行广告消息(Commercial Message)广播的检测的图像语音记录装置， 该广告消息被夹在将要录制的电视广播节目的本体之间。
技术介绍
以往，在对图像进行编码并记录的图像记录装置中，为了从所记录 的图像中寻找所期望的图像场景， 一面利用快进或回放等特殊再现，一 面依靠人的眼睛寻找相应的场景，需要花费非常多的时间和精力。为了消除这种问题，提出了用于发现图像的场面转换场景(以后称 为场景转换)的方法(例如参照专利文献1和2)。专利文献1披露的 方法如下在进行编码的编码器前级的预图像信号处理装置中，计算时 间上的前后两个图像的直方图之差的绝对值，在所计算的绝对值超过预 定阈值时判定为场景转换。并且，专利文献2披露的方法如下读出已 经存储在HDD等存储介质中的图像数据并提取场景转换。并且，电视广播可以根据其内容分为节目本体广播和广告消息广 播。节目本体广播是在电影节目中基于电影的内容自身的图像语音数据 的广播部分。另一方面，广告消息广播指在广告主和广告代理商等委托 方与广播台签订合同的情况下，基于接受委托方提供的图像语音数据的 广播部分，其在节目本体广播的空闲时间被广播。并且，广告消息广播 也包含广播台进行自家的广告宣传用的广播。在本申请中，把节目本体 广播表述为节目本体，把'广告消息广播表述为CM广播。节目本 体和CM广播的内容关联性较小的情况居多，对于想要集中视听节目本体的视听者而言，在录制或视听电视广播时，有想要高效地删除或跳过 CM广播的要求。以往的图像语音记录装置检测电视广播的语音方式，根据所检测的语音方式进行节目本体和CM广播的识别。节目本体的语音方式多是单 声道(monaural)语音或两国语言语音(外语节目中的日语和英语等)， 一般CM广播的语音方式多是立体声语音。利用这种差异，将检测到立 体声语音的区间判别为CM广播区间，在录制时不进行(即删除)CM广 播区间的录制、或者在视听时进行跳过(即略过)CM广播区间的处理。 上述以往的CM检测方式在节目本体的语音方式为与CM广播的语 音方式相同的立体声语音时不发挥作用。作为其改善对策提出如下方案: 检测在节目本体和CM广播的交界处插入的被称为黑色帧的全黑画面 的帧图像来确定CM广播区间(例如参照专利文献3)。并且，还提出如 下方案检测在节目本体和CM广播的交界处产生的无音区间，根据所 检测的无音区间的出现间隔来确定CM广播区间(例如参照专利文献4)。 另外，还提出如下方案利用图像的场景转换的产生频次来提取CM广 播(例如参照专利文献5)。此外还有如下方案提供视听时通过用户的 按钮操作跳过(即略过)15秒等固定时间的用户接口。专利文献l:日本特开2004—282318号公报(第7页，图2) 专利文献2:日本特开2002—064823号公报(第5页，图l) 专利文献3:日本特表平8 — 507633号公报(第12-15页，图l) 专利文献4:日本特开2003—47031号公报(第5-8页，图l) 专利文献5:日本特开2000 — 165796号公报(第7页，图14) 但是，专利文献1披露的方法利用设于编码器前级的预图像信号处 理装置检测场景转换，所以不能适用于从视频编码器到编码器的结构为 一体的编码器芯片组，即不能适用于具有不向外部输出场景转换提取结 果的单元的图像记录装置。并且，即便在编码器芯片组输出场景转换提 取结果时，由于每当使用的编码器芯片组的类型变化时场景转换提取结 果都将变化，所以存在每当编码器芯片组的类型变化时都需要调整图像 记录装置的问题。并且，专利文献2披露的方法是根据已经被压縮记录在HDD上的图 像流来检测场景转换的方法，所以在记录处理结束后，需要离线进行花 费很多时间的处理，因此不实用。并且，在检测黑色帧来确定CM广播区间的专利文献3记载的方法 中，由于根据国家和地区或广播台有时不能插入黑色帧(实际上在国内 广播中黑色帧的插入不能通过法令义务化)，所以存在不能充分提高CM 广播区间的自动检测的可靠度的问题。并且，在专利文献4或5记载的方法中，由于在节目本体中还存在 多个无音区间和场景转换，所以存在难以高精度地确定CM广播区间的 问题。另外，在通过用户的按钮操作使之略过15秒的方法中，存在不能对 应具有非15秒的倍数序列的既定时间长度之外的时间长度(例如5秒的 节目插播宣传等)的CM广播的问题。
技术实现思路
本专利技术正是为了解决上述现有技术的问题而提出的，其目的在于， 提供一种可以与图像的记录并行地进行图像的场景转换提取的图像记录 装置、以及在该图像记录装置中实施的场景转换提取方法。并且，本发 明的其他目的在于，提供一种可以与电视广播节目的记录并行地提取CM 广播区间的图像语音记录装置。本专利技术的图像记录装置的特征在于，所述图像记录装置具有编码 单元，其对图像数据进行编码；记录单元，其记录从所述编码单元输出 的编码流；流控制单元，其把从所述编码单元输出的编码流转送给所述 记录单元；图像变化点提取单元，其对从所述编码单元输出的编码流进 行解码，提取该解码后的图像数据的场景转换；以及录制控制单元，其 从所述编码单元按照编码流的编码单位获取编码结束通知，在获取了该 编码结束通知时，输出针对所述图像变化点提取单元的场景转换提取指不。并且，本专利技术的场景转换提取方法的特征在于，所述场景转换提取方法包括通过编码单元对图像数据进行编码并输出编码流的步骤；通 过流控制单元转送所述编码流并记录到记录单元中的步骤；通过录制控 制单元从所述编码单元按照编码流的编码单位获取编码结束通知，在获 取了该编码结束通知时，输出针对图像变化点提取单元的场景转换提取 指示的步骤；以及通过所述图像变化点提取单元对从所述编码单元输出的编码流进行解码，并提取该解码后的图像数据的场景转换的步骤。 本专利技术的图像语音记录装置的特征在于，所述图像语音记录装置具有编码单元，其对所输入的图像数据和语音数据进行编码并输出编码 流；记录单元，其记录从所述编码单元输出的编码流；图像变化点检测 单元，其对从所述编码单元输出的编码流进行解码，并根据该解码后的 数据来检测图像的场景转换；无音检测单元，其根据所输入的语音数据 来检测无音区间；转移点检测单元，其检测通过所述图像变化点检测单 元检测到的场景转换和通过所述无音检测单元检测到的无音区间同时发 生的转移点；CM广播区间判定单元，其把通过所述转移点检测单元检测 到的转移点的间隔在以预先设定的基准时间为中心的预定时间范围内的 转移点的组合连续持续两个以上的区间，判定为CM广播区间；以及CM 广播区间信息记录单元，其记录通过所述CM广播区间判定单元判定出 的CM广播区间的时刻信息。根据本专利技术的图像记录装置和场景转换提取方法，每当图像被编码 时进行场景转换提取处理，所以具有能够实时地进行场景转换的提取的 效果。根据本专利技术的图像语音记录装置，与广播节目的记录并行地执行CM 广播区间检测处理，所以具有能够实时地进行CM广播区间检测的效果。附图说本文档来自技高网...

【技术保护点】
一种图像记录装置，其特征在于，所述图像记录装置具有：　　　　编码单元，其对图像数据进行编码并输出编码流；　　　　记录单元，其记录从所述编码单元输出的编码流；　　　　流控制单元，其把从所述编码单元输出的编码流转送给所述记录单元；　　　　图像变化点提取单元，其对从所述编码单元输出的编码流进行解码，提取该解码后的图像数据的场景转换；以及　　　　录制控制单元，其从所述编码单元按照编码流的编码单位获取编码结束通知，在获取了该编码结束通知时，输出针对所述图像变化点提取单元的场景转换提取指示。

【技术特征摘要】
【国外来华专利技术】JP 2005-8-11 232957/2005;JP 2005-8-11 232948/20051.一种图像记录装置，其特征在于，所述图像记录装置具有编码单元，其对图像数据进行编码并输出编码流；记录单元，其记录从所述编码单元输出的编码流；流控制单元，其把从所述编码单元输出的编码流转送给所述记录单元；图像变化点提取单元，其对从所述编码单元输出的编码流进行解码，提取该解码后的图像数据的场景转换；以及录制控制单元，其从所述编码单元按照编码流的编码单位获取编码结束通知，在获取了该编码结束通知时，输出针对所述图像变化点提取单元的场景转换提取指示。2. 根据权利要求l所述的图像记录装置，其特征在于， 所述图像变化点提取单元具有解码单元，其对从所述编码单元输出的编码流进行解码；直方图生成单元，其生成所述解码后的图像数据的直方图；第1直方图缓冲器和第2直方图缓冲器，其按照预定的像素数交替 保持所述生成的直方图；差值提取单元，其求出保持在所述第1直方图缓冲器中的直方图和 保持在所述第2直方图缓冲器中的直方图的差异值；场景转换判定单元，其比较通过所述差值提取单元求出的差异值和 预先设定的阈值；以及场景转换命令控制单元，其根据来自所述录制控制单元的场景转换 提取指示，控制所述图像变化点提取单元。3. 根据权利要求1所述的图像记录装置，其特征在于， 所述图像记录装置还具有临时存储单元，所述临时存储单元的数据写入速度和数据读出速度比所述记录单元快，所述临时存储单元临时存 储被输入到所述流控制单元的编码流，针对从所述临时存储单元读出的编码流，由所述图像变化点提取单元提取场景转换。4. 根据权利要求l所述的图像记录装置，其特征在于，每当从所述编码单元输出一个或多个GOP的编码流时，从所述编码单元发送编码结束通知。5. 根据权利要求l所述的图像记录装置，其特征在于，每当从所述编码单元输出一个或多个片的编码流时，从所述编码单元发送编码结束通知。6. 根据权利要求l所述的图像记录装置，其特征在于，每当从所述 编码单元输出一个或多个宏块的编码流时，从所述编码单元发送编码结 束通知。7. 根据权利要求l所述的图像记录装置，其特征在于，与从所述录 制控制单元接收场景转换提取指示同步地，由所述图像变化点提取单元 进行场景转换提取动作。8. 根据权利要求i所述的图像记录装置，其特征在于， 所述图像变化点提取单元具有控制命令保持单元，所述控制命令保持单元临时保持来自所述录制控制单元的场景转换提取指示，根据从所述控制命令保持单元输出的场景转换提取指示，在与从所 述录制控制单元接收场景转换提取指示不同步的定时，由所述图像变化 点提取单元进行场景转换提取动作。9. 根据权利要求8所述的图像记录装置，其特征在于，所述控制命 令保持单元多次保持所述场景转换提取指示，每当预定编码单位的场景 转换提取结束时，进行与所述场景转换提取指示对应的处理。10. 根据权利要求l所述的图像记录装置，其特征在于， 所述编码单元使用DCT压縮图像数据，所述图像变化点提取单元在所述解码时，根据编码流的像素尺寸来 控制编码流的DCT系数的解码次数。11. 根据权利要求10所述的图像记录装置，其特征在于，所述图像 变化点提取单元根据编码流的像素尺寸来控制编码流的解码片。12. 根据权利要求2所述的图像记录装置，其特征在于，所述直方图生成单元判定所述直方图的分布是否适合于所指定的颜色分布，在判 定是所指定的颜色分布时，把所指定的颜色分布之外的直方图输出给所 述第1直方图缓冲器和所述第2直方图缓冲器。13. —种场景转换提取方法，其特征在于，所述场景转换提取方法 包括通过编码单元对图像数据进行编码并输出编码流的步骤； 通过流控制单元转送所述编码流并记录到记录单元中的步骤；通过录制控制单元从所述编码单元按照编码流的编码单位获取编码 结束通知，在获取了该编码结束通知时，输出针对图像变化点提取单元的场景转换提取指示的步骤；以及通过所述图像变化点提取单元对从所述编码单元输出的编码流进行 解码，并提取该解码后的图像数据的场景转换的步骤。14. 根据权利要求13所述的场景转换提取方法，其特征在于， 所述提取场景转换的步骤包括对从所述编码单元输出的编码流进行解码的步骤；生成所述解码后的图像数据的直方图的步骤；按照预定的像素数将所述生成的直方图交替保持到第1直方图缓冲 器和第2直方图缓冲器中的步骤；求出保持在所述第1直方图缓冲器中的直方图和保持在所述第2直 方图缓冲器中的直方图的差异值的步骤；比较所述求出的差异值和预先设定的阈值的步骤；以及根据来自所述录制控制单元的场景转换提取指示，控制所述图像变 化点提取单元的步骤。15. 根据权利要求13所述的场景转换提取方法，其特征在于， 所述场景转换提取方法还包括在数据写入速度和数据读出速度比所述记录单元快的临时存储单元中临时存储被输入到所述流控制单元的编 码流的步骤，针对从所述临时存储单元读出的编码流，由所述图像变化点提取单 元提取场景转换。16. 根据权利要求13所述的场景转换提取方法，其特征在于，每当 从所述编码单元输出一个或多个GOP的编码流时，从所述编码单元发送 编码结束通知。17. 根据权利要求13所述的场景转换提取方法，其特征在于，每当 从所述编码单元输出一个或多个片的编码流时，从所述编码单元发送编 码结束通知。18. 根据权利要求13所述的场景转换提取方法，其特征在于，每当 从所述编码单元输出一个或多个宏块的编码流时，从所述编码单元发送 编码结束通知。19. 根据权利要求13所述的场景转换提取方法，其特征在于，与从 所述录制控制单元接收场景转换提取指示同步地，由所述图像变化点提 取单元进行场景转换提取动作。20. 根据权利要求13所述的场景转换提取方法，其特征在于， 所述场景转换提取方法还包括使控制命令保持单元临时保持来自所述录制控制单元的场景转换提取指示的步骤，根据从所述控制命令保持单...

【专利技术属性】
技术研发人员：楠惠明，大塚功，
申请(专利权)人：三菱电机株式会社，
类型：发明
国别省市：JP[日本]