节目录制方法和装置制造方法及图纸

本申请公开了一种节目录制方法和装置，其中方法包括：对待录制的原始视频数据进行解码；利用预设的深度神经网络模型，基于所述解码后的视频数据，将相应视频的每帧图像划分为用户感兴趣区域和背景区域；按照用户感兴趣区域的编码码率大于背景区域的编码码率的原则，利用编码器对所述解码后的视频数据进行编码，并将编码结果通过视频缓存器写入存储设备；其中，实时地基于所述视频缓存器的缓存状态、所述存储设备的I/O速度以及所述编码器的输出码率，控制所述编码器的输出码率，以使得所述视频缓存器不会发生数据溢出的情况。采用本申请，可以避免超高清节目录制容易失败的问题，且不会影响用户对所录制节目的观看体验。且不会影响用户对所录制节目的观看体验。且不会影响用户对所录制节目的观看体验。

【技术实现步骤摘要】
节目录制方法和装置


[0001]本专利技术涉及音视频处理
，特别是涉及一种节目录制方法和装置。

技术介绍

[0002]随着5G时代的到来，全球主要国家和地区纷纷提出制定了各自的5G推进计划，加速5G商用进程。伴随着我国5G的规模商用、超高清视频产业的不断演进，未来5年将是中国超高清视频产业技术发展和成果转化的战略机遇期，5G将驱动超高清视频产业应用的飞跃提升。5G与超高清视频技术的结合，为未来创造了无限可能。
[0003]超高清视频的定义源自视频画面分辨率在4K及以上，相对于4K而言，8K技术是最贴合人们追求真实世界视觉体验的超高清技术，会成为5G、人工智能(AI)和物联网(IoT)时代的必然选择。8K的分辨率是7680
×
4320，相对于全高清(1920
×
1080)视频被称为1080P，8K也被称为4320P。通常情况下，它被称为超高清8K或者简称8K。8K同步突破高分辨率、高帧率、高色深、宽色域、高动态范围等五个维度技术，能给为观众带来颠覆式、更具感染力和沉浸感的临场体验。
[0004]当前业界对8K的研究重点主要集中在：视频采集、视频编辑、内容编码、内容传输等方面。在内容编码方面，8K内容编码国内AVS3标准在研究进程上有望占据先发优势，我国的AVS3+5G+8K产业有望领先于全球进行部署；在网络传输方面，现有4G和WiFi网络带宽受限、光纤等有线传输移动性不足的情况下，5G将成为超高清视频业务的首选传输通道。
[0005]与此同时，8K视频的高码率给个人视频录像机(Personal Video Recorder，PVR)的节目录制带来了新挑战。现有的节目录制方法通常是由PVR录制单元根据电视节目录制命令，从待录制节目的节目映射表(Program Map Table，PMT)中获得待录制电视节目音频、视频、字幕等数据的所有包识别码(Packet Identifier，PID)，并将所有PID设置在PVR录制单元内，PVR录制单元向其中的解复用器(Demultiplexer,DEMUX)设置该待录制电视节目的各PID，启动录制后，DEMUX会根据待录制节目的各PID将其音频、视频、字幕等数据搬移过滤到电视机存储设备上。
[0006]专利技术人在实现本专利技术的过程中发现：采用现有的节目录制方法录制超高清视频节目时，存在容易录制失败的问题。

技术实现思路

[0007]有鉴于此，本专利技术的主要目的在于提供一种节目录制方法和装置，该方法可以解决超高清节目录制容易失败的问题，且不会影响用户对所录制节目的观看体验。
[0008]为了达到上述目的，本专利技术提出的技术方案为：
[0009]一种节目录制方法，包括：
[0010]对待录制的原始视频数据进行解码；
[0011]利用预设的深度神经网络模型，基于所述解码后的视频数据，将相应视频的每帧图像划分为用户感兴趣区域和背景区域；
[0012]按照用户感兴趣区域的编码码率大于背景区域的编码码率的原则，利用编码器对所述解码后的视频数据进行编码，并将编码结果通过视频缓存器写入存储设备；其中，实时地基于所述视频缓存器的缓存状态、所述存储设备的I/O速度以及所述编码器的输出码率，控制所述编码器的输出码率，以使得所述视频缓存器不会发生数据溢出的情况。
[0013]较佳地，所述利用编码器对所述解码后的视频数据进行编码包括：
[0014]按照用户感兴趣区域的编码码率大于背景区域的编码码率的原则，确定在满足编码器的实际输出码率小于等于当前编码器的目标输出码率的条件下，获得最小编码失真度时所述用户感兴趣区域和所述背景区域各自对应的编码码率；
[0015]对于所述解码后的视频数据中的每个编码数据单元，按照该编码数据单元所属于区域的编码码率进行编码，得到该编码数据单元的编码数据。
[0016]较佳地，所述控制所述编码器的输出码率包括：
[0017]如果当前所述视频缓存器中的数据量大于预设上限阈值，并且所述存储设备的I/O速度低于所述编码器的实际输出码率，则减小所述编码器的目标输出码率；所述上限阈值小于所述视频缓存器的最大存储容量；
[0018]如果当前所述视频缓存器中的数据量小于预设下限阈值，则增大所述编码器的目标输出码率，所述下限阈值小于所述上限阈值。
[0019]较佳地，所述方法进一步包括，在进行所述编码之前，对所述解码后的视频数据进行预处理；所述预处理包括对用户感兴趣区域进行图像增强处理、对背景区域进行降噪处理和/或对背景区域进行磨皮。
[0020]本专利技术实施例还公开了一种节目录制装置，包括：
[0021]解码单元，用于对待录制的原始视频数据进行解码；
[0022]感兴趣区域识别单元，用于利用预设的深度神经网络模型，基于所述解码后的视频数据，将相应视频的每帧图像划分为用户感兴趣区域和背景区域；
[0023]编码单元，用于按照用户感兴趣区域的编码码率大于背景区域的编码码率的原则，利用编码器对所述解码后的视频数据进行编码，并将编码结果通过视频缓存器写入存储设备；其中，实时地基于所述视频缓存器的缓存状态、所述存储设备的I/O速度以及所述编码器的输出码率，控制所述编码器的输出码率，以使得所述视频缓存器不会发生数据溢出的情况。
[0024]较佳地，所述编码单元，具体用于利用编码器对所述解码后的视频数据进行编码，包括：
[0025]按照用户感兴趣区域的编码码率大于背景区域的编码码率的原则，确定在满足编码器的实际输出码率小于等于当前编码器的目标输出码率的条件下，获得最小编码失真度时所述用户感兴趣区域和所述背景区域各自对应的编码码率；
[0026]对于所述解码后的视频数据中的每个编码数据单元，按照该编码数据单元所属于区域的编码码率进行编码，得到该编码数据单元的编码数据。
[0027]较佳地，所述编码单元，具体用于控制所述编码器的输出码率，包括：
[0028]如果当前所述视频缓存器中的数据量大于预设上限阈值，并且所述存储设备的I/O速度低于所述编码器的实际输出码率，则减小所述编码器的目标输出码率；所述上限阈值小于所述视频缓存器的最大存储容量；
[0029]如果当前所述视频缓存器中的数据量小于预设下限阈值，则增大所述编码器的目标输出码率，所述下限阈值小于所述上限阈值。
[0030]较佳地，所述编码单元，进一步用于在进行所述编码之前，对所述解码后的视频数据进行预处理；所述预处理包括对用户感兴趣区域进行图像增强处理、对背景区域进行降噪处理和/或对背景区域进行磨皮。
[0031]本专利技术实施例还公开了一种节目录制电子设备，包括处理器和存储器；
[0032]所述存储器中存储有可被所述处理器执行的应用程序，用于使得所述处理器执行如上所述的节目录制方法。
[0033]本专利技术实施例还公开了一种计算机可读存储介质，其中存储有计算机可读指令，该计算机可读指令用于执行如上所述的节目录制方法。本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种节目录制方法，其特征在于，包括：对待录制的原始视频数据进行解码；利用预设的深度神经网络模型，基于所述解码后的视频数据，将相应视频的每帧图像划分为用户感兴趣区域和背景区域；按照用户感兴趣区域的编码码率大于背景区域的编码码率的原则，利用编码器对所述解码后的视频数据进行编码，并将编码结果通过视频缓存器写入存储设备；其中，实时地基于所述视频缓存器的缓存状态、所述存储设备的I/O速度以及所述编码器的输出码率，控制所述编码器的输出码率，以使得所述视频缓存器不会发生数据溢出的情况。2.根据权利要求1所述的方法，其特征在于，所述利用编码器对所述解码后的视频数据进行编码包括：按照用户感兴趣区域的编码码率大于背景区域的编码码率的原则，确定在满足编码器的实际输出码率小于等于当前编码器的目标输出码率的条件下，获得最小编码失真度时所述用户感兴趣区域和所述背景区域各自对应的编码码率；对于所述解码后的视频数据中的每个编码数据单元，按照该编码数据单元所属于区域的编码码率进行编码，得到该编码数据单元的编码数据。3.根据权利要求1所述的方法，其特征在于，所述控制所述编码器的输出码率包括：如果当前所述视频缓存器中的数据量大于预设上限阈值，并且所述存储设备的I/O速度低于所述编码器的实际输出码率，则减小所述编码器的目标输出码率；所述上限阈值小于所述视频缓存器的最大存储容量；如果当前所述视频缓存器中的数据量小于预设下限阈值，则增大所述编码器的目标输出码率，所述下限阈值小于所述上限阈值。4.根据权利要求1所述的方法，其特征在于，所述方法进一步包括，在进行所述编码之前，对所述解码后的视频数据进行预处理；所述预处理包括对用户感兴趣区域进行图像增强处理、对背景区域进行降噪处理和/或对背景区域进行磨皮。5.一种节目录制装置，其特征在于，包括：解码单元，用于对待录制的原始视频数据进行解码；感兴趣区域识别单元，用于利用预设的深度神经网络模型，基于所述解码后的视频数据，将相应视频的每帧图像划分为用户感兴趣区域和背景区域；...

【专利技术属性】
技术研发人员：黄巍，陈祥虎，张勇，吴俊恒，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：