传输装置,传输方法和程序制造方法及图纸

技术编号:34944250 阅读:14 留言:0更新日期:2022-09-17 12:19
提供了一种传输装置、传输方法和程序,利用其来传输适当地设置了参考目的地的图像数据并同时抑制网络负载。获取单元(26)顺序获取在帧缓冲器中绘制的帧图像。编码单元(28)对编码单元进行顺序编码并生成图像数据,每个编码单元构成一些或全部帧图像。数据传输单元(30)顺序传输图像数据。在传输图像数据之后,传输失败概率估计单元(38)估计作为图像数据的传输失败的概率的传输失败概率。参照目的地确定单元(42)基于图像数据的传输失败概率,从与传输的图像数据相关的编码单元中确定用作给定编码单元的参照目的地的一个或多个参照目的地。编码单元(28)参考一个或多个参照目的地并对给定编码单元进行编码,从而生成图像数据。从而生成图像数据。从而生成图像数据。

【技术实现步骤摘要】
【国外来华专利技术】传输装置,传输方法和程序


[0001]本专利技术涉及一种传输装置、传输方法和程序。

技术介绍

[0002]在近年来备受关注的云游戏服务技术中,在云服务器中生成描述视频游戏中游戏情况的帧图像。然后,通过编码所述帧图像获得的图像数据从云服务器被传输到终端,然后通过解码所述图像数据获得的帧图像被显示在终端上。重复执行该系列处理,以便在终端上显示描述视频游戏中的游戏情况的运动图像。
[0003]此外,已经存在通过设置参照物以压缩通过编码图像生成的图像数据的大小的技术。例如,通过将帧图像编码到需要参照物的P帧(predictive

frame)而获得的图像数据在大小上小于通过将帧图像编码到不需要参照物的I帧(intra frame)而获得的图像数据。

技术实现思路

[0004][技术问题][0005]由于服务器或网络过载或与服务器或网络的连接不稳定的影响,终端在某些情况下无法接收图像数据,例如,图像数据未到达终端或终端接收到全部或部分损坏的图像数据。
[0006]这里,当终端先前未能接收到作为图像数据的参照物的图像数据时,即使在成功接收需要参照物的图像数据时,终端也无法解码成功接收到的图像数据,其结果是云服务器进行的图像数据的传输被浪费。
[0007]然而,当总是传输不需要参照物的图像数据而不传输那些需要参照物的图像数据来防止这种浪费性的图像数据传输时,传输的图像数据的数据大小很大,其结果是向网络施加了负载。
[0008]注意,这通常不仅适用于提供云游戏服务的情况,而且适用于与上述云服务器相对应的传输装置传输运动图像的情况。
[0009]鉴于上述实际情况作出了本专利技术,其目的是提供一种传输装置、传输方法和程序,以小的网络负载实现具有适当参照物的图像数据的传输。
[0010][问题的解决方案][0011]为了解决上述问题,根据本专利技术,提供了一种传输装置,包括:获取单元,其被配置为顺序获取在帧缓冲器中绘制的帧图像;编码处理单元,其被配置为对编码单元进行顺序编码并生成图像数据,每个所述编码单元对应于所述帧图像之一的部分或全部;传输单元,其被配置为顺序传输所述图像数据;传输失败概率估计单元,其被配置为在所述图像数据的所述传输之后估计传输失败概率,所述传输失败概率是所述图像数据的所述传输的失败的概率;以及参照物确定单元,其被配置为参考所述图像数据的所述传输失败概率,从与传输的所述图像数据相关的所述编码单元中确定用作给定编码单元的参照物的一个或多个参照物,其中,所述编码处理单元通过参考所述一个或所述多个参照物对所述给定编码单
元进行编码,从而生成所述图像数据。
[0012]在本专利技术的一个方面,所述传输失败概率估计单元参考从所述图像数据的所述传输开始到当前时刻所经过的时间来估计所述传输失败概率。
[0013]此外,在本专利技术的一个方面,所述传输失败概率估计单元参考用于所述图像数据的通信路径的有效带宽来估计所述传输失败概率。
[0014]此外,在本专利技术的一个方面,所述传输失败概率估计单元参考尚未接收到相应的确认并且自所述传输以来尚未经过预定的超时时间的已传输的所述图像数据的条数来估计所述传输失败概率。
[0015]此外,在本专利技术的一个方面,所述传输装置还包括:候选保持单元,其被配置为保持与所发送的所述图像数据相关的所述编码单元相对应的多条候选数据,其中,所述参照物确定单元从对应于所述候选数据的所述编码单元中确定所述一个或多个参照物。
[0016]在该方面,所述的传输装置还包括:候选管理单元,其被配置为将所述候选数据保持在所述候选保持单元中,其中,当保持在所述候选保持单元中的所述候选数据的条数达到上限时,所述候选管理单元将新的候选数据保持在所述候选保持单元中,并从所述候选保持单元中删除保持在所述候选保持单元中的一条候选数据。
[0017]此外,所述候选管理单元可以从所述候选保持单元中删除根据比率确定的候选数据,所述比率为进行帧内预测编码的编码单元块的数量和所述编码单元内之一中包括的编码单元块的数量的比率。
[0018]可选地,所述候选管理单元可以从所述候选保持单元中删除候选数据,被删除的候选数据是根据包括所述编码单元的所述帧图像中的每一个是否是紧跟着场景改变后的图像确定的。
[0019]可选地,所述候选管理单元可以从所述候选保持单元删除根据所述编码单元的编码顺序确定的候选数据。
[0020]可选地,所述候选管理单元可以从所述候选保持单元删除根据所述编码单元被参考的顺序确定的候选数据。
[0021]可选地,所述候选管理单元可以执行控制,使得作为所述图像数据的传输目的地的终端将保持作为保持在所述候选保持单元中的所述候选数据的副本的候选数据。
[0022]在该方面,每当保持在所述候选保持单元中的候选数据发生改变时,所述候选管理单元可以向所述终端发送指示所述改变的更新通知,从而使保持在所述终端中的所述候选数据和保持在所述候选保持单元中的所述候选数据彼此同步。
[0023]此外,在本专利技术的一个方面,所述参照物确定单元根据所述图像数据的数据大小的微小程度来确定所述一个或所述多个参照物,所述图像数据是通过参考与所传输的所述图像数据相关的所述编码单元之一并对所述给定编码单元进行编码而生成的。
[0024]此外,根据本专利技术,提供了一种传输方法,包括:获取步骤,顺序获取在帧缓冲器中绘制的帧图像;编码处理步骤,对编码单元进行顺序编码并生成图像数据,每个所述编码单元对应于所述帧图像之一的部分或全部;传输步骤,顺序传输所述图像数据;传输失败概率估计步骤,在所述图像数据的所述传输之后,估计作为所述图像数据的所述传输失败的概率的传输失败概率;和参照物确定步骤,参考所述图像数据的所述传输失败概率,从与传输的所述图像数据相关的所述编码单元中确定用作给定编码单元的参照物的一个或多个参
照物,其中,在所述编码处理步骤中,通过参考所述一个或所述多个参照物对所述给定编码单元进行编码,从而生成所述图像数据。
[0025]此外,根据本专利技术,提供了一种使计算机执行以下操作的程序:获取过程,顺序获取在帧缓冲器中绘制的帧图像;编码处理过程,对编码单元进行顺序编码并生成图像数据,所述每个编码单元对应于所述帧图像之一的部分或全部;传输过程,顺序传输图像数据;传输失败概率估计过程,在所述图像数据的所述传输之后,估计作为所述图像数据的所述传输失败的概率的传输失败概率;和参照物确定过程,参考所述图像数据的所述传输失败概率,从与传输的所述图像数据相关的所述编码单元中确定用作给定编码单元的参照物的一个或多个参照物,其中,在所述编码处理过程中,通过参考所述一个或所述多个参照物对所述给定编码单元进行编码,从而生成所述图像数据。
附图说明
[0026]图1是示出根据本专利技术的实施例的云游戏系统的示例性总体配置的示意图。
[0027]图2是示出示例性候选管理数据的示意图。
[0028]图3是示出示例性统计数据的示意图。本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种传输装置,包括:获取单元,其被配置为顺序获取在帧缓冲器中绘制的帧图像;编码处理单元,其被配置为对编码单元进行顺序编码并生成图像数据,每个所述编码单元对应于所述帧图像之一的部分或全部;传输单元,其被配置为顺序传输所述图像数据;传输失败概率估计单元,其被配置为在所述图像数据的所述传输之后估计传输失败概率,所述传输失败概率是所述图像数据的所述传输的失败的概率;以及参照物确定单元,其被配置为参考所述图像数据的所述传输失败概率,从与传输的所述图像数据相关的所述编码单元中确定用作给定编码单元的参照物的一个或多个参照物,其中,所述编码处理单元通过参考所述一个或所述多个参照物对所述给定编码单元进行编码,从而生成所述图像数据。2.根据权利要求1所述的传输装置,其中所述传输失败概率估计单元参考从所述图像数据的所述传输开始到当前时刻所经过的时间来估计所述传输失败概率。3.根据权利要求1或2所述的传输装置,其中所述传输失败概率估计单元参考用于所述图像数据的通信路径的有效带宽来估计所述传输失败概率。4.根据权利要求1至3中任一权利要求所述的传输装置,其中所述传输失败概率估计单元参考尚未接收到相应的确认并且自所述传输以来尚未经过预定的超时时间的已传输的所述图像数据的条数来估计所述传输失败概率。5.根据权利要求1至4中任一权利要求所述的传输装置,还包括:候选保持单元,其被配置为保持与所传输的所述图像数据相关的所述编码单元相对应的多条候选数据,其中,所述参照物确定单元从对应于所述候选数据的所述编码单元中确定所述一个或多个参照物。6.根据权利要求5所述的传输装置,还包括:候选管理单元,其被配置为将所述候选数据保持在所述候选保持单元中,其中,当保持在所述候选保持单元中的所述候选数据的条数达到上限时,所述候选管理单元将新的候选数据保持在所述候选保持单元中,并从所述候选保持单元中删除保持在所述候选保持单元中的一条候选数据。7.根据权利要求6所述的传输装置,其中所述候选管理单元从所述候选保持单元中删除根据比率确定的候选数据,所述比率为进行帧内预测编码的编码单元块的数量和所述编码单元内之一中包括的编码单元块的数量的比率。8.根据权利要求6或7所述的传输装置,其中,所述候选管理单元从所述候选保持单元中删除候选数据,被删除的候选数据是根据包括所述编码单元的所述帧图像中的每一个是否是紧跟着场景改变后的图像确定的。9.根据权利要求6至8中任一权利要求所述的传输装置,...

【专利技术属性】
技术研发人员:大塚活志
申请(专利权)人:索尼互动娱乐股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1