用于提高在装置之间共享屏幕的体验质量的方法和设备制造方法及图纸

本发明专利技术公开了一种用于提高在装置之间共享屏幕的体验质量的方法和设备。一种提高与第二装置共享第一装置的屏幕的第一装置的体验质量（QoE）的方法，所述方法包括：检测当前显示在屏幕上的内容的类别；基于检测到的内容的类别来确定QoE策略；基于确定的QoE策略对屏幕的屏幕图像进行编码；将编码的屏幕图像发送到第二装置。这样，当在多个装置之间共享屏幕时，可以实现针对每个内容类别的最佳QoE。

【技术实现步骤摘要】
用于提高在装置之间共享屏幕的体验质量的方法和设备本申请要求于2013年3月25日提交到美国专利商标局的第61/804，804号美国专利申请的优先权，以及2013年4月9日提交到韩国知识产权局的第10-2013-0038843号韩国专利申请的优先权，其公开通过引用完整地包含于此。
与示例性实施例一致的方法和设备涉及通过网络在多个装置之间共享屏幕数据。
技术介绍
当多个装置共享屏幕时，鉴于网络的状态而确定用于共享屏幕的流的比特率。如果网络为空载(unloaded)，则可传输具有高比特率的流，如果网络被加载(loaded)或者拥挤，则可传输具有低比特率的流。 然而，由于现有技术中的以上方法只考虑网络的状态，因此共享屏幕的屏幕图像可被中断或可被降低分辨率。
技术实现思路
示例性实施例解决了至少以上问题和/或缺点及上面没有讨论的其他缺点。此夕卜，示例性实施例不需要克服上述缺点，示例性实施例可不克服上述任何问题。 一个或更多个实施例提供了一种鉴于当前显示在多个屏幕之间共享的屏幕上的内容的类别，在发送屏幕数据时能够提高体验质量(QoE)的方法和设备。 根据示例性实施例的一方面，提供了一种提高与第二装置共享第一装置的屏幕的第一装置的体验质量(QoE)的方法，所述方法包括:检测当前显示在屏幕上的内容的类别；基于检测到的内容的类别来确定QoE策略；基于确定的QoE策略对屏幕的屏幕图像进行编码；将编码的屏幕图像发送到第二装置。 可通过使用基于确定的QoE策略调整的帧率和分辨率来执行所述编码。 QoE策略可响应于具有大量运动的内容将帧率调整为高。 检测到的内容的类别可以是图形内容、真实图像内容和文本内容之中的至少一个。可基于当前执行的应用的名称来执行所述检测。 确定的步骤可包括:响应于当前正显示在屏幕上的多种内容类别，基于针对多种内容类别预先设置的优先级来选择与具有最高优先级的内容类别对应的Q0E策略。 编码的步骤可包括:基于用于在第一装置和第二装置之间共享屏幕的网络状态来确定允许的比特率；基于确定的比特率来调整用来对屏幕的屏幕图像编码的帧率和分辨率。 根据另一示例性实施例的一方面，提供了一种发送装置，包括:存储器，被配置为存储至少一个程序；处理器，被配置为通过执行至少一个程序来使发送装置能够与接收装置共享发送装置的屏幕，并提高体验质量(QoE)，其中，所述至少一个程序执行如下方法，包括:检测当前显示在屏幕上的内容的类别；基于检测的内容的类别来确定QoE策略；基于确定的QoE策略来对屏幕的屏幕图像进行编码；将编码的屏幕图像发送到接收装置。 可通过使用基于确定的QoE策略调整的帧率和分辨率来执行所述编码。 QoE策略可响应于具有大量运动的内容将帧率调整为高。 检测到的内容的类别可以是图形内容、真实图像内容和文本内容之中的至少一个。可基于当前执行的应用的名称来执行所述检测。 确定的步骤可包括:响应于当前正显示在屏幕上的多种内容类别，基于针对多种内容类别预先设置的优先级来选择与具有最高优先级的内容类别对应的QoE策略。 编码的步骤可包括:基于用于在发送装置和接收装置之间共享屏幕的网络状态来确定允许的比特率；基于确定的比特率来调整用来对屏幕的屏幕图像编码的帧率和分辨率。 根据另一示例性实施例的一方面，提供了一种在其上已实现用于执行提高第一装置的QoE的方法的计算机程序的计算机可读记录介质。 根据另一示例性实施例的一方面，提供了一种发送装置，包括:显示器，被配置为显示屏幕图像；控制器，被配置为确定用于共享屏幕图像的网络状态，确定与当前显示的屏幕图像的内容对应的QoE策略，基于确定的QoE策略和确定的网络状态来确定帧率和帧分辨率，根据确定的帧率和确定的帧分辨率来对屏幕图像进行编码，使用网络将编码的屏幕图像发送到接收装置。 控制器还可被配置为通过确定屏幕图像的内容的类别来确定QoE策略。 控制器还可被配置为通过确定屏幕图像的内容的运动量来确定QoE策略。 控制器还可被配置为通过确定用于发送编码的图像的最大比特率来确定网络状态。 根据另一示例性实施例的一方面，提供了一种当在发送装置和接收装置之间共享屏幕时提高体验质量(QoE)的方法，所述方法包括:确定用于共享屏幕的网络状态；确定与当前显示在发送装置的屏幕上的图像的内容对应的QoE策略；基于确定的QoE策略和确定的网络状态来确定帧率和帧分辨率；根据确定的帧率和确定的帧分辨率来对图像进行编码；使用网络将编码码的屏幕图像发送到接收装置。 确定QoE策略的步骤可包括:确定屏幕图像的内容的类别。 确定QoE策略的步骤还可包括:确定屏幕图像的内容的运动量。 确定网络状态的步骤可包括:确定用于发送编码的图像的最大比特率。 根据另一示例性实施例的一方面，提供了一种在其上已实现由用于执行在共享屏幕时提高QoE的方法的计算机可执行的程序的非暂时性计算机可读记录介质。 【附图说明】 通过结合附图对特定示例性实施例进行的以下描述，以上和/或其他方面将会变得清楚和更易于理解，其中: 图1是用于描述根据示例性实施例的在多个装置之间共享屏幕的概念图； 图2是根据示例性实施例的基于内容的类别来提高体验质量(QoE)的方法的流程图； 图3A和图3B是根据示例性实施例的分别应用了 QoE策略的图形内容和文本内容的示图； 图4A和图4B是根据示例性实施例的应用了 QoE策略的实时图像内容的示图； 图5是根据示例性实施例的检测内容的类别的方法的流程图； 图6是示出根据示例性实施例的基于内容的类别的QoE策略的表格； 图7示出根据示例性实施例的存在多个内容类别的屏幕； 图8是根据示例性实施例的通过分析网络的状态来提高QoE的方法的流程图； 图9是根据示例性实施例的基于内容类别和网络状态来提高QoE的方法的流程图； 图1OA和图1OB是根据另一示例性实施例的应用了 QoE策略的图形内容和文本内容的示图； 图1lA和图1lB是根据另一示例性实施例的应用了 QoE策略的实时图像内容的示图； 图12和图13是根据示例性实施例的用于提高在多个装置之间共享的屏幕的QoE的装置的框图。 【具体实施方式】 现在将参照附图对特定示例性实施例进行更详细的描述。 在以下描述中，即使在不同的附图中，相同的标号始终表示相同的元件。提供在描述中所定义的内容(诸如，详细构造和元件)以帮助对示例性实施例的全面的理解。因此，显然，在没有这些具体定义的内容的情况下，可实施这些示例性实施例。此外，由于公知的功能或构造会在不必要的细节上使示例性实施例不清楚，因此没有对公知的功能或构造进行详细描述。 图1是用于描述根据示例性实施例的在多个装置之间共享屏幕的概念图。在以下描述中，发送装置102是指用于发送共享的屏幕的屏幕图像的装置，接收装置106是指用于接收屏幕图像的装置。例如，装置可被实施为例如个人计算机(PO、智能电话和平板PC。 发送装置102通过网络将当前显示在发送装置102的屏幕上的屏幕图像104发送到接收装置106。例如，如果在发送装置102中正在执行图库应用，则照片的列表可当前被显示为发送装置102的屏幕图像104。如果屏幕被共享本文档来自技高网...

【技术保护点】
一种提高与第二装置共享第一装置的屏幕的第一装置的质量的方法，所述方法包括：检测当前显示在屏幕上的内容的类别；基于检测到的内容的类别来确定质量策略；基于确定的质量策略对屏幕的屏幕图像进行编码；将编码的屏幕图像发送到第二装置。

【技术特征摘要】
2013.04.09 KR 10-2013-0038843;2013.03.25 US 61/8041.一种提高与第二装置共享第一装置的屏幕的第一装置的质量的方法，所述方法包括: 检测当前显示在屏幕上的内容的类别； 基于检测到的内容的类别来确定质量策略； 基于确定的质量策略对屏幕的屏幕图像进行编码； 将编码的屏幕图像发送到第二装置。2.根据权利要求1所述的方法，其中，通过使用基于确定的质量策略调整的帧率和分辨率来执行所述编码。3.根据权利要求2所述的方法，其中，质量策略响应于具有大量运动的内容将帧率调整为高。4.根据权利要求1所述的方法，其中，检测到的内容的类别是图形内容、真实图像内容和文本内容之中的至少一个。5.根据权利要求1所述的方法，其中，基于当前执行的应用的名称来执行所述检测。6.根据权利要求1所述的方法，其中，确定的步骤包括:响应于当前正显示在屏幕上的多个内容类别，基于针 对多个内容类别预先设置的优先级来选择与具有最高优先级的内容类别对应的质量策略。7.根据权利要求1所述的方法，其中，编码的步骤包括: 基于用于在第一装置和第二装置之间共享屏幕的网络状态来确定允许的比特率； 基于确定的比特率来调整用来对屏幕的...

【专利技术属性】
技术研发人员：金容台，金信爱，白允善，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国;KR