应用MOS模型的训练方法、设备及系统技术方案

本申请实施例提供应用MOS模型的训练方法、设备及系统，用于解决现有的业务的MOS模型的训练方法需要依赖AF实体的能力和AF实体的配合，在现网中难以实施的问题。方法包括：中心网络数据分析功能C-NWDAF实体向边缘网络数据分析功能E-NWDAF实体发送第一订阅请求，所述第一订阅请求用于请求订阅目标业务的业务质量MOS等级和对应的第一网络性能指标，所述第一网络性能指标为承载所述目标业务的网络传输的网络性能指标；C-NWDAF实体从E-NWDAF实体接收所述业务质量MOS等级和所述第一网络性能指标，并根据所述业务质量MOS等级和所述第一网络性能指标，建立所述目标业务的MOS模型。建立所述目标业务的MOS模型。建立所述目标业务的MOS模型。

【技术实现步骤摘要】
应用MOS模型的训练方法、设备及系统


[0001]本申请涉及通信
，尤其涉及应用平均意见得分(mean opinion score，MOS)模型的训练方法、设备及系统。

技术介绍

[0002]第三代合作伙伴计划(3rd generation partnership project，3GPP)23.791中对网络数据分析功能(network data analytics function，NWDAF)的定位如图1所示。具体的，NWDAF可以从第五代核心网(5rd generation core，5GC)网络功能(network functions，NFs)、应用功能(application functions，AFs)以及运营商网络的操作维护系统(operation，administration，and maintenance，OAM)订阅基础数据，然后对订阅的基础数据按照场景进行分析之后，将分析结果反馈给NF和AF执行后续的处理。
[0003]针对业务体验保障场景，在3GPP 23.288 6.4被观测到的业务体验相关的网络数据分析(observed service experience related network data analytics)中定义了NWDAF如何从NF和AF订阅数据并实现指定业务的MOS模型的建立过程。具体的，NWDAF实体从AF实体订阅指定业务的业务质量MOS等级，NWDAF实体从5GC NFs实体订阅承载本次业务的网络传输的网络性能指标，进而NWDAF实体根据从AF实体订阅的业务质量MOS等级、以及从5GC NFs实体订阅的网络传输的网络性能指标，建立指定业务的MOS模型(即业务质量MOS等级与网络传输的网络性能指标的数学关系)。
[0004]然而，由于上述业务的MOS模型的建立方法中，网络传输的网络性能指标和业务质量MOS等级需要分别从5GC NFs实体和AF实体订阅，因此要实现测量同步，需要依赖5GC NFs实体和AF实体的能力和配合，这在现网中难以实施。

技术实现思路

[0005]本申请实施例提供应用MOS模型的训练方法、设备及系统，用于解决现有的业务的MOS模型的训练方法需要依赖AF实体的能力和AF实体的配合，在现网中难以实施的问题。
[0006]为达到上述目的，本申请的实施例采用如下技术方案：
[0007]第一方面，提供一种应用平均意见得分MOS模型的训练方法，该方法包括：中心网络数据分析功能(center NWDAF，C-NWDAF)实体向边缘网络数据分析功能(edge NWDAF，E-NWDAF)实体发送第一订阅请求，该第一订阅请求用于请求订阅目标业务的业务质量MOS等级和对应的第一网络性能指标，该第一网络性能指标为承载该目标业务的网络传输的网络性能指标；C-NWDAF实体从该E-NWDAF实体接收该业务质量MOS等级和该第一网络性能指标；C-NWDAF实体根据该业务质量MOS等级和该第一网络性能指标，建立该目标业务的MOS模型。其中，本申请实施例中，业务质量MOS等级是在一次业务过程中，通过仪器、工具等手段测量业务过程中的业务质量关键指标，然后对关键指标的测量结果通过体验模型给出的本次业务的综合得分，也可以称之为业务体验质量评分。例如，可以采用5分值，给出业务质量评价分数为1分、2分、3分、4分或5分。此外，本申请实施例中，建立该目标业务的MOS模型是指建
立目标业务的业务质量MOS等级与网络性能指标的数学关系，在此统一说明，以下不再赘述。基于本申请实施例提供的应用MOS模型的训练方法，由于本申请实施例中，运营商部署分布式NWDAF实体，包括C-NWDAF实体和E-NWDAF实体，C-NWDAF实体可以从E-NWDAF实体订阅目标业务的业务质量MOS等级和对应的第一网络性能指标，由E-NWDAF实体同步测量得到目标业务的业务质量MOS等级和对应的第一网络性能指标。也就是说，在运营商内部获取目标业务的业务质量MOS等级和对应的第一网络性能指标，因此更容易实施，测量结果也更为准确。
[0008]在一种可能的设计中，该业务质量MOS等级是根据该目标业务的业务体验数据确定的。示例性的，在该目标业务为视频业务的情况下，该业务体验数据包括以下参数中的一个或多个：视频业务的初始缓冲时延、播放缓冲时长、码率、业务速率、帧率、流畅度、清晰度；以及，终端设备的分辨率。其中，本申请实施例中的视频业务的码率是指数据传输时，单位时间传送的数据位数，一般单位是千位每秒(kbps)。视频业务的帧率是用于测量显示帧数的量度，测量单位为每秒显示帧数((frames per second，FPS)或赫兹(Hz)。终端设备的分辨率包括显示分辨率和图像分辨率，显示分辨率也可以称之为屏幕分辨率，是指显示器所能显示的像素有多少；图像分辨率则是单位英寸中所包含的像素点数。在此统一说明，以下不再赘述。
[0009]在一种可能的设计中，该第一网络性能指标包括以下参数中的一个或多个：终端设备和接入网设备之间的路径上的上行丢包数、上行丢包率、下行丢包数、下行丢包率、往返时延(round-trip time，RTT)、上行误码包数、上行误码率、下行误码包数、下行误码率、上行乱序包数、上行乱序包率、下行乱序包数、下行乱序包率、上行重传包数、上行重传率、下行重传包数、下行重传率，上行平均包间隔、上行平均包抖动、下行平均包间隔、下行平均包抖动、上行速率以及下行速率；以及，该接入网设备和用户面实体之间的路径上的上行丢包数、上行丢包率、下行丢包数、下行丢包率、RTT、上行误码包数、上行误码率、下行误码包数、下行误码率、上行乱序包数、上行乱序包率、下行乱序包数、下行乱序包率、上行重传包数、上行重传率、下行重传包数、下行重传率，上行平均包间隔、上行平均包抖动、下行平均包间隔、下行平均包抖动、上行速率以及下行速率；以及，该用户面实体与应用功能实体之间的路径上的上行丢包数、上行丢包率、下行丢包数、下行丢包率、RTT、上行误码包数、上行误码率、下行误码包数、下行误码率、上行乱序包数、上行乱序包率、下行乱序包数、下行乱序包率、上行重传包数、上行重传率、下行重传包数、下行重传率，上行平均包间隔、上行平均包抖动、下行平均包间隔、下行平均包抖动、上行速率以及下行速率。其中，本申请实施例中，误码是指经接收、判决、再生后，数字码流中的某些比特发生了差错，使传输的信息质量产生损伤，可以理解为传输过程中，发生错误的数据包。乱序是指当数据包过大时，会将一个数据包拆分为多个满足传输要求的数据包，每个数据包都会有对应的序号以供对端重组，但由于中间路由不同或者网络质量问题，可能会导致后发送的数据包先到达对端，从而产生乱序，其中，包乱序比例高，也会导致通信质量差。抖动是指分组数据包延迟的变化程度，如果网络发生拥塞，排队延迟将影响端到端的延迟，并导致通过同一连接传输的分组延迟各不相同，而抖动，就是用来描述这样一延迟变化的程度。此外，本申请实施例中的用户面实体主要用于执行用户数据包的转发。在第五代5G通信系统中，用户面实体可以是用本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种应用平均意见得分MOS模型的训练方法，其特征在于，所述方法包括：中心网络数据分析功能C-NWDAF实体向边缘网络数据分析功能E-NWDAF实体发送第一订阅请求，所述第一订阅请求用于请求订阅目标业务的业务质量MOS等级和对应的第一网络性能指标，所述第一网络性能指标为承载所述目标业务的网络传输的网络性能指标；所述C-NWDAF实体从所述E-NWDAF实体接收所述业务质量MOS等级和所述第一网络性能指标；所述C-NWDAF实体根据所述业务质量MOS等级和所述第一网络性能指标，建立所述目标业务的MOS模型。2.根据权利要求1所述的方法，其特征在于，所述业务质量MOS等级是根据所述目标业务的业务体验数据确定的。3.根据权利要求2所述的方法，其特征在于，在所述目标业务为视频业务的情况下，所述业务体验数据包括以下参数中的一个或多个：所述视频业务的初始缓冲时延、播放缓冲时长、码率、业务速率、帧率、流畅度、清晰度；以及，终端设备的分辨率。4.根据权利要求1-3任一项所述的方法，其特征在于，所述第一网络性能指标包括以下参数中的一个或多个：终端设备和接入网设备之间的路径上的上行丢包数、上行丢包率、下行丢包数、下行丢包率、往返时延RTT、上行误码包数、上行误码率、下行误码包数、下行误码率、上行乱序包数、上行乱序包率、下行乱序包数、下行乱序包率、上行重传包数、上行重传率、下行重传包数、下行重传率，上行平均包间隔、上行平均包抖动、下行平均包间隔、下行平均包抖动、上行速率以及下行速率；以及，所述接入网设备和用户面实体之间的路径上的上行丢包数、上行丢包率、下行丢包数、下行丢包率、RTT、上行误码包数、上行误码率、下行误码包数、下行误码率、上行乱序包数、上行乱序包率、下行乱序包数、下行乱序包率、上行重传包数、上行重传率、下行重传包数、下行重传率，上行平均包间隔、上行平均包抖动、下行平均包间隔、下行平均包抖动、上行速率以及下行速率；以及，所述用户面实体与应用功能实体之间的路径上的上行丢包数、上行丢包率、下行丢包数、下行丢包率、RTT、上行误码包数、上行误码率、下行误码包数、下行误码率、上行乱序包数、上行乱序包率、下行乱序包数、下行乱序包率、上行重传包数、上行重传率、下行重传包数、下行重传率，上行平均包间隔、上行平均包抖动、下行平均包间隔、下行平均包抖动、上行速率以及下行速率。5.根据权利要求1-4任一项所述的方法，其特征在于，所述方法还包括：所述C-NWDAF实体获取所述MOS等级对应的第二网络性能指标，和/或，所述MOS等级对应的第一网络功能实体的第一负荷，所述第二网络性能指标为承载所述目标业务的无线的网络性能指标，所述第一网络功能实体为网络数据提供者功能实体；所述C-NWDAF实体根据所述业务质量MOS等级和所述第一网络性能指标，建立所述目标业务MOS模型，包括：所述C-NWDAF实体根据所述第二网络性能指标，和/或，所述第一网络功能实体的第一负荷，以及所述业务质量MOS等级和所述第一网络性能指标，排除因终端设备和应用功能实
体的异常导致的业务质量MOS质差样本，建立所述目标业务的MOS模型。6.根据权利要求5所述的方法，其特征在于，所述C-NWDAF实体获取所述MOS等级对应的第一网络功能实体的第一负荷，包括：所述C-NWDAF实体向网络存储功能实体发送第二订阅请求，所述第二订阅请求用于请求订阅所述第一网络功能实体的第一负荷；所述C-NWDAF实体从所述网络存储功能实体接收所述第一网络功能实体的第一负荷。7.根据权利要求5或6所述的方法，其特征在于，所述C-NWDAF实体获取所述MOS等级对应的第二网络性能指标，包括：所述C-NWDAF实体向运营商网络的操作和维护OAM实体发送第三订阅请求，所述第三订阅请求用于请求订阅所述第二网络性能指标；所述C-NWDAF实体从所述OAM实体接收所述第二网络性能指标。8.根据权利要求5-7任一项所述的方法，其特征在于，所述第一网络功能实体的第一负荷包括以下参数中的一个或多个：所述第一网络功能实体的会话数、所述第一网络功能实体的用户数、以及所述第一网络功能实体的资源利用率。9.根据权利要求5-8任一项所述的方法，其特征在于，所述第二网络性能指标包括以下参数中的一个或多个：接入网设备的会话数、无线资源控制RRC连接用户数、拥塞状态和资源占用率，终端设备的无线测量指标，以及所述终端设备的位置信息。10.根据权利要求1-9任一项所述的方法，其特征在于，在所述C-NWDAF实体向所述E-NWDAF实体发送第一订阅请求之前，所述方法还包括：所述C-NWDAF实体从第二网络功能实体接收第四订阅请求，所述第四订阅请求用于请求订阅所述目标业务的MOS模型，第二网络功能实体为消费者功能实体；在所述C-NWDAF实体建立所述目标业务的MOS模型之后，所述方法还包括：所述C-NWDAF实体向所述第二网络功能实体发送所述目标业务的MOS模型。11.根据权利要求1-10任一项所述的方法，其特征在于，所述方法还包括：所述C-NWDAF实体从策略控制实体接收第五订阅请求，所述第五订阅请求用于请求对目标终端设备的所述目标业务进行业务体验保障，所述业务体验保障的业务质量MOS等级要求为第一业务质量MOS等级；所述C-NWDAF实体向所述E-NWDAF实体发送第六订阅请求，所述第六订阅请求用于请求订阅所述目标终端设备使用所述目标业务的触发事件、所述目标业务的第二业务质量MOS等级和对应的第一网络性能指标；在所述触发事件被触发之后，所述C-NWDAF实体从所述E-NWDAF实体接收所述第二业务质量MOS等级和对应的第一网络性能指标；在所述第二业务质量MOS等级和所述第一业务质量MOS等级不同的情况下，所述C-NWDAF实体将所述第二业务质量MOS等级对应的第一网络性能指标与所述目标业务的MOS模型中所述第一业务质量MOS等级对应的第一网络性能指标进行匹配，得到网络分析结果；所述C-NWDAF实体向所述策略控制实体发送所述网络分析结果，所述网络分析结果用于进行网络优化。
12.根据权利要求1-10任一项所述的方法，其特征在于，所述方法还包括：所述C-NWDAF实体从策略控制实体接收第五订阅请求，所述第五订阅请求用于请求对目标终端设备的所述目标业务进行业务体验保障，所述业务体验保障的业务质量MOS等级要求为第一业务质量MOS等级；所述C-NWDAF实体根据所述目标终端设备的移动轨迹，确定所述目标终端设备将从第一接入网设备的服务范围移动到第二接入网设备的移动范围；所述C-NWDAF实体向所述E-NWDAF实体发送第六订阅请求，所述第六订阅请求用于请求订阅第一终端设备使用所述目标业务的触发事件、以及所述第二接入网设备关联的第一网络性能指标；在所述触发事件被触发之后，所述C-NWDAF实体从所述E-NWDAF实体接收所述第二接入网设备关联的第一网络性能指标；所述C-NWDAF实体将所述第二接入设备关联的第一网络性能指标与所述目标业务的MOS模型进行匹配，确定所述第二接入设备关联的第一网络性能指标对应的所述目标业务的第三业务质量MOS等级；在所述第三业务质量MOS等级和所述第一业务质量MOS等级不同的情况下，所述C-NWDAF实体将与所述第三业务质量MOS等级对应的第一网络性能指标与所述目标业务的MOS模型中所述第一业务质量MOS等级对应的第一网络性能指标进行匹配，得到网络预测结果；所述C-NWDAF实体向所述策略控制实体发送所述网络预测结果，所述网络预测结果用于进行网络优化。13.一种应用平均意见得分MOS模型的训练方法，其特征在于，所述方法包括：边缘网络数据分析功能E-NWDAF实体从中心网络数据分析功能C-NWDAF实体接收第一订阅请求，所述第一订阅请求用于请求订阅目标业务的业务质量MOS等级和对应的第一网络性能指标，所述第一网络性能指标为承载所述目标业务的网络传输的网络性能指标；所述E-NWDAF实体获取所述业务质量MOS等级和所述第一网络性能指标；所述E-NWDAF实体向所述C-NWDAF实体发送所述业务质量MOS等级和所述第一网络性能指标。14.根据权利要求13所述的方法，其特征在于，所述E-NWDAF实体获取所述业务质量MOS等级，包括：所述E-NWDAF实体获取所述目标业务的业务体验数据；所述E-NWDAF实体根据所述目标业务的业务体验数据确定所述业务质量MOS等级。15.根据权利要求14所述的方法，其特征在于，在所述目标业务为视频业务的情况下，所述业务体验数据包括以下参数中的一个或多个：所述视频业务的初始缓冲时延、播放缓冲时长、码率、业务速率、帧率、流畅度、清晰度；以及，终端设备的分辨率。16.根据权利要求13-15任一项所述的方法，其特征在于，所述第一网络性能指标包括以下参数中的一个或多个：终端设备和接入网设备之间的路径上的上行丢包数、上行丢包率、下行丢包数、下行丢包率、往返时延RTT、上行误码包数、上行误码率、下行误码包数、下行误码率、上行乱序包数、上行乱序包率、下行乱序包数、下行乱序包率、上行重传包数、上行重传率、下行重传包
数、下行重传率，上行平均包间隔、上行平均包抖动、下行平均包间隔、下行平均包抖动、上行速率以及下行速率；以及，所述接入网设备和用户面实体之间的路径上的上行丢包数、上行丢包率、下行丢包数、下行丢包率、RTT、上行误码包数、上行误码率、下行误码包数、下行误码率、上行乱序包数、上行乱序包率、下行乱序包数、下行乱序包率、上行重传包数、上行重传率、下行重传包数、下行重传率，上行平均包间隔、上行平均包抖动、下行平均包间隔、下行平均包抖动、上行速率以及下行速率；以及，所述用户面实体与应用功能实体之间的路径上的上行丢包数、上行丢包率、下行丢包数、下行丢包率、RTT、上行误码包数、上行误码率、下行误码包数、下行误码率、上行乱序包数、上行乱序包率、下行乱序包数、下行乱序包率、上行重传包数、上行重传率、下行重传包数、下行重传率，上行平均包间隔、上行平均包抖动、下行平均包间隔、下行平均包抖动、上行速率以及下行速率。17.一种中心网络数据分析功能C-NWDAF实体，其特征在于，所述C-NWDAF实体包括：处理模块和收发模块；所述收发模块，用于向边缘网络数据分析功能E-NWDAF实体发送第一订阅请求，所述第一订阅请求用于请求订阅目标业务的业务质量平均意见得分MOS等级和对应的第一网络性能指标，所述第一网络性能指标为承载所述目标业务的网络传输的网络性能指标；所述收发模块，还用于从所述E-NWDAF实体接收所述业务质量MOS等级和所述第一网络性能指标；所述处理模块，用于根据所述业务质量MOS等级和所述第一网络性能指标，建立所述目标业务的MOS模型。18.根据权利要求17所...

【专利技术属性】
技术研发人员：蒯少锋，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：