模型测试方法技术

本公开涉及一种模型测试方法

【技术实现步骤摘要】
【国外来华专利技术】模型测试方法、设备和存储介质


[0001]本公开涉及通信
，尤其涉及一种模型测试方法
、
设备和存储介质
。

技术介绍

[0002]随着通信技术的进步，在通信系统中引入了预测模型，例如，人工智能
(Artificial Intelligence
，
AI)
模型
、
机器学习
(Machine Learning
，
ML)
模型或其他模型
。
通过预测模型可以得到某些场景下的预测数据，以便提升网络性能
。
但是，通过预测数据的可靠性会极大地影响网络性能，因此，如何确定预测模型的预测数据的可靠性称为目前亟待解决的问题
。

技术实现思路

[0003]本公开实施例提出了一种模型测试方法
、
设备和存储介质
。
[0004]根据本公开实施例的第一方面，提出了一种模型测试方法，所述方法包括：
[0005]确定第一模型输出的预测数据是否满足第一条件；其中本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.
一种模型测试方法，其特征在于，所述方法包括：确定第一模型输出的预测数据是否满足第一条件；其中，所述第一条件为所述预测数据的性能要求，所述预测数据为所述第一模型根据第一测量数据进行预测得到的数据，所述第一测量数据为终端设备对第一信息进行测量后得到的数据，所述第一信息为网络设备发送至终端设备的信息
。2.
根据权利要求1所述的方法，其特征在于，所述方法还包括：接收所述终端设备发送的第二信息，所述第二信息包括所述预测数据
。3.
根据权利要求1所述的方法，其特征在于，所述方法还包括：向所述终端设备发送第三信息；所述第三信息用于指示所述第一模型是否能够被所述终端设备使用
。4.
根据权利要求1至3中任一项所述的方法，其特征在于，所述方法还包括：接收第四信息；其中，所述第四信息用于触发所述网络设备发送第一信息，所述第四信息包括所述第一模型的第一模型标识；根据所述第四信息确定所述第一模型满足测试启动条件，向所述终端设备发送所述第一信息
。5.
根据权利要求4所述的方法，其特征在于，所述测试启动条件包括以下至少一项：所述第一模型未被测试过；所述第一模型不在模型管理集合中；所述模型管理集合包括已经测试过的模型；所述第四信息用于指示执行所述第一模型的测试
。6.
根据权利要求4或5所述的方法，其特征在于，所述第四信息包括以下至少一项：模型更新指示信息；模型添加指示信息；模型测试指示信息
。7.
根据权利要求1至6中任一项所述的方法，其特征在于，所述第一模型为用于执行波束预测的模型，所述预测数据包括第一波束的预测信号质量，所述第一波束为所述网络设备为所述终端设备配置的至少一个波束；所述第一条件包括所述预测信号质量和第一信号质量的差值在第一差值范围内；其中，所述第一信号质量为所述网络设备根据波束配置信息生成的所述第一波束的信号质量，或者，所述第一信号质量为所述终端设备实际测量得到的所述第一波束的信号质量
。8.
根据权利要求1至6中任一项所述的方法，其特征在于，所述第一模型为用于执行波束预测的模型，所述预测数据包括所述波束预测得到的满足信号条件的第二波束；所述信号条件包括以下至少一项：所述第二波束的信号质量大于或等于预设信号质量阈值；所述第二波束为所述网络设备为所述终端设备配置的多个波束中信号质量最强的波束
。9.
根据权利要求8所述的方法，其特征在于，所述第一条件为执行的
N
次波束预测中满足预测成功条件的次数大于或等于
M
；其中，
N
为自然数，
M
为小于或等于
N
的自然数；所述预测成功条件为所述第二波束与第三波束相同，所述第二波束为执行波束预测得到的满足信号条件的波束；
所述第三波束为所述网络设备根据波束配置信息确定的满足所述信号条件的波束；或者，所述第三波束为根据第二测量数据确定的满足所述信号条件的波束，所述第二测量数据为所述终端设备对所述网络设备配置给所述终端设备的多个波束进行测量后得到的数据
。10.
根据权利要求7至9中任一项所述的方法，其特征在于，所述信号质量包括以下至少一项：
RSRP、SINR、RSSI、RSRQ。11.
根据权利要求1至
12
中任一项所述的方法，其特征在于，所述第一信息包括以下至少一项：用于对第一模型进行测试的第一数据；用于对第一模型进行测试的第一信号
。12.
一种模型测试方法，其特征在于，所述方法包括：使用第一模型，根据第一信息进行预测，得到所述预测数据；其中，所述第一信息为网络设备发送至终端设备的信息；发送第二信息，所述第二信息包括所述预测数据，所述预测数据用于确定所述第一模型是否满足第一条件，所述第一条件为所述预测数据的性能要求
。13.
根据权利要求
12
所述的方法，其特征在于，所述方法还包括：接收所述第一信息；所述使用第一模型，根据第一信息进行预测，得到所述预测数据包括：对所述第一信息进行测量，得到所述第一测量数据；将所述第一测量数据输入所述第一模型，得到所述第一模型输出的所述预测数据
。14.
根据权利要求
12
或
13
所述的方法，其特征在于，所述方法还包括：接收第三信息；所述第三信息用于指示所述第一模型是否能够被所述终端设备使用；根据所述第三信息确定所述第一模型是否能够使用
。15.
根据权利要求
12
至
14
中任一项所述的方法，其特征在于，所述方法还包括：发送第四信息；其中，所述第四信息用于触发所述网络设备发送第一信息，所述第四信息包括所述第一模型的第一模型标识
。16.
根据权利要求
15
所述的方法，其特征在于，所述...

【专利技术属性】
技术研发人员：陶旭华，
申请(专利权)人：北京小米移动软件有限公司，
类型：发明
国别省市：