数据收集性能评估方法、装置和系统、存储介质制造方法及图纸

本公开涉及一种数据收集性能评估方法、装置和系统、存储介质。该数据收集性能评估方法包括：测量功能网元执行数据收集时交互方面的测量数据，其中，所述功能网元为用于实现网络数据分析功能的网元；根据所述测量数据确定收集到数据的质量值；根据收集到数据的质量值，评估所述功能网元的数据收集性能。本公开能够测量和评估用于实现网络数据分析功能的网元的数据收集性能，可以量化和评估用于实现网络数据分析功能的网元收集到的数据质量。数据分析功能的网元收集到的数据质量。数据分析功能的网元收集到的数据质量。

【技术实现步骤摘要】
数据收集性能评估方法、装置和系统、存储介质


[0001]本公开涉及无线通信领域，特别涉及一种数据收集性能评估方法、装置和系统、存储介质。

技术介绍

[0002]NWDAF(Network Data Analytics Function，网络数据分析功能网元)是5GC(5G核心网)中的网元，支持从NFs(Network Function，网络功能网元)、AFs(Application Function，应用功能网元)以及OAM(Operations,Administration,Maintenance，操作维护管理网元)收集数据用于分析。

技术实现思路

[0003]专利技术人通过研究发现：从运营商的角度来看，NWDAF网元作为一个提供网络数据分析功能的网络功能，数据收集的性能直接影响其分析性能，因此，如何监测NWDAF网元在数据收集方面的性能是一个关键问题。
[0004]鉴于以上技术问题中的至少一项，本公开提供了一种数据收集性能评估方法、装置和系统、存储介质，能够测量和评估用于实现网络数据分析功能的网元的数据收集性能，可以量化和评估用于实现网络数据分析功能的网元收集到的数据质量。
[0005]根据本公开的一个方面，提供一种数据收集性能评估方法，包括：
[0006]测量功能网元执行数据收集时交互方面的测量数据，其中，所述功能网元为用于实现网络数据分析功能的网元；
[0007]根据所述测量数据确定收集到数据的质量值；
[0008]根据收集到数据的质量值，评估所述功能网元的数据收集性能。
[0009]在本公开的一些实施例中，所述测量网络数据分析功能所述功能网元执行数据收集时交互方面的测量数据包括：
[0010]根据目标服务类型、目标数据源类型和目标数据源，测量所述功能网元为执行目标类型服务而从目标数据源收集数据时对应的交互方面的测量数据，其中，所述目标服务类型包括分析服务、模型训练服务和数据管理服务中的至少一种服务。
[0011]在本公开的一些实施例中，根据所述测量数据确定收集到数据的质量值包括：
[0012]根据所述测量数据，获取所述功能网元为执行目标类型服务而从目标数据源收集到的数据的缺失情况，其中，所述缺失情况用于量化所述功能网元收集到的数据的质量。
[0013]在本公开的一些实施例中，所述测量数据包括所述功能网元发出的请求次数和所述功能网元收到的响应次数，其中，请求方式包括请求和订阅中至少一项，响应方式包括响应和通知中至少一项。
[0014]在本公开的一些实施例中，所述测量网络数据分析功能所述功能网元执行数据收集时交互方面的测量数据包括：
[0015]测量所述功能网元向目标数据源发送的数据收集请求的次数，在所述功能网元触
发数据收集相关的请求或订阅的情况下，将第一累计计数器递增1，其中，第一累计计数器为与所述功能网元触发的数据收集请求或订阅数量相关的累计计数器；
[0016]测量所述功能网元从目标数据源收到的数据收集响应的次数，在所述功能网元收到数据收集相关的响应或通知的情况下，将第二累计计数器递增1，其中，第二累计计数器为与所述功能网元收到的数据收集响应或通知数量相关的累计计数器。
[0017]在本公开的一些实施例中，所述测量所述功能网元向目标数据源发送的数据收集请求的次数包括：
[0018]在所述功能网元为执行分析任务而触发数据收集相关的请求或订阅的情况下，基于不同分析标识，该第一累计计数器包括第一子累计计数器，其中，第一子累计计数器为与分析标识相关的子累计计数器，第一子累计计数器用于测量所述功能网元为执行目标分析标识所指示的分析时所触发的数据收集请求的次数。
[0019]在本公开的一些实施例中，所述测量所述功能网元向目标数据源发送的数据收集请求的次数包括：
[0020]在所述功能网元为执行模型训练任务而触发数据收集相关的请求或订阅的情况下，基于不同模型标识或分析标识，该第一累计计数器包括第二子累计计数器，第二子累计计数器为与模型标识或分析标识相关的子累计计数器，第二子累计计数器用于测量所述功能网元为训练目标模型标识所指示的模型时所触发的数据收集请求的次数。
[0021]在本公开的一些实施例中，所述测量所述功能网元向目标数据源发送的数据收集请求的次数包括：
[0022]在所述功能网元为执行数据管理任务而触发数据收集相关的请求或订阅的情况下，基于不同数据管理标识，该第一累计计数器包括第五子累计计数器，第五子累计计数器为与数据管理标识相关的子累计计数器，第五子累计计数器用于测量所述功能网元为执行目标数据管理标识所指示的数据管理任务时所触发的数据收集请求的次数。
[0023]在本公开的一些实施例中，所述测量所述功能网元向目标数据源发送的数据收集请求的次数包括：
[0024]基于不同数据源，测量第一请求次数、第二请求次数和第三请求次数中的至少一项，其中，第一请求次数为所述功能网元为执行目标分析标识所指示的分析时所触发的面向每个目标数据源或每种目标数据源的数据收集请求的次数，第二请求次数为所述功能网元训练目标模型标识所指示的模型时所触发的面向每个目标数据源或每种目标数据源的数据收集请求的次数，第三请求次数为执行目标数据管理标识所指示的数据管理任务时所触发的面向每个目标数据源或每种目标数据源的数据收集请求的次数。
[0025]在本公开的一些实施例中，所述测量所述功能网元从目标数据源收到的数据收集响应的次数包括：
[0026]在所述功能网元从目标数据源收集数据用于分析的情况下，基于不同分析标识，该第二累计计数器包括第三子累计计数器，其中，第三子累计计数器为与分析标识相关的子累计计数器，第三子累计计数器用于测量所述功能网元为执行目标分析标识所指示的分析时所收到的数据收集响应的次数。
[0027]在本公开的一些实施例中，所述测量所述功能网元从目标数据源收到的数据收集响应的次数包括：
[0028]在所述功能网元从目标数据源收集数据用于模型训练的情况下，基于不同模型标识或分析标识，该第二累计计数器包括第四子累计计数器，第四子累计计数器为与模型标识或分析标识相关的子累计计数器，第四子累计计数器用于测量所述功能网元为训练目标模型标识所指示的模型时所收到的数据收集响应的次数。
[0029]在本公开的一些实施例中，所述测量所述功能网元从目标数据源收到的数据收集响应的次数包括：
[0030]在所述功能网元从目标数据源收集数据用于数据管理的情况下，基于不同数据管理标识，该第二累计计数器包括第六子累计计数器，其中，第六子累计计数器为与数据管理标识相关的子累计计数器，第六子累计计数器用于测量所述功能网元为执行目标数据管理标识所指示的数据管理任务时所收到的数据收集响应的次数。
[0031]在本公开的一些实施例中，所述测量所述功能网元从目标数据源收到的数据收集响应的次数包括：
[0032]基于不同数据源，测量第一响应次数、第二响应次数和第本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据收集性能评估方法，包括：测量功能网元执行数据收集时交互方面的测量数据，其中，所述功能网元为用于实现网络数据分析功能的网元；根据所述测量数据确定收集到数据的质量值；根据收集到数据的质量值，评估所述功能网元的数据收集性能。2.根据权利要求1所述的方法，其中，所述测量所述功能网元执行数据收集时交互方面的测量数据包括：根据目标服务类型、目标数据源类型和目标数据源，测量所述功能网元为执行目标类型服务而从目标数据源收集数据时对应的交互方面的测量数据，其中，所述目标服务类型包括分析服务、模型训练服务和数据管理服务中的至少一种服务。3.根据权利要求2所述的方法，其中，根据所述测量数据确定收集到数据的质量值包括：根据所述测量数据，获取所述功能网元为执行目标类型服务而从目标数据源收集到的数据的缺失情况，其中，所述缺失情况用于量化所述功能网元收集到的数据的质量。4.根据权利要求1
‑
3中的任一项所述的方法，其中：所述测量数据包括所述功能网元发出的请求次数和所述功能网元收到的响应次数，其中，请求方式包括请求和订阅中至少一项，响应方式包括响应和通知中至少一项。5.根据权利要求4所述的方法，其中，所述测量网络数据分析功能所述功能网元执行数据收集时交互方面的测量数据包括：测量所述功能网元向目标数据源发送的数据收集请求的次数，在所述功能网元触发数据收集相关的请求或订阅的情况下，将第一累计计数器递增1，其中，第一累计计数器为与所述功能网元触发的数据收集请求或订阅数量相关的累计计数器；测量所述功能网元从目标数据源收到的数据收集响应的次数，在所述功能网元收到数据收集相关的响应或通知的情况下，将第二累计计数器递增1，其中，第二累计计数器为与所述功能网元收到的数据收集响应或通知数量相关的累计计数器。6.根据权利要求5所述的方法，其中，所述测量所述功能网元向目标数据源发送的数据收集请求的次数包括：在所述功能网元为执行分析任务而触发数据收集相关的请求或订阅的情况下，基于不同分析标识，该第一累计计数器包括第一子累计计数器，其中，第一子累计计数器为与分析标识相关的子累计计数器，第一子累计计数器用于测量所述功能网元为执行目标分析标识所指示的分析时所触发的数据收集请求的次数；和/或，在所述功能网元为执行模型训练任务而触发数据收集相关的请求或订阅的情况下，基于不同模型标识或分析标识，该第一累计计数器包括第二子累计计数器，第二子累计计数器为与模型标识或分析标识相关的子累计计数器，第二子累计计数器用于测量所述功能网元为训练目标模型标识所指示的模型时所触发的数据收集请求的次数；和/或，在所述功能网元为执行数据管理任务而触发数据收集相关的请求或订阅的情况下，基于不同数据管理标识，该第一累计计数器包括第五子累计计数器，第五子累计计数器为与
数据管理标识相关的子累计计数器，第五子累计计数器用于测量所述功能网元为执行目标数据管理标识所指示的数据管理任务时所触发的数据收集请求的次数；和/或，基于不同数据源，测量第一请求次数、第二请求次数和第三请求次数中的至少一项，其中，第一请求次数为所述功能网元为执行目标分析标识所指示的分析时所触发的面向每个目标数据源或每种目标数据源的数据收集请求的次数，第二请求次数为所述功能网元训练目标模型标识所指示的模型时所触发的面向每个目标数据源或每种目标数据源的数据收集请求的次数，第三请求次数为执行目标数据管理标识所指示的数据管理任务时所触发的面向每个目标数据源或每种目标数据源的数据收集请求的次数。7.根据权利要求6所述的方法，其中，所述测量所述功能网元从目标数据源收到的数据收集响应的次数包括：在所述功能网元从目标数据源收集数据用于分析的情况下，基于不同分析标识，该第二累计计数器包括第三子累计计数器，其中，第三子累计计数器为与分析标识相关的子累计计数器，第三子累计计数器用于测量所述功能网元为执行目标分析标识所指示的分析时所收到的数据收集响应的次数；和/或，在所述功能网元从目标数据源收集数据用于模型训练的情况下，基于不同模型标识或分析标识，该第二累计计数器包括第四子累计计数器，第四子累计计数器为与模型标识或分析标识相关的子累计计数器，第四子累计计数器用于测量所述功能网元为训练目标模型标识所指示的模型时所收到的数据收集响应的次数；和/或，在所述功能网元从目标数据源收集数据用于数据管理的情况下，基于不同数据管理标识，该第二累计计数器包括第六子累计计数器，其中，第六子累计计数器为与数据管理标识相关的子累计计数器，第六子累计计数器用于测量所述功能网元为执行目标数据管理标识所指示的数据管理任务时所收到的数据收集响应的次数；和/或，基于不同数据源，测量第一响应次数、第二响应次数和第三响应次数中的至少一项，其中，第一响应次数为所述功能网元为执行目标分析标识所指示的分析时所收到的来自每个目标数据源或每种目标数据源的数据收集响应的次数，第二响应次数为所述功能网元训练目标模型标识所指示的模型时所收到的来自每个目标数据源或每种目标数据源的数据收集响应的次数，第三响应次数为所述功能网元为执行目标数据管理标识所指示的数据管理任务时所收到的来自每个目标数据源或每种目标数据源的数据收集响应的次数。8.根据权利要求7所述的方法，其中，在所述功能网元为执行分析任务而触发数据收集相关的请求或订阅的情况下，所述根据所述测量数据确定收集到数据的质量值包括：根据第一子累计计数器记录的次数和第三子累计计数器记录的次数，确定所述测量数据的第一质量值，其中，所述第一质量值用于表示所述功能网元为执行目标分析标识所指示的分析所收集到的数据的缺失情况，用于评估所述功能网元为执行所述分析而触发的数据收集服务的性能。9.根据权利要求8所述的方法，其中，所述根据所述功能网元触发的数据收集请求的次
数和所述功能网元收到的数据收集响应的次数，确定所述测量数据的第一...

【专利技术属性】
技术研发人员：牛煜霞，赵嵩，
申请(专利权)人：中国电信股份有限公司，
类型：发明
国别省市：