【技术实现步骤摘要】
一种基于信息熵赋权的数据传输动态配置方法和系统
[0001]本专利技术属于数字信息传输
,具体涉及一种基于信息熵赋权的数据传输动态配置方法和系统。
技术介绍
[0002]随着计算机技术与日俱增的发展趋势以及互联网+的社会背景的环绕,学界和产业界对于数据的样本容量和内在价值挖掘与处理上有了更高追求,大数据的地位提升到了空前的地位。数据容量通常以PB或者EB或者更高为单位,有时甚至达到更高量级的单位容量,其数据量已成规模化效应,它的复杂程度已超出了常见或常用的软件技术的控制和管理范围且曾得到广泛应用。大数据的思想和相关技术被广泛应用于统计数据、互联网与物联网、医疗等行业以及企业等。然而在这海量数据采集、处理与分析中,原始数据具有数据增长快、样本部分重叠冗余、高频访问数据易丢失等自身属性和环境特征。在面临上述问题的情况下,区分并设计合理的存储分配机制,对于数据接入与数据质量治理至关重要。然而高质量的分类实时数据和高效的数据存储迁移与传输是实现数据链路监测及数据分析与处理的一个难点,为了解决这一海量数据质量提高且满足重要数据时 ...
【技术保护点】
【技术特征摘要】
1.一种基于信息熵赋权的数据传输动态配置方法,其特征在于,包括:获取待传输的量测数据;计算所述量测数据在预先构建的量测数据优先级评价指标体系中各指标的值,并计算各指标的信息熵;基于所述信息熵和各指标的值,对所述量测数据进行分类,并根据分类结果对所述量测数据进行传输。2.如权利要求1所述的方法,其特征在于,所述基于所述信息熵和各指标的值,对所述量测数据进行分类,包括:根据所述信息熵,计算对应量测数据的客观权重;对所述量测数据对应的各指标的值和客观权重进行相乘再求和,得到所述量测数据的客观优先级评价得分;基于所述客观优先级评价得分,对所述量测数据进行分类。3.如权利要求2所述的方法,其特征在于,所述基于所述客观优先级评价得分,对所述量测数据进行分类,包括:根据所述客观优先级评价得分,对所述量测数据进行排序,得到优先级序列;根据所述量测数据在所述优先级序列中的位置,对所述量测数据进行分类。4.如权利要求2所述的方法,其特征在于,所述客观权重的计算式如下:式中,w
i
为第i项量测数据的客观权重,m为量测数据的个数,E
i
为第i项量测数据对应各指标的信息熵。5.如权利要求1所述的方法,其特征在于,所述信息熵的计算式如下:式中,E
i
为第i项量测数据对应各指标的信息熵,n为量测数据优先级评价指标体系中指标的个数,p
ij
为第i项量测数据的第j项指标的发生概率;所述第i项量测数据的第j项指标的发生概率p
ij
的计算式如下:式中,x
ij
为第i项量测数据的第j项指标的值。6.如权利要求1所述的方法,其特征在于,所述根据分类结果对所述量测数据进行传输,包括:根据分类结果,将所述量测数据分别分配到不同优先级传输队列;结合各优先级传输队列和...
【专利技术属性】
技术研发人员:姚黎明,任英杰,尚忠义,杨畅,武丽莎,刘海峰,聂玲,
申请(专利权)人:国家电网有限公司大数据中心,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。