一种基于立体内容的大数据处理方法技术

本发明专利技术公开了一种基于立体内容的大数据处理方法，包括以下步骤：构建出表征各组内容参数的数据关联性的内容参数关联关系式，再进行场景化融合得到内容参数场景关联式，以及构建得到内容参数关联拓扑，并在内容参数关联拓扑中进行社团分析得到多个参数社团，以各个参数社团的社团中心作为关键参数，并将关键参数作为立体内容的监测项，以监测项的时态值结合内容参数场景关联式得到各组内容参数的时态值。本发明专利技术实现立体内容数据的场景化降维监测，降低监测过程中实时数据流量，实现减轻大数据硬件中传输能力、监测能力的压力，并能在出现立体内容的丢失后不影响后续相关管理分析，进而保证管理分析的精准性和可靠性。进而保证管理分析的精准性和可靠性。进而保证管理分析的精准性和可靠性。

【技术实现步骤摘要】
一种基于立体内容的大数据处理方法


[0001]本专利技术涉及大数据
，具体涉及一种基于立体内容的大数据处理方法。

技术介绍

[0002]大数据技术的战略意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行专业化处理。换而言之，如果把大数据比作一种产业，那么这种产业实现盈利的关键，在于提高对数据的“加工能力”，通过“加工”实现数据的“增值”。从技术上看，大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理，必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘。但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。随着云时代的来临，大数据(Bigdata)也吸引了越来越多的关注。分析师团队认为，大数据(Bigdata)通常用来形容一个公司创造的大量非结构化数据和半结构化数据，这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。大数据分析常和云计算联系到一起，因为实时的大型数据集分析需要像MapReduce一样的框架来向数十、数百或甚至数千的电脑分配工作。
[00本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于立体内容的大数据处理方法，其特征在于，包括以下步骤：步骤S1、获取立体元素的各组内容参数，并构建出表征各组内容参数的数据关联性的内容参数关联关系式，再利用立体元素所处的场景参数对所述内容参数关联关系式进行场景化融合得到内容参数场景关联式；步骤S2、基于内容参数场景关联式对立体元素的各组内容参数进行拓扑构建得到内容参数关联拓扑，并在内容参数关联拓扑中进行社团分析得到多个参数社团；步骤S3、以各个参数社团的社团中心作为关键参数，并将关键参数作为立体内容的监测项，以监测项的时态值结合内容参数场景关联式得到各组内容参数的时态值，以实现立体内容数据的场景化降维监测。2.根据权利要求1所述的一种基于立体内容的大数据处理方法，其特征在于：所述构建出表征各组内容参数的数据关联性的内容参数关联关系式，包括：在标准场景下获取立体元素的各组内容参数的时序序列，并将各组内容参数的时序序列进行两两组合作为BP神经网络的输入项和输出项，利用所述BP神经网络进行卷积训练得到所述内容参数关联关系式；所述内容参数关联关系式的计算公式为：S
b,i
＝BP(S
b,i
)；式中，S
b,i
为标准场景下第i组内容参数，S
b,i
为标准场景下第j组内容参数，BP为BP神经网络，i，j为计量数项。3.根据权利要求2所述的一种基于立体内容的大数据处理方法，其特征在于：所述利用立体元素所处的场景参数对所述内容参数关联关系式进行场景化融合得到内容参数场景关联式，包括：将标准场景的场景参数与立体元素所处的场景参数进行协方差计算得到场景化融合系数，所述场景化融合系数的函数表达式为：k＝cov(Y
b
,Y
r
)；式中，k为场景化融合系数，cov为协方差运算符，Y
b
为标准场景的场景参数序列，Y
r
为立体元素所处的场景参数序列；利用场景化融合系数对标准场景下立体元素的各组内容参数和立体元素所处的场景参数下各组内容参数进行融合构建得到场景化融合公式，所述场景化融合公式为：k＝cov([S]
b
,[S]
r
)；式中，[S]
b
为标准场景下立体元素的内容参数序列，[S]
r
为立体元素所处的场景参数下内容参数序列，[S]
b
＝{S
b,i
|i∈[1,n]}，[S]
r
＝{S
r,i
|i∈[1,n]}，S
b,i
为标准场景下第i组内容参数，S
r,i
为立体元素所处的场景参数下第i组内容参数；将内容参数关联关系式S
b,i
＝BP(S
b,i
)与场景化融合公式k＝cov([S]
b
,[S]
r
)进行组合转换得到内容参数场景关联式S
r,i
＝BP(S
r,I
,k)，式中，S
r,i
为立体元素所处的场景参数下第i组内容参数，S
r,j
为立体元素...

【专利技术属性】
技术研发人员：唐泰可，廖峪，苏茂才，林仁辉，
申请(专利权)人：成都中轨轨道设备有限公司，
类型：发明
国别省市：