关联信息可视化处理系统技术方案

技术编号:13745937 阅读:45 留言:0更新日期:2016-09-23 23:27
本发明专利技术涉及互联网信息处理技术领域,特别涉及关联信息可视化处理系统。本发明专利技术系统包括:关联数据分析模块和关联数据可视化模块,所述关联数据分析模块通过设置字段等方式,从海量的信息中分析出目标主体以及与目标主体直接相关的关联信息,根据直接关联关系抽象出一度关联关系,根据不同一度关联关系中相同的信息单元逐级扩展目标信息的n度关联信息数据;所述关联数据可视化模块在关联数据的基础上使用可视化工具,绘制出目标信息的N度关联关系图谱,并将绘制好的图谱通过客户端提供给用户使用。通过本系统用户可以轻松查阅各个目标信息的关联关系图谱,极大的节省了人工整理和分析资料的成本,减轻从业人员的工作负担,提高了行业的工作效率。

【技术实现步骤摘要】

本专利技术涉及互联网信息处理
,特别涉及关联信息可视化处理系统
技术介绍
今世界早就进入了信息时代,随着信息的爆发式增长和积累,大数据时代已近来临,作为大数据最重要的特点:数据量大和价值密度低却是困扰如此海量数据信息挖掘利用的难题。实际上在纷繁复杂的信息海洋中,某些信息之间的联系往往比与其他信息之间的联系要紧密得多,而这些具有某种紧密联系的信息往往反映的是现实生活中的人与人之间或者团体之间的特定关系,这些特定关系会使其在相关的社会或者经济活动中相互影响或者牵制。针对特定的信息目标,如何分析该目标与其他目标之间的关联关系在很多领域具有更加实际的意义,因为具有关联关系的目标在进行各种活动时往往比单独的简单个体具有更大的影响面,而且具有关联关系的目标在对外建立各种活动时,受到内部的关联关系的相互牵制或者支持,会比简单目标的活动轨迹更加复杂。一般情况下目标信息的关联关联都不是直观可见的,具有隐秘性,传递性、不易被人察觉,目标背景分析、市场调研、市场风险防控、产品推广、广告传播等应用领域为了分析这些隐蔽的关联关系,往往会耗费人们巨大的人力成本,降低相关问题的判断和分析的效率。在这样的背景下,专利技术一种系统自动完成通过数据挖掘在海量的数据信息中分析出与目标信息相关联的信息,并通过数据可视化工具将信息之间的关联关系直观的展示出来提供给广大的用户使用,将极大的便利相关人员的工作。
技术实现思路
本专利技术的目的在于克服现有技术中所存在的上述不足,提供关联信息可视化处理系统,本专利技术系统通过设置字段等方式,从海量的信息中分析出目标主体以及与目标主体直接相关的关联信息,根据直接关联关系成一度关联关系,形成对应的数据记录;根据不同数据记录中的相同的信息单元逐级扩展关联信息;并在关联关系数据的基础上,使用可视化工具,将关联关系可视化、图谱化,为相关的数据分析提供参考,极大的节省了用户用于相关数据分析的人力和时间成本。为实现上述目的,本专利技术关联信息可视化处理系统,包括关联数据分析模块和关联数据可视化模块,所述关联数据分析模块通过设置字段方式,从原始信息中提取出对应信息,将其中一个字段对应的信息作为目标信息,将其他字段对应的信息作为目标信息的一度关联信息,根据不同一度关联关系中相同的信息单元逐级扩展目标信息的n度关联信息数据;所述关联数据可视化模块在关联数据的基础上使用可视化工具,绘制出目标信息的N度关联关系图谱。作为一种优选,所述关联数据分析模块采用Hadoop大数据处理框架的集群架构。进一步的,所述关联数据分析模块采用Hadoop大数据处理框架的集群架构时,包括主节点和从节点,所述主节点将N度关联关系的任务自动切分后分配到从节点上进行自行,并将从节点计算后的结果整合后供给用户使用。进一步的,所述关联数据分析模块包括主节点和从节点,所述主节点将N度关联关系的任务自动切分后分配到从节点上运行,并将从节点计算后的结果
整合后供用户使用。进一步的,所述关联数据分析模块包括数据存储模块,所述数据存储模块用于存储原始数据。进一步的,所述数据存储模块为HDFS分布式文件系统。进一步的,所述所述关联数据分析模块还包括HBase数据库,所述HBase数据库用于存储N度关联数据。进一步的,所述关联数据可视化模块绘制目标信息关联图谱时,采用yEd、D3、Google Chart API或者jcharts等可视化工具。进一步的,所述系统包含客户端,所述客户端与所述关联数据分析模块相连,所述客户端从所述关联数据分析模块读取N度关联数据。进一步的,所述系统包含客户端,所述客户端通过与所述关联数据可视化模块相连,所述客户端从所述关联数据可视化模块读取目标信息的关联关系图谱。进一步的,所述客户端提供Web接口供用户读取目标信息的关联关系图谱。与现有技术相比,本专利技术的有益效果:本关联信息可视化处理系统,本专利技术系统包括:关联数据分析模块和关联数据可视化模块,所述关联数据分析模块通过设置字段等方式,从海量的信息中分析出目标主体以及与目标主体直接相关的关联信息,根据直接关联关系抽象出一度关联关系,根据不同一度关联关系中相同的信息单元逐级扩展目标信息的n度关联信息数据;所述关联数据可视化模块在关联数据的基础上使用可视化工具,绘制出目标信息的N度关联关系图谱,并将绘制好的图谱通过客户端提供给用户使用。通过本系统用户可以轻
松查阅各个目标信息的关联关系图谱,极大的节省了人工整理和分析资料的成本,减轻从业人员的工作负担,提高了行业的工作效率。附图说明:图1是关联信息可视化处理系统的系统结构示意图。图2为本专利技术系统关联信息计算原理示意图。图3为实施例1关联数据分析模块的架构示意图。图4为实施例1字段提取的数据记录示意图。图5为实施例1的一度关联关系示意图。图6为实施例1的二度关联关系示意图。图7为实施例1中以a为目标信息的三度关联关系示意图。图8为实施例1中以e为目标信息的三度关联关系示意图。图9为实施例1中以h为目标信息的三度关联关系示意图。图10为以a为0级节点可视化3度关联图谱示意图。图11为以e为0级节点的可视化3度关联图谱示意图。图12为以h为0级节点的可视化3度关联图谱示意图。具体实施方式下面结合试验例及具体实施方式对本专利技术作进一步的详细描述。但不应将此理解为本专利技术上述主题的范围仅限于以下的实施例,凡基于本
技术实现思路
所实现的技术均属于本专利技术的范围。为实现上述目的,本专利技术关联信息可视化处理系统,如图1所示:包括关联数据分析模块和关联数据可视化模块,所述关联数据分析模块通过设置字段方式,从原始信息中提取出对应信息,将其中一个字段对应的信息作为目标信
息,将其他字段对应的信息作为目标信息的一度关联信息,根据不同一度关联关系中相同的信息单元逐级扩展目标信息的n度关联信息数据(其中n>1),关联关系的计算原理如图2所示;所述关联数据可视化模块在关联数据的基础上使用可视化工具,绘制出目标信息的N度关联关系图谱(其中N≥1)。作为一种优选,所述关联数据分析模块采用Hadoop大数据处理框架的集群架构。进一步的,所述关联数据分析模块采用Hadoop大数据处理框架的集群架构时,包括主节点和从节点,所述主节点将N度关联关系的任务自动切分后分配到从节点上进行自行,并将从节点计算后的结果整合后供给用户使用。本专利技术关联关系的计算以云计算平台的大数据处理框架来实现,可以同时对海量的目标并行的处理,也就是说,从基础数据到N度关联信息的计算,都是多个目标同时并列处理。可以看出随着关联度N的逐级增加,计算的复杂度和数据维度不断增加,而这样复杂的数据处理过程通过云计算平台的大数据处理框架(比如Hadoop下的MapReduce和Spark等大数据处理框架)得以顺利快速的实现;MapReduce和Spark等大数据处理框架能够使用户只需要按照计算框架提供的接口设计上层指令,在不关心底层运行过程的情况下,处理框架根据上层指令自动调用内部的相关资源,并且将任务自动切分,分配到内部的不同节点进行处理,实现了数据的并行高效计算,在处理完成后还自动将处理结果整合后提供给用户;任务完成过程高度自动化,极大的节省了人力,提高了数据的处理效率。进一步的,所述关联数据分析模块包括主本文档来自技高网
...

【技术保护点】
关联信息可视化处理系统,其特征在于,包括关联数据分析模块和关联数据可视化模块,所述关联数据分析模块通过设置字段方式,从原始信息中提取出对应信息,将其中一个字段对应的信息作为目标信息,将其他字段对应的信息作为目标信息的一度关联信息,根据不同一度关联关系中相同的信息单元逐级扩展目标信息的n度关联信息数据;所述关联数据可视化模块在关联数据的基础上使用可视化工具,绘制出目标信息的N度关联关系图谱。

【技术特征摘要】
1.关联信息可视化处理系统,其特征在于,包括关联数据分析模块和关联数据可视化模块,所述关联数据分析模块通过设置字段方式,从原始信息中提取出对应信息,将其中一个字段对应的信息作为目标信息,将其他字段对应的信息作为目标信息的一度关联信息,根据不同一度关联关系中相同的信息单元逐级扩展目标信息的n度关联信息数据;所述关联数据可视化模块在关联数据的基础上使用可视化工具,绘制出目标信息的N度关联关系图谱。2.如权利要求1所述的系统,其特征在于,所述关联数据分析模块采用Hadoop大数据处理框架的集群架构。3.如权利要求2所述的系统,其特征在于,所述关联数据分析模块包括主节点和从节点,所述主节点将N度关联关系的任务自动切分后分配到从节点上运行,并将从节点计算后的结果整合后供用户使用。4.如权利要求3所述的系统,其特征在于,所述关联数据分析模块包括数据存储模块,所述数据存储模块用于存储原始数据。5.如权利...

【专利技术属性】
技术研发人员:何宏靖范东来
申请(专利权)人:成都数联铭品科技有限公司
类型:发明
国别省市:四川;51

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1