一种可视化的容器数据协作挖掘系统技术方案

本发明专利技术提供了一种可视化的容器数据协作挖掘系统，包括：权限管理模块，用于基于人机交互方式管理用户的协作权限，获得权限管理结果；协作控制模块，用于基于所述权限管理结果渲染出用户协作控制界面；数据挖掘模块，用于基于所述用户协作控制界面对容器数据进行协作挖掘，获得挖掘结果；数据展示模块，用于基于用户选择的应用场景将所述挖掘结果可视化展示至目标物理机；用以实现对海量数据的多方协作数据挖掘和数据协作处理可视化。作数据挖掘和数据协作处理可视化。作数据挖掘和数据协作处理可视化。

A visual container data collaborative mining system

【技术实现步骤摘要】
一种可视化的容器数据协作挖掘系统


[0001]本专利技术涉及数据挖掘
，特别涉及一种可视化的容器数据协作挖掘系统。

技术介绍

[0002]目前，随着信息化速度的加快，各种数据都呈现出爆发性的增长，进而质变成大数据。大数据在运营、策划、营销等方面的应用，需要不同层面的技术指标，数据挖掘成为智慧企业发展的所迫切需要迈出的重要一步。基于海量数据的挖掘技术使企业可以深化发掘大数据的发展潜力，应用以往无法应用的商业信息，从而发现大量的商机。
[0003]但是，面对如此庞大而复杂的数据，现存的数据分析挖掘类产品主要是仅面向单一类型的关系数据或只能实现与单用户同时交互的功能性产品，存在应用操作复杂、对操作人员的技术素质的要求高、多功能产品整合利用成本高、无法实现多方协作等不足，制约了中小企业对大数据技术的应用。因此，站在对大数据全局认识的角度、深入中小企业的大数据应用需求，实现多方协作数据挖掘和数据协作处理可视化对推动大数据及相关行业的发展具有非常重要意义。
[0004]因此，本专利技术提出一种可视化的容器数据协作挖掘系统。

技术实现思路

[0005]本专利技术提供一种可视化的容器数据协作挖掘系统，用以实现对海量数据的多方协作数据挖掘和数据协作处理可视化。
[0006]本专利技术提供一种可视化的容器数据协作挖掘系统，包括：
[0007]权限管理模块，用于基于人机交互方式管理用户的协作权限，获得权限管理结果；
[0008]协作控制模块，用于基于所述权限管理结果渲染出用户协作控制界面；
[0009]数据挖掘模块，用于基于所述用户协作控制界面对容器数据进行协作挖掘，获得挖掘结果；
[0010]数据展示模块，用于基于用户选择的应用场景将所述挖掘结果可视化展示至目标物理机。
[0011]优选的，所述权限管理模块，包括：
[0012]交互实现单元，用于基于前端应用程序编程接口建立所有用户对应的物理机与所述容器数据协作挖掘系统之间的交互关系；
[0013]权限验证单元，用于基于所述交互关系对所有物理机进行权限验证，并接收所述物理机反馈的验证反馈信息；
[0014]权限管理单元，用于对所述验证反馈信息进行校验，为校验成功的验证反馈信息对应的物理机赋予协作权限，获得权限管理结果。
[0015]优选的，所述协作控制模块，包括：
[0016]结果解析单元，用于解析所述权限管理结果，将所述权限管理结果中获得协作权限的物理机作为目标物理机；
[0017]规则获取单元，用于基于互联网操作界面获取对应用户输入的个性化规则；
[0018]协议确定单元，用于基于所述个性化规则和对应的物理机信息确定对应的传输协议；
[0019]通道建立单元，用于基于所述传输协议建立对应物理机和所述容器数据协作挖掘系统之间的交互通道；
[0020]界面渲染单元，用于基于所述交互通道和预设的渲染方式渲染出对应的动态交互界面，将所述动态交互界面作为对应的用户协作控制界面。
[0021]优选的，所述数据挖掘模块，包括：
[0022]框架构建单元，用于基于所述用户协作控制界面接收用户输入的挖掘规则和用户操作构建的挖掘算法框架；
[0023]算法生成单元，用于基于所述挖掘规则和所述挖掘算法框架生成对应的挖掘算法；
[0024]标准设置单元，用于设置所述挖掘算法对应的载入标准；
[0025]第一构建单元，用于构建出所述挖掘算法对应的算法动态组件；
[0026]挖掘测试单元，用于基于所述载入标准将所述算法动态组件载入至容器的算法接口进行挖掘测试，获得对应的测试挖掘结果；
[0027]测试检验单元，用于检验所述测试挖掘结果是否满足要求，若是，则将对应的挖掘算法作为对应的最优挖掘算法；
[0028]算法迭代单元，用于当所述测试挖掘结果不满足要求时，则基于所述测试挖掘结果对所述挖掘算法进行迭代并对最新获得的测试挖掘结果进行检验，直至最新获得的测试挖掘结果满足要求时，则将最新迭代获得的挖掘算法作为对应的最优挖掘算法；
[0029]第二构建单元，用于基于所述最优挖掘算法构建出对应的最优算法动态组件；
[0030]算法同步单元，用于基于所述最优算法动态组件将所述最优挖掘算法传输至容器的算法接口和容器数据协作挖掘系统，并记录所述最优算法动态组件的载入时刻；
[0031]线程生成单元，用于基于所有最优挖掘算法对应的载入时刻生成对应的协作挖掘线程；
[0032]数据挖掘单元，用于基于所述协作挖掘线程对容器数据进行挖掘，获得挖掘结果。
[0033]优选的，所述数据挖掘单元，包括：
[0034]规则确定子单元，用于基于所述协作挖掘线程中的挖掘算法确定出对应的挖掘规则；
[0035]数据挖掘子单元，用于基于所述挖掘规则对所述容器数据进行挖掘，获得对应的挖掘结果。
[0036]优选的，所述数据挖掘子单元，包括：
[0037]数据采集子单元，用于基于所述挖掘规则对所述容器数据进行海量采集，获得初始挖掘数据集合；
[0038]来源确定子单元，用于基于所述初始挖掘数据集合中的数据来源确定出对应的统一资源定位符；
[0039]域名转换子单元，用于基于预设转换方法将所述统一资源定位符的域名进行转换，获得对应的域名数组表；
[0040]路径去重子单元，用于将所述域名数组表转换为对应的寻址路径，对所述寻址路径进行去重处理，获得对应的去重路径集合；
[0041]逆向转换子单元，用于将所述去重路径集合进行逆向转换获得对应的挖掘路径；
[0042]二次挖掘子单元，用于基于所述挖掘路径从所述初始挖掘数据集合中挖掘出对应的数据作为挖掘处理数据；
[0043]数据融合子单元，用于将基于每个挖掘算法获得的挖掘处理数据与所述协作挖掘线程结合，获得对应的挖掘处理数据集合；
[0044]数据过滤子单元，用于基于所述挖掘处理数据构建出对应的共现矩阵，基于所述共现矩阵对所述挖掘处理数据集合进行过滤，获得对应的挖掘结果。
[0045]优选的，所述数据过滤子单元，包括：
[0046]矩阵构建子单元，用于构建出所述挖掘处理数据中单位数据的共现矩阵；
[0047]位置确定子单元，用于确定出所述挖掘处理数据中每个单位数据的位置信息；
[0048]信息融合子单元，用于将所述单位数据的位置信息和所述共现矩阵融合，获得对应的共现位置矩阵；
[0049]数据处理子单元，用于基于所述位置共现矩阵将所述挖掘处理数据中存在的重复单位数据进行删除，获得对应的最终挖掘数据，将所述最终挖掘数据和所述共现位置矩阵联合存储为对应的挖掘结果。
[0050]优选的，所述数据展示模块，包括：
[0051]模板构建单元，用于基于用户选择的应用场景在所述用户协作控制界面构建出对应的可视化布局模板；
[0052]结果展示单元，用于将挖掘结果传输至本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种可视化的容器数据协作挖掘系统，其特征在于，包括：权限管理模块，用于基于人机交互方式管理用户的协作权限，获得权限管理结果；协作控制模块，用于基于所述权限管理结果渲染出用户协作控制界面；数据挖掘模块，用于基于所述用户协作控制界面对容器数据进行协作挖掘，获得挖掘结果；数据展示模块，用于基于用户选择的应用场景将所述挖掘结果可视化展示至目标物理机。2.根据权利要求1所述的一种可视化的容器数据协作挖掘系统，其特征在于，所述权限管理模块，包括：交互实现单元，用于基于前端应用程序编程接口建立所有用户对应的物理机与所述容器数据协作挖掘系统之间的交互关系；权限验证单元，用于基于所述交互关系对所有物理机进行权限验证，并接收所述物理机反馈的验证反馈信息；权限管理单元，用于对所述验证反馈信息进行校验，为校验成功的验证反馈信息对应的物理机赋予协作权限，获得权限管理结果。3.根据权利要求1所述的一种可视化的容器数据协作挖掘系统，其特征在于，所述协作控制模块，包括：结果解析单元，用于解析所述权限管理结果，将所述权限管理结果中获得协作权限的物理机作为目标物理机；规则获取单元，用于基于互联网操作界面获取对应用户输入的个性化规则；协议确定单元，用于基于所述个性化规则和对应的物理机信息确定对应的传输协议；通道建立单元，用于基于所述传输协议建立对应物理机和所述容器数据协作挖掘系统之间的交互通道；界面渲染单元，用于基于所述交互通道和预设的渲染方式渲染出对应的动态交互界面，将所述动态交互界面作为对应的用户协作控制界面。4.根据权利要求1所述的一种可视化的容器数据协作挖掘系统，其特征在于，所述数据挖掘模块，包括：框架构建单元，用于基于所述用户协作控制界面接收用户输入的挖掘规则和用户操作构建的挖掘算法框架；算法生成单元，用于基于所述挖掘规则和所述挖掘算法框架生成对应的挖掘算法；标准设置单元，用于设置所述挖掘算法对应的载入标准；第一构建单元，用于构建出所述挖掘算法对应的算法动态组件；挖掘测试单元，用于基于所述载入标准将所述算法动态组件载入至容器的算法接口进行挖掘测试，获得对应的测试挖掘结果；测试检验单元，用于检验所述测试挖掘结果是否满足要求，若是，则将对应的挖掘算法作为对应的最优挖掘算法；算法迭代单元，用于当所述测试挖掘结果不满足要求时，则基于所述测试挖掘结果对所述挖掘算法进行迭代并对最新获得的测试挖掘结果进行检验，直至最新获得的测试挖掘结果满足要求时，则将最新迭代获得的挖掘算法作为对应的最优挖掘算法；
第二构建单元，用于基于所述最优挖掘算法构建出对应的最优算法动态组件；算法同步单元，用于基于所述最优算法动态组件将所述最优挖掘算法传输至容器的算法接口和容器数据协作挖掘系统，并记录所述最优算法动态组件的载入时刻；线程生成单元，用于基于所有最优挖掘算法对应的载入时刻生成对应的协作挖掘线程；数据挖掘单元，用于基于所述协作挖掘线程对容器数据进行挖掘，获得挖掘结果。5.根据权利要求4所述的一种可视化的容器数据协作挖掘系统，...

【专利技术属性】
技术研发人员：王军平，
申请(专利权)人：北京赛博云睿智能科技有限公司，
类型：发明
国别省市：