一种SMG-MV分布式万能大数据移动技术制造技术

技术编号:21627868 阅读:21 留言:0更新日期:2019-07-17 10:45
本发明专利技术提出了一种SMG‑MV分布式万能大数据移动技术,在分布式框架体系将大块数据分割成为N多小块,在异地通过拼凑组装。无论web端,后台数据存储端,底层通信协议对数据消息进行逻辑封装设计了一套标准的容器,能够方便快速的读取,遍历,分解,再快速的封装转发。无论前后段均可在不改变业务逻辑的基础上对原数据进行读取或修改,转发。使得所有前端,后端有一种通用的数据存储容器。SMG=MV是一个能够运行在分布式系统中,解决万能的数据切片传输移动到另外节点的处理引擎,不仅仅是将数据移动,还可以在异地重新格式化输入,它运行在非阻塞SMG‑AFS分布式存储引擎下,支持多点并发断点续传,且我们在传输过程对原表不加任何的修改。

A SMG-MV Distributed Universal Large Data Mobile Technology

【技术实现步骤摘要】
一种SMG-MV分布式万能大数据移动技术1.
本专利技术涉及网站设计领域,设计出了一种SMG-MV分布式万能大数据移动技术方法。2.
技术介绍
20世纪90年代中期以来,随着以Internet为代表的计算机技术,网络技术和信息技术的迅速发展,加速了世界经济全球化的进程,使世界经济进入了新一轮的全球化阶段,跨入所谓的“网络经济”或“知识经济”时代。网络大数据的运用也飞速发展,实际应用中,传统的mysql越来越不能适应海量数据的增长。我们面料着需要对大表,大文件进行移动迁移到另外一个节点中心.需要快速有效的完成数据的移动复制转换。面对此需求,我们要设计一种方式,满足于对数据库任意表(字段不限,格式固定)进行数据的迁移,并在异地进行分节点组装转换,丢弃mysql方案,因为我们在实际测试中面对大数据,mysql存储远远不能解决需求。3.
技术实现思路
基于以上问题,现提出一种SMG-MV分布式万能大数据移动技术方法,能够解决上述的技术问题。本专利技术提供一种SMG-MV分布式万能大数据移动技术方法,通过用户的访问代码逐个分析编程语言的关键字,进行组合,混合代码,设计出了SMG=MV是一个能够运行在分布式系统中,解决万能的数据切片传输移动到另外节点的处理引擎,不仅仅是将数据移动,还可以在异地重新格式化输入,它运行在非阻塞SMG-AFS分布式存储引擎下,支持多点并发断点续传,且我们在传输过程对原表不加任何的修改。进一步地,所述编程语言为以下语言中的一种或多种:VB,C#,HTML,JAVA,PHP。进一步地,码编译处理后,进行分组织,分模块,分代码段进行统一封装实现自由组合提供给开发者以及普通用户灵活调用,快速编译成SMG-MV分布式万能大数据移动技术。进一步地,通过SMG-MV分布式万能大数据移动技术,在分布式框架体系将大块数据分割成为N多小块,在异地通过拼凑组装。无论web端,后台数据存储端,底层通信协议对数据消息进行逻辑封装设计了一套标准的容器,能够方便快速的读取,遍历,分解,再快速的封装转发。无论前后段均可在不改变业务逻辑的基础上对原数据进行读取或修改,转发。使得所有前端,后端有一种通用的数据存储容器。对数据进行操控。极大的改变编程习惯,解放了程序员开发量。有效的提供劳动生产力。4.附图说明通过参照附图更详细地描述本专利技术的示例性实施例,本专利技术的以上和其它方面及优点将变得更加易于清楚,在附图1中:5.具体实施方式在下文中,现在将参照附图更充分地描述本专利技术,在附图中示出了各种实施例。然而,本专利技术可以以许多不同的形式来实施,且不应该解释为局限于在此阐述的实施例。相反,提供这些实施例使得本公开将是彻底和完全的,并将本专利技术的范围充分地传达给本领域技术人员。在下文中,将参照附图更详细地描述本专利技术的示例性实施例。结合附图1所示,通过代码逐个分析编程语言的关键字,进行组合,混合代码,然后统一编译成可独自运行的程序语言,实现一种SMG-MV分布式万能大数据移动技术方法的表现形式。最终生成SMG=MV是一个能够运行在分布式系统中,解决万能的数据切片传输移动到另外节点的处理引擎.不仅仅是将数据移动,还可以在异地重新格式化输入,它运行在非阻塞SMG-AFS分布式存储引擎下,支持多点并发断点续传,且我们在传输过程对原表不加任何的修改,通过混合编译器最终编译生成能识别HTML代码段并存储至编译服务器。所述编程语言包括但不限于VB,C#,HTML,JAVA,PHP,或其他编程语言。通过代码编译处理后,进行分组织,分模块,分代码段进行统一封装实现自由组合提供给开发者以及普通用户灵活调用,快速编译成满足用户需求的各种功能模块。在分布式框架体系将大块数据分割成为N多小块,在异地通过拼凑组装。无论web端,后台数据存储端,底层通信协议对数据消息进行逻辑封装。通过SMG-MV分布式万能大数据移动技术,设计了一套标准的容器,能够方便快速的读取,遍历,分解,再快速的封装转发。无论前后段均可在不改变业务逻辑的基础上对原数据进行读取或修改,转发。使得所有前端,后端有一种通用的数据存储容器。对数据进行操控。极大的改变编程习惯,解放了程序员开发量。有效的提供劳动生产力。以上所述仅为本专利技术的实施例而已,并不用于限制本专利技术。本专利技术可以有各种合适的更改和变化。凡在本专利技术的精神和原则之内所作的任何修改、等同替换、改进等,均应包含在本专利技术的保护范围之内。本文档来自技高网...

【技术保护点】
1.一种SMG‑MV分布式万能大数据移动技术其特征在于:逐个分析编程语言的关键字,进行组合,混合代码,然后统一编译成可运行的程序语言,设计出了SMG‑MV分布式万能大数据移动技术。SMG‑MV是一个能够运行在分布式系统中,解决万能的数据切片传输移动到另外节点的处理引擎.不仅仅是将数据移动,还可以在异地重新格式化输入.它运行在非阻塞SMG‑AFS分布式存储引擎下.支持多点并发断点续传.且我们在传输过程对原表不加任何的修改。

【技术特征摘要】
1.一种SMG-MV分布式万能大数据移动技术其特征在于:逐个分析编程语言的关键字,进行组合,混合代码,然后统一编译成可运行的程序语言,设计出了SMG-MV分布式万能大数据移动技术。SMG-MV是一个能够运行在分布式系统中,解决万能的数据切片传输移动到另外节点的处理引擎.不仅仅是将数据移动,还可以在异地重新格式化输入.它运行在非阻塞SMG-AFS分布式存储引擎下.支持多点并发断点续传.且我们在传输过程对原表不加任何的修改。2.如权利要求1所述的方法,其特征在于:所述编程语言为以下语言中的一种或多种:VB,C#,HTML,JAVA,PHP。3.如权利要求1或2所述的方法,其特征在于:代码编译处理后,进行分组织,分模块,分...

【专利技术属性】
技术研发人员:艾朝君
申请(专利权)人:阿凡达上海动力科技有限公司
类型:发明
国别省市:上海,31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1