【技术实现步骤摘要】
一种海量数据快速增量迁移的技术处理系统
本专利技术涉及一种海量数据快速增量迁移的技术处理系统。
技术介绍
海量数据快速增量迁移的技术。因本电费数据分析与风险预警系统计算需要得到营销数据库实时数据和海量历史数据的支撑，这就对数据库性能提出了更高的要求，而传统的关系型数据库存储能力有限，扩展能力又不强，已不能满足大规模数据的存储和访问需要。为满足系统计算需要，需解决数据从营销系统单点数据库系统到分布式数据库系统增量迁移问题。而从单点数据库系统向分布式数据库系统转换时遇到的首要问题就是数据切分问题，即按照什么算法把数据切分到不同的物理节点上。本系统采用了一种基于范围切分和哈希切分的组合算法。全局上，数据按增量区间进行切分，切分的片段不是分布在一个数据节点，而是一个节点组内；局部上，也就是在节点组内，片段会再按简单哈希方式均匀分布到组内各数据节点上。迁移技术方案上，本系统针对单点数据库系统自增主键不唯一问题，自研了一种全局序列生成方案，通过维护一个全局序列表来生成自增长主键，从而赋予系统从传统数据库快速增量迁移的功能，为电费数据分析与风险预警的实时计算提供支撑。专利技术内...
【技术保护点】
1.一种海量数据快速增量迁移的技术处理系统，其主要构造有：算法神经元钩针（1）、钩针卡脚（11）、芯片储存芯片集成盒（2）、侧神经元钩式算法神经元槽（21）、针位储存腔（22）、定位数据片（23）、插芯片夹（3）、无机硅晶块（31）、算法组合芯片（32）、钩式算法神经元槽（33）、槽盒网络构成脚（34），其特征在于：芯片储存芯片集成盒（2）内等间距设有多个针位储存腔（22）；所述的芯片储存芯片集成盒（2）两末端各设有侧神经元钩式算法神经元槽（21），侧神经元钩式算法神经元槽（21）内侧固定有定位数据片（23）；每个所述的针位储存腔（22）内均背向插入有两枚所述的算法神经元钩...
【技术特征摘要】
1.一种海量数据快速增量迁移的技术处理系统，其主要构造有：算法神经元钩针（1）、钩针卡脚（11）、芯片储存芯片集成盒（2）、侧神经元钩式算法神经元槽（21）、针位储存腔（22）、定位数据片（23）、插芯片夹（3）、无机硅晶块（31）、算法组合芯片（32）、钩式算法神经元槽（33）、槽盒网络构成脚（34），其特征在于：芯片储存芯片集成盒（2）内等间距设有多个针位储存腔（22）；所述的芯片储存芯片集成盒（2）两末端各设有侧神经元钩式算法神经元槽（21），侧神经元钩式算法神经元槽（21）内侧固定有定位数据片（23）；每个所述的针位储存腔（22）内均背向插入有两枚所述的算法神经元钩针（1），所述的算法神经元钩针（1）一端弯折，另外一端末设有钩针卡脚（11）；所述的槽盒网络构成脚（34）内侧边设有凹槽腔，且此凹槽腔与定位数据片（23）的顶部相匹配、吻合；所述的算法组合芯片（32）内铣有钩式算法神经元槽（33），所述的钩式算法神经元槽（33）与钩针卡脚（11）相匹配...
【专利技术属性】
技术研发人员：刘晓华，杨志杰，席小刚，张黎新，汪振东，柏青，高俊成，徐新宇，李均委，薛建德，
申请(专利权)人：国网新疆电力有限公司，国网新疆电力有限公司电力科学研究院，新疆信息产业有限责任公司，
类型：发明
国别省市：新疆,65
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。