一种多源数据融合的存储优化方法及系统技术方案

本发明专利技术公开了一种多源数据融合的存储优化方法及系统，涉及数据存储与管理技术领域，该方法包括：接收包含目标索引任务类型、需求数据属性和需求数据源的存储优化请求，采集待存储多源数据，进行索引标记生成数据索引标签，按需求数据源分组并获得具有唯一标识的多组数据，对数据进行高层语义和二进制语义标准表格排列生成一、二级排列结果，最后根据相关结果对数据进行压缩存储。解决了现有技术多源数据因来源复杂、格式和语义多样导致的索引规则不清晰致使查询效率低且结果不准确，以及现有压缩方法无法有效处理多源数据造成压缩效果差和存储空间浪费的技术问题，达到了提高数据查询效率和存储效率，降低了存储成本的技术效果。

【技术实现步骤摘要】

本申请涉及数据存储与管理，尤其涉及一种多源数据融合的存储优化方法及系统。

技术介绍

1、在多源数据存储管理场景下，多源数据的复杂性和多样性使得存储优化问题尤为突出，实现高效的数据融合与存储，更好满足数据管理和利用的需求，成为解决多源数据存储至关重要的环节。传统的多源数据存储方式，往往较为混乱和低效，仅依赖于简单的分类或有限的索引策略，对多源数据的整体规划不足，缺乏对数据属性和来源的深入分析和整合，难以全面准确地应对数据的格式和语义差异，在存储空间利用上，存在不合理的情况，导致大量空间浪费，而关键数据存储不足，对于存储优化方案的制定较为简单和固定，不能很好应对多源数据不断变化的实际情况。

2、现阶段相关技术中，存在多源数据因来源复杂、格式和语义多样导致的索引规则不清晰致使查询效率低且结果不准确，以及现有压缩方法无法有效处理多源数据造成压缩效果差和存储空间浪费的技术问题。

技术实现思路

1、本申请通过提供一种多源数据融合的存储优化方法及系统，采用接收包含目标索引任务类型、需求数据属性和需求数据源的存储本文档来自技高网...

【技术保护点】

1.一种多源数据融合的存储优化方法，其特征在于，包括：

2.如权利要求1所述的方法，其特征在于，根据所述目标索引任务类型，对所述待存储多源数据进行索引标记，生成数据索引标签，包括：

3.如权利要求1所述的方法，其特征在于，根据所述数据索引标签、所述多个数据来源唯一标识、所述一级待存储多源数据表格排列结果和所述二级待存储多源数据表格排列结果，对所述待存储多源数据进行压缩存储，包括：

4.如权利要求3所述的方法，其特征在于，根据所述多个一级多源数据分布单元格坐标、所述数据索引标签、所述多个数据来源唯一标识、所述二级多源数据分布单元格坐标对所述待存储多源数据...

【技术特征摘要】

1.一种多源数据融合的存储优化方法，其特征在于，包括：

2.如权利要求1所述的方法，其特征在于，根据所述目标索引任务类型，对所述待存储多源数据进行索引标记，生成数据索引标签，包括：

3.如权利要求1所述的方法，其特征在于，根据所述数据索引标签、所述多个数据来源唯一标识、所述一级待存储多源数据表格排列结果和所述二级待存储多源数据表格排列结果，对所述待存储多源数据进行压缩存储，包括：

4.如权利要求3所述的方法，其特征在于，根据所述多个一级多源数据分布单元格坐标、所述数据索引标签、所述多个数据来源唯一标识、所述二级多源数据分布单元格坐标对所述待...

【专利技术属性】
技术研发人员：李庭育，陈育鸣，王开屏，齐元辅，
申请(专利权)人：江苏华存电子科技有限公司，
类型：发明
国别省市：