基于可信度面向大数据及普通数据的数据采集方法和系统技术方案

技术编号:13518408 阅读:75 留言:0更新日期:2016-08-12 14:18
本发明专利技术涉及一种数据采集方法和系统,其方法包括:获取采集条件,根据采集条件获取多个目标数据;根据预设特征匹配度对目标数据进行分类,得到数据群体;分别获取对应各目标数据的个体可信度,并根据个体可信度获取数据群体的群体可信度;判断群体可信度是否大于或等于预设值;若是,采集数据群体中对应的目标数据存入目标数据库或大数据存储库。如此,根据群体可信度和预设值对目标数据组成的数据群体进行筛选,当群体可信度大于或等于预设值时才采集对应的目标数据,避免采集到不可靠的数据,提高数据采集的正确率。

【技术实现步骤摘要】
201610164635

【技术保护点】
一种数据采集方法,其特征在于,包括以下步骤:获取采集条件,根据所述采集条件获取多个目标数据;对所述目标数据进行分类,得到数据群体;分别获取对应各目标数据的个体可信度,并根据所述个体可信度获取所述数据群体的群体可信度;判断所述群体可信度是否大于或等于预设值;若是,则采集所述数据群体中对应的目标数据存入目标数据库或大数据存储库。

【技术特征摘要】

【专利技术属性】
技术研发人员:朱定局
申请(专利权)人:华南师范大学
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1