基于MongoDB的答题数据统计方法及装置、存储介质制造方法及图纸

技术编号:23084959 阅读:28 留言:0更新日期:2020-01-11 01:06
本发明专利技术实施例公开一种基于MongoDB的答题数据统计方法及装置、存储介质,其中方法包括如下步骤:将终端应用中的原始用户答题数据分批从MongoDB同步至数据仓库Hive的数据表中,在数据仓库Hive中统计原始用户答题数据对应的答题正确率,将答题正确率存入结果表中,将Hive中的结果表中的数据写入Mysql中,以便从Mysql中查询结果表中的数据。采用本发明专利技术,在适应大数据增长的前提下,可以提高答题正确率统计的效率,通过将统计结果写入Mysql中可以有效地提高统计结果的查询性能。

The statistical method, device and storage medium of answer data based on mongodb

【技术实现步骤摘要】
基于MongoDB的答题数据统计方法及装置、存储介质
本专利技术涉及计算机
,尤其涉及一种基于MongoDB的答题数据统计方法及装置、存储介质。
技术介绍
在各种模拟或真实答题考试的终端应用中均涉及答题正确率的统计以及答题统计结果的查询,例如在驾考终端应用中通常考驾照答题信息存储在mysql数据库中,当数据库答题记录表里数据量不多时,可以直接在上面统计计算每道题的答题正确率。但随着业务的增长,记录达到数千万以上,每次统计就会变得异常缓慢,效率很差。
技术实现思路
本专利技术实施例提供一种基于MongoDB的答题数据统计方法及装置、存储介质,可以在适应大数据增长的前提下,提高答题正确率统计的效率和统计结果的查询性能。本专利技术实施例第一方面提供了一种基于MongoDB的答题数据统计方法,可包括:将终端应用中的原始用户答题数据分批从MongoDB同步至数据仓库Hive的数据表中;在数据仓库Hive中统计原始用户答题数据对应的答题正确率,将答题正确率存入结果表中;将Hive中的结果表中的数据写本文档来自技高网...

【技术保护点】
1.一种基于MongoDB的答题数据统计方法,其特征在于,包括:/n将终端应用中的原始用户答题数据分批从MongoDB同步至数据仓库Hive的数据表中;/n在所述数据仓库Hive中统计所述原始用户答题数据对应的答题正确率,将所述答题正确率存入结果表中;/n将所述Hive中的结果表中的数据写入Mysql中,以便从所述Mysql中查询所述结果表中的数据。/n

【技术特征摘要】
1.一种基于MongoDB的答题数据统计方法,其特征在于,包括:
将终端应用中的原始用户答题数据分批从MongoDB同步至数据仓库Hive的数据表中;
在所述数据仓库Hive中统计所述原始用户答题数据对应的答题正确率,将所述答题正确率存入结果表中;
将所述Hive中的结果表中的数据写入Mysql中,以便从所述Mysql中查询所述结果表中的数据。


2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在数据仓库Hive中创建数据表。


3.根据权利要求1所述的方法,其特征在于,所述将终端应用中的原始用户答题数据分批从MongoDB同步至数据仓库Hive的数据表中,包括:
基于同步周期从MongoDB中存储的终端应用中的原始用户答题数据中选取相关的答题信息数据;
对所述答题信息数据进行拼接、压缩后上传至数据仓库Hive的数据表中。


4.根据权利要求3所述的方法,其特征在于,所述对所述答题信息数据进行拼接、压缩后上传至数据仓库Hive的数据表中,包括:
将所述答题信息数据按照hdfs数据文件的格式拼接,并将拼接后的数据写入数据文件中进行压缩;
调用WebHDFSRESTAPI将压缩后的数据文件上传至数据仓库Hive的数据表中。


5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据输入的调用参数,从所述Mysql中返回相匹配的查询结果。


6.一种基于MongoDB的答题数据统计装置,其特征...

【专利技术属性】
技术研发人员:梁涌吴峰郭伟
申请(专利权)人:上海易点时空网络有限公司
类型:发明
国别省市:上海;31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1