【技术实现步骤摘要】
一种基于云技术的大数据分析系统及方法
本专利技术涉及数据分析
,具体而言,涉及一种基于云技术的大数据分析系统及方法。
技术介绍
近年来,互联网的发展越来越迅速,使用互联网的人也越来越普及,人们在使用互联网进行日常的活动的时候,例如网购,查看节目,信息,商品都会产生大量的数据,而这些数据对于电子商务网站或者互联网媒体类网站来说是非常宝贵的,利用这些大数据的处理分析能得到非常宝贵的商业价值。大数据广泛应用于互联网各项应用中,对网站的价值意义重大,通过海量数据分析和云计算的实现,可以最大化帮助互联网媒体类网站广告系统和电子商务类网站大数据商品推送系统得到最大化的提升。互联网媒体类网站大数据广告根据用户阅读偏好推送,针对海量数据的云计算,通过各种广告形式推送到网站浏览用户,例如应用在商会网;电子商务类网站大数据商品推送给在线购买者,通过分析用户点击行为、购买行为、产品相关性、偏好及使用时间规律推送相应的商品及促销信息,例如应用在品得商城。大数据的出现,正在引发全球范围内深刻的技术与商业变革。在技术上,大数据使从 ...
【技术保护点】
1.一种基于云技术的大数据分析系统,其特征在于,所述系统包括数据采集模块,所述数据采集模块可以根据用户以往历史浏览、购买记录等行为进行数据采集;计算模块,所述数据采集模块采集的数据经过计算后转化为计算机语言;数据库,用于存储所述数据采集模块采集的数据经过所述计算模块转化的计算机语言;操作系统,通过所述操作系统,可以调用所述数据库中存储的信息,并发送数据库中的数据至云计算;云计算模块,接收待计算的数据,并进行计算处理。/n
【技术特征摘要】 【专利技术属性】
1.一种基于云技术的大数据分析系统,其特征在于,所述系统包括数据采集模块,所述数据采集模块可以根据用户以往历史浏览、购买记录等行为进行数据采集;计算模块,所述数据采集模块采集的数据经过计算后转化为计算机语言;数据库,用于存储所述数据采集模块采集的数据经过所述计算模块转化的计算机语言;操作系统,通过所述操作系统,可以调用所述数据库中存储的信息,并发送数据库中的数据至云计算;云计算模块,接收待计算的数据,并进行计算处理。
2.如权利要求1所述的基于云技术的大数据分析系统,其特征在于,所述云计算模块包括:存储器;所述存储器上存储有数据处理程序,所述数据处理程序被所述处理器执行时实现如下步骤:接收步骤:接收所述数据采集模块发送的携带预设类型信息的操作请求,所述预设类型信息包括至少一个信息片段;读取步骤:读取所述预设类型信息中的信息片段,并识别所述信息片段中是否包含调用标识信息;第一执行步骤:当在一信息片段中识别到所述调用标识信息时,将所述信息片段发送给对应的待调用数据库进行数据处理,并获取所述信息片段对应的第一响应结果数据;第二执行步骤:当在一信息片段中未识别到所述调用标识信息时,基于所述信息片段执行所述操作请求对应的操作,并将操作结果作为所述信息片段对应的第二响应结果数据;反馈步骤:将所述预设类型信息中所有信息片段对应的第一响应结果数据和/或第二响应结果数据作为所述操作请求对应的响应结果数据返回至所述数据采集模块;所述数据库用于接收所述云计算模块发送的所述信息片段,根据所述信息片段进行数据处理,并返回数据处理结果至云计算模块。
3.如权利要求2所述的基于云技术的大数据分析系统,其特征在于,所述数据采集模块采用SAS网络爬虫进行数据的采集。
4.如权利要求3所述的基于云技术的大数据分析系统,其特征在于,所述数据采集后,并通过预设数据过滤规则对数据进行过滤,将过滤后的数据作为所述数据采集模块采集到的数据。
技术研发人员:陈浩,曾令敏,邓卓伟,
申请(专利权)人:上海思桂信息技术有限公司,
类型:发明
国别省市:上海;31
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。