一种移动端数据采集方法技术

技术编号:24863098 阅读:38 留言:0更新日期:2020-07-10 19:13
本发明专利技术涉及数据处理技术领域,具体涉及一种移动端数据采集方法,包括获取指定的区域位置、选择对应的平台类型、选择对应的浏览器类型,通过移动端验证码完成登录,并设置浏览器的位置信息、向不同的移动端应用平台发送请求、解析Performance Log数据,获取响应数据、获取响应,针对不同的平台解析响应数据。本发明专利技术的有益效果:基于浏览器来完成与移动应用的交互,根据对应的应用平台类型来,通过与浏览器的交互,完成手机验证登录,通过Performance Log获取浏览器请求不同平台的操作日志,解析Performance Log解析应用响应数据,完成数据采集,减少人为干预,能很好的完成对应平台的数据采集,能做到所见即所得的采集效果,性能及稳定性好。

【技术实现步骤摘要】
一种移动端数据采集方法
本专利技术涉及数据处理
,具体涉及一种移动端数据采集方法。
技术介绍
随着移动互联网产品的快速发展,移动用户数据已经超过桌面互联网用户数量,在传统的桌面互联网环境中,已经存在数据采集方案来实现针对一个站点的所有数据或不同站点的相关数据的采集,但是在移动互联网环境下,由于自身的特点,传统的数据采集方案不能直接使用,基于以上特点,移动端数据采集软件在桌面互联网数据采集的基础上,通过移动端数据请求分析,模拟移动端APP,安全、稳定、高效的采集移动端平台(饿了么、美团、拼多多和微信)数据,为相关应用提供数据支撑服务。目前,现有互联网的数据采集软件主要是将互联网上的网页下载到本地形成一个互联网内容的镜像备份,按照一定的规则,采集数据。然而伴随智能手机的普及,应用软件(APP)取代网页,传统的互联网数据采集已经不能满足大数据应用需求,传统的数据采集针对HTML进行解析,无法做到与应用交互,基于以上,移动端数据采集软件针对手机移动端应用进行数据采集和交互,指定采集的平台类型,按照特定的地理位置采集区域内可用的数据并存储。本文档来自技高网...

【技术保护点】
1.一种移动端数据采集方法,其特征在于,包括如下步骤:/n步骤1)获取指定的区域位置;/n步骤2)选择对应的平台类型;/n步骤3)选择对应的浏览器类型,通过移动端验证码完成登录,并设置浏览器的位置信息;/n步骤4)向不同的移动端应用平台发送请求;/n步骤5)解析Performance Log数据,获取响应数据;/n步骤6)获取响应,针对不同的平台解析响应数据。/n

【技术特征摘要】
1.一种移动端数据采集方法,其特征在于,包括如下步骤:
步骤1)获取指定的区域位置;
步骤2)选择对应的平台类型;
步骤3)选择对应的浏览器类型,通过移动端验证码完成登录,并设置浏览器的位置信息;
步骤4)向不同的移动端应用平台发送请求;
步骤5)解析PerformanceLog数据,获取...

【专利技术属性】
技术研发人员:周先东朱静轩束义志
申请(专利权)人:中新网络信息安全股份有限公司
类型:发明
国别省市:安徽;34

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1