【技术实现步骤摘要】
一种跨境大数据的抓取及分析方法
[0001]本专利技术涉及数据处理
，尤其涉及一种跨境大数据的抓取及分析方法。
技术介绍
[0002]随着物联网技术的快速发展和各国之间的贸易往来的日益频繁，跨境物流行业也得到了迅速发展，但是由于跨境物流中间环节冗杂，运输周期较长，为了提高用户跨境商品的购买体验，需要获取用户购买商品的物流运输信息。
[0003]但目前的跨境电商平台只是体现了用户的购买功能，其体现的功能还不完善，如在用户的购物数据挖掘利用方面，目前的跨境电商平台对用户的购物数据利用率低，导致目前的跨境电商平台智能化水平低，产品运营效率，为了提高跨境电商平台对用户购物数据的利用率，有必要提出一种跨境大数据的抓取或分析的方法用于提高跨境电商对用户购物数据的挖掘、利用，从而提高产品运营效率。
技术实现思路
[0004]为解决上述技术问题，本专利技术提出了一种跨境大数据的抓取及分析方法，与人工智能相结合后减少了海外访问的响应时间，提升了网络爬虫的效率并还增加了网络稳定性，可提高产品运营效率，降低成本。
【技术保护点】
【技术特征摘要】
1.一种跨境大数据的抓取及分析方法，其特征在于：包括，由数据收集、数据分类、数据筛选构成的数据获取模块，且数据获取模块通过深度神经网络连接数据去噪筛选处理模块；并通过人工智能从境内数据中心将规则发送至境外数据中心；通过人工智能爬虫模块从所述境内数据中心爬取数据；通过人工智能爬虫模块从境外数据中心抓取待分析数据；检测数据的类型和多种取值组合下的性能数据和功耗数据，通过数据比较、分析模块，基于所要求的指标，获得对应的计算任务的任务队列；获取待翻译文本以及所述待翻译文本的类别信息，类别信息匹配后在翻译记忆库中确定与所述待翻译文本对适配的待翻译文本，确定所述翻译记忆库中与所述目标语句对应的译文文本为所述待翻译语句对应的译文文本；筛选异常信息，并对异常信息进行标记归档；且数据去噪筛选处理模块连接数据分类统计模块，数据分类统计模块连接数据比较、分析模块，获取算法模型针对数据的...
【专利技术属性】
技术研发人员：杨海花，
申请(专利权)人：祐樘南京软件科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。