聚合互联网内容的方法及系统技术方案

本发明专利技术公开了一种聚合互联网内容的方法及系统，所述聚合互联网内容的方法包括步骤云端服务器定时启动互联网数据抓取动作，自动抓取互联网数据，获取互联网数据内容；云端服务器对获取的互联网数据内容进行分析，分类聚合获取的互联网数据内容，并确认数据内容的合法性和真实性；云端服务器对已分类聚合且确认后的互联网数据内容进行整合并存储。本发明专利技术还提出一种应用所述方法的聚合互联网内容的系统。上述聚合互联网内容的方法及系统可实现对互联网各种内容智能化的数据抓取和分析聚合，处理流程简化、操作简单，更适用于移动互联网，且系统运行状况可实现自动化实时监测，更加智能。

【技术实现步骤摘要】
聚合互联网内容的方法及系统
本专利技术涉及电子信息
，特别是涉及一种聚合互联网内容的方法及系统。
技术介绍
随着互联网技术的飞速发展，传统的PC互联网技术已逐渐被移动互联网技术所取代，智能手机、平板电脑等可移动智能设备的普及和进步，使人们可以通过移动互联网更方便地获取信息。互联网包括了各种知识，包括音乐，图书，动漫，电视剧，动漫，公开课，演讲等各种海量数据，种类繁多，内容丰富。对于这些庞大的数据资源，互联网公司都会采用内容聚合的方式将互联网内容呈现给用户。但在实际应用中，目前的互联网内容聚合系统都比较偏向传统的PC互联网公司，若将该互联网内容聚合系统应用在移动互联网公司中，会导致互联网数据抓取不便捷，数据分析管理步骤繁琐，聚合效果不智能，系统监测不灵敏。因此，如何开发适合于移动互联网公司的聚合互联网内容的方法及系统是目前亟待解决的技术问题。
技术实现思路
鉴于上述状况，有必要提供一种克服上述问题或者至少部分地解决上述问题的聚合互联网内容的方法及系统。根据本专利技术一实施例的聚合互联网内容的方法，包括以下步骤：云端服务器定时启动互联网数据抓取动作，自动抓取互联网数据，获取互联网数据内容；云端服务器对获取的互联网数据内容进行分析，分类聚合获取的互联网数据内容，并确认数据内容的合法性和真实性；云端服务器对已分类聚合且确认后的互联网数据内容进行整合并存储。根据本专利技术实施例的聚合互联网内容的方法，通过云端服务器定时启动互联网数据抓取动作，自动抓取互联网数据，获取互联网数据内容，然后对互联网数据内容进行分析，分类聚合获取的互联网数据内容，并确认数据内容的合法性和真实性，最后对已分类聚合且确认后的互联网数据内容进行整合并存储，可实现对互联网各种内容智能化的数据抓取和分析聚合，处理流程简化、操作简单，更适用于移动互联网，且系统运行状况可实现自动化实时监测，更加智能。另外，根据本专利技术上述实施例的聚合互联网内容的方法，还可以具有如下附加的技术特征：进一步地，在本专利技术的一个实施例中，所述云端服务器包括智能数据抓取工具，所述智能数据抓取工具用于自动抓取互联网数据，获取互联网数据内容。进一步地，在本专利技术的一个实施例中，所述智能数据抓取工具含有关键字排除程序，所述关键字排除程序用于所述智能数据抓取工具发起互联网数据抓取请求时，排除涉及虚假、色情的非法信息。进一步地，在本专利技术的一个实施例中，所述云端服务器还包括智能数据分析聚合工具，所述智能数据分析聚合工具用于自动分析所述智能数据抓取工具抓取的互联网数据内容，对获取的互联网数据内容进行分类聚合，并再次确认数据内容的合法性和真实性。进一步地，在本专利技术的一个实施例中，所述云端服务器还包括智能数据整合存储工具，所述智能数据整合存储工具用于对已分类聚合且确认后的互联网数据内容进行整合并存储。进一步地，在本专利技术的一个实施例中，所述聚合互联网内容的方法进一步包括系统运行状况监控方法，包括以下步骤：云端服务器自动实时获取系统运行数据；云端服务器对获取的系统运行数据运行监控分析；云端服务器系统异常运行状况进行处理。进一步地，在本专利技术的一个实施例中，所述云端服务器进一步包括系统运行状态数据获取工具、系统运行状态数据分析工具、系统异常信息发送工具和异常处理工具，所述运行状态数据获取工具自动实时获取系统运行数据，所述运行状态数据分析工具对获取的数据运行分析及处理，所述运行状态数据分析工具进一步根据分析的结果判断系统是否处于正常运行状态，如果系统处于正常运行状态，则所述云端服务器继续进行监控，如果系统处于异常运行状态，则所述系统异常信息发送工具发出异常警告，将异常信息发送至所述异常处理工具，并启动相应的预案处理机制。本专利技术的另一个实施例提出一种聚合互联网内容的系统。根据本专利技术实施例的聚合互联网内容的系统，应用上述方法，上述聚合互联网内容的系统包括智能数据抓取单元、智能数据分析聚合单元和数据整合存储单元，所述智能数据抓取单元自动抓取互联网数据，获取互联网数据内容，所述智能数据抓取单元还包括关键字排除单元，所述关键字排除单元用于所述智能数据抓取模块发起互联网数据获取请求时，排除涉及虚假、色情等非法信息，所述智能数据分析聚合单元自动分析所述智能数据抓取单元抓取的互联网数据内容，对抓取的互联网数据内容进行分类聚合，再次确认数据内容的合法性和真实性，所述智能数据整合存储单元用于整合并存储所述智能数据分析聚合单元分析聚合后的互联网数据内容。进一步地，在本专利技术的一个实施例中，所述聚合互联网内容的系统还包括云端服务器系统运行状况监控组件，所述云端服务器系统运行状况监控组件包括运行状态数据获取单元、运行状态数据分析单元、系统异常信息发送单元和异常处理单元，所述运行状态数据获取单元自动实时获取系统运行数据，所述运行状态数据分析单元对获取的系统运行数据进行分析及处理，所述运行状态数据分析单元进一步根据分析的结果判断系统是否处于正常运行状态，如果系统处于正常运行状态，则所述系统运行状况监控组件继续监控，如果系统处于异常运行状态，则所述系统异常信息发送单元发出异常警告，将异常信息发送至所述异常处理单元，并启动相应的预案处理机制。包括：附图说明图1示出了根据本专利技术一个实施例的聚合互联网内容的方法的流程图。图2示出了根据本专利技术一个实施例的系统运行状况监控方法的流程示意图。图3示出了根据本专利技术一个实施例的聚合互联网内容的系统的结构组成图。图4示出了根据本专利技术一个实施例的云端服务器系统运行状况监控组件的结构组成图。具体实施方式为了便于理解本专利技术，下面将参照相关附图对本专利技术进行更全面的描述。附图中给出了本专利技术的首选实施例。但是，本专利技术可以以许多不同的形式来实现，并不限于本文所描述的实施例。相反地，提供这些实施例的目的是使对本专利技术的公开内容更加透彻全面。请参阅图1，本专利技术实施例提出的聚合互联网内容的方法，包括以下步骤：步骤S102，云端服务器定时启动互联网数据抓取动作，自动抓取互联网数据，获取互联网数据内容；其中，所述云端服务器设有智能数据抓取工具，所述智能数据抓取工具用于自动抓取互联网数据，获取互联网数据内容，具体操作时，该智能数据抓取工具可定时在互联网中启动抓取工作，将第三方的数据资源，比如文本、html网页、Web服务、关系数据库等内容进行自动抓取，抓取动作高效便捷，且该智能数据抓取工具还可统计用户的喜好，根据用户的使用特点进行个性化抓取。进一步的，所述智能数据抓取工具含有关键字排除程序，该关键字排除程序用于所述智能数据抓取工具发起互联网数据抓取请求时，排除涉及虚假、色情等非法的信息，精简掉多余、无效的互联网内容，保证所述智能数据抓取工具抓取内容的合法、有效。步骤S104，云端服务器对获取的互联网数据内容进行分析，分类聚合获取的互联网数据内容，并确认数据内容的合法性和真实性；其中，所述云端服务器进一步设有智能数据分析聚合工具，所述智能数据分析聚合工具用于自动分析所述智能数据抓取工具抓取的互联网数据内容，对抓取的互联网数据内容进行分类聚合，例如所述智能数据分析工具根据音频、视频、图书、图片等类别对抓取到的数据内容进行分类，将同类的数据内容进行聚合归档。之后所述智能数据分析聚合工具再次确认数据内容的合法性和真实性，确认完成后，进一步本文档来自技高网...

【技术保护点】
一种聚合互联网内容的方法，其特征在于，包括以下步骤：云端服务器定时启动互联网数据抓取动作，自动抓取互联网数据，获取互联网数据内容；云端服务器对获取的互联网数据内容进行分析，分类聚合获取的互联网数据内容，并确认数据内容的合法性和真实性；云端服务器对已分类聚合且确认后的互联网数据内容进行整合并存储。

【技术特征摘要】
1.一种聚合互联网内容的方法，其特征在于，包括以下步骤：云端服务器定时启动互联网数据抓取动作，自动抓取互联网数据，获取互联网数据内容；云端服务器对获取的互联网数据内容进行分析，分类聚合获取的互联网数据内容，并确认数据内容的合法性和真实性；云端服务器对已分类聚合且确认后的互联网数据内容进行整合并存储。2.根据权利要求1所述的聚合互联网内容的方法，其特征在于，所述云端服务器包括智能数据抓取工具，所述智能数据抓取工具用于自动抓取互联网数据，获取互联网数据内容。3.根据权利要求2所述的聚合互联网内容的方法，其特征在于，所述智能数据抓取工具含有关键字排除程序，所述关键字排除程序用于所述智能数据抓取工具发起互联网数据抓取请求时，排除涉及虚假、色情的非法信息。4.根据权利要求2所述的聚合互联网内容的方法，其特征在于，所述云端服务器还包括智能数据分析聚合工具，所述智能数据分析聚合工具用于自动分析所述智能数据抓取工具抓取的互联网数据内容，对获取的互联网数据内容进行分类聚合，并再次确认数据内容的合法性和真实性。5.根据权利要求4所述的聚合互联网内容的方法，其特征在于，所述云端服务器还包括智能数据整合存储工具，所述智能数据整合存储工具用于对已分类聚合且确认后的互联网数据内容进行整合并存储。6.根据权利要求1所述的聚合互联网内容的方法，其特征在于，所述聚合互联网内容的方法进一步包括系统运行状况监控方法，包括以下步骤：云端服务器自动实时获取系统运行数据；云端服务器对获取的系统运行数据运行监控分析；云端服务器系统异常运行状况进行处理。7.根据权利要求6所述的聚合互联网内容的方法，其特征在于，所述云端服务器进一步包括系统运行状态数据获取工具、系统运行状态数据分析工具、系统异常信息发送工具和异常处理工具，所述运行状态数据获取工具自动实时获取...

【专利技术属性】
技术研发人员：郭海福，廖列文，
申请(专利权)人：肇庆市广应科通用航空研究院，
类型：发明
国别省市：广东,44