智能爬虫用控制设备制造技术

本实用新型专利技术涉及一种智能爬虫用控制设备，包括有设备盒体，设备盒体上设置有盒盖，其特点是：设备盒体内设置有接插式控制电路板，接插式控制电路板上设置有插槽，插槽上连接有爬虫启停入口配置装置，爬虫启停入口配置装置上设置有主数据通讯端口，爬虫启停入口配置装置的输出端连接爬虫框架设置装置的输入端，爬虫框架设置装置的输出端连接爬虫系统运行装置。同时，爬虫框架设置装置的辅助通讯端口连接有解析规则控制装置，爬虫框架设置装置的互联端口上连接存储装置，存储装置的数据通讯端口上连接有数据分析装置。由此，适合各类垂直抓取需求，同时，拥有较佳的牢固程度和散热效果。（*该技术在2023年保护过期，可自由使用*）

【技术实现步骤摘要】
【专利摘要】本技术涉及一种智能爬虫用控制设备，包括有设备盒体，设备盒体上设置有盒盖，其特点是：设备盒体内设置有接插式控制电路板，接插式控制电路板上设置有插槽，插槽上连接有爬虫启停入口配置装置，爬虫启停入口配置装置上设置有主数据通讯端口，爬虫启停入口配置装置的输出端连接爬虫框架设置装置的输入端，爬虫框架设置装置的输出端连接爬虫系统运行装置。同时，爬虫框架设置装置的辅助通讯端口连接有解析规则控制装置，爬虫框架设置装置的互联端口上连接存储装置，存储装置的数据通讯端口上连接有数据分析装置。由此，适合各类垂直抓取需求，同时，拥有较佳的牢固程度和散热效果。【专利说明】智能爬虫用控制设备
本技术涉及一种控制设备，尤其涉及一种智能爬虫用控制设备。
技术介绍
就现有技术来看，对网络数据的工作往往需要服务器来承担，导致服务器负载过大，不利于后台程序与服务器本身的稳定运行。需要一种装置来配合服务器，实现网络爬虫的功能。爬虫，又称为蜘蛛，它不是昆虫的名称，而是人们为了形象描述计算机程序在网络不断通过定制的入口网址去提取网页的链接，并根据这些链接再度抓取提取更深的其它未知的链接，以此下去,将这样的程序抓取形为形容成类似爬虫似的动作,称之为爬虫,爬虫是一种自动获取网页内容的程序，是搜索引擎的重要组成部分。
技术实现思路
本技术的目的就是为了解决现有技术中存在的上述问题，提供一种智能爬虫用控制设备。本技术的目的通过以下技术方案来实现:智能爬虫用控制设备，包括有设备盒体，设备盒体上设置有盒盖，其中:所述的设备盒体内设置有接插式控制电路板，所述的接插式控制电路板上设置有插槽，所述的插槽上连接有爬虫启停入口配置装置、爬虫框架设置装置、解析规则控制装置、爬虫系统运行装置、存储装置、数据分析装置，所述爬虫启停入口配置装置上设置有主数据通讯端口，所述爬虫启停入口配置装置的输出端连接爬虫框架设置装置的输入端，所述爬虫框架设置装置的输出端连接爬虫系统运行装置，所述的爬虫框架设置装置的辅助通讯端口连接有解析规则控制装置，所述爬虫框架设置装置的互联端口上连接存储装置，所述存储装置的数据通讯端口上连接有数据分析装置，所述的数据分析装置上设置有副数据通讯接口，所述的主数据通讯端口与副数据通讯接口提供连接服务器通讯装置。上述的智能爬虫用控制设备，其中:所述的服务器通讯装置上设置有USB接口、RJ45接口、无线通讯模块、蓝牙通讯模块。进一步地，上述的智能爬虫用控制设备，其中:所述的爬虫启停入口配置装置、爬虫框架设置装置、解析规则控制装置、爬虫系统运行装置上均设置有独立的数据扩充接口。更进一步地，上述的智能爬虫用控制设备，其中:所述的设备盒体内设置有螺钉孔，所述的接插式控制电路板上设置有定位孔，所述的接插式控制电路板与设备盒体螺钉连接。更进一步地，上述的智能爬虫用控制设备，其中:所述的设备盒体内设置有容纳槽。更进一步地，上述的智能爬虫用控制设备，其中:所述的设备盒体内设置有加强筋。更进一步地，上述的智能爬虫用控制设备，其中:所述的设备盒体内设置有散热片。更进一步地，上述的智能爬虫用控制设备，其中:所述的设备盒体上设置有散热孔。再进一步地，上述的智能爬虫用控制设备，其中:所述的设备盒体上设置有挂钩。本技术技术方案的优点主要体现在:能够满足爬虫通用性要求，适合各类垂直抓取需求，扩展方便，插件式开发。可以很方便从存储容量水平方向上伸缩数据库，进行数据库扩容。抓取处理的数据不受后续连接抓取机器的存储空间限制，能够配合服务器进行有效存储。再者，本技术构造简单，拥有较佳的牢固程度和散热效果。本技术的目的、优点和特点，将通过下面优先实施例的非限制性说明进行图示和解释，这些实施例是参照附图仅作为例子给出的。【专利附图】【附图说明】图1是智能爬虫用控制设备的构造示意图。【权利要求】1.智能爬虫用控制设备，包括有设备盒体，设备盒体上设置有盒盖，其特征在于:所述的设备盒体内设置有接插式控制电路板，所述的接插式控制电路板上设置有插槽，所述的插槽上连接有爬虫启停入口配置装置、爬虫框架设置装置、解析规则控制装置、爬虫系统运行装置、存储装置、数据分析装置，所述爬虫启停入口配置装置上设置有主数据通讯端口，所述爬虫启停入口配置装置的输出端连接爬虫框架设置装置的输入端，所述爬虫框架设置装置的输出端连接爬虫系统运行装置，所述的爬虫框架设置装置的辅助通讯端口连接有解析规则控制装置，所述爬虫框架设置装置的互联端口上连接存储装置，所述存储装置的数据通讯端口上连接有数据分析装置，所述的数据分析装置上设置有副数据通讯接口，所述的主数据通讯端口与副数据通讯接口提供连接服务器通讯装置。2.根据权利要求1所述的智能爬虫用控制设备，其特征在于:所述的服务器通讯装置上设置有USB接口、RJ45接口、无线通讯模块、蓝牙通讯模块。3.根据权利要求1所述的智能爬虫用控制设备，其特征在于:所述的爬虫启停入口配置装置、爬虫框架设置装置、解析规则控制装置、爬虫系统运行装置上均设置有独立的数据扩充接口。4.根据权利要求1所述的智能爬虫用控制设备，其特征在于:所述的设备盒体内设置有螺钉孔，所述的接插式控制电路板上设置有定位孔，所述的接插式控制电路板与设备盒体螺钉连接。5.根据权利要求1所述的智能爬虫用控制设备，其特征在于:所述的设备盒体内设置有容纳槽。6.根据权利要求有加强筋。7.根据权利要求有散热片。8.根据权利要求有散热孔。9.根据权利要求有挂钩。I所述的智能爬虫用控制设备，其特征在于:所述的设备盒体内设置I所述的智能爬虫用控制设备，其特征在于:所述的设备盒体内设置I所述的智能爬虫用控制设备，其特征在于:所述的设备盒体上设置I所述的智能爬虫用控制设备，其特征在于:所述的设备盒体上设置【文档编号】G06F17/30GK203397363SQ201320439233【公开日】2014年1月15日 申请日期:2013年7月23日 优先权日:2013年7月23日 【专利技术者】王专, 张海龙, 马和平, 郭凤林, 王晓钟, 庞绍进, 王祚德, 靳彩娟 申请人:同程网络科技股份有限公司本文档来自技高网...

【技术保护点】
智能爬虫用控制设备，包括有设备盒体，设备盒体上设置有盒盖，其特征在于：所述的设备盒体内设置有接插式控制电路板，所述的接插式控制电路板上设置有插槽，所述的插槽上连接有爬虫启停入口配置装置、爬虫框架设置装置、解析规则控制装置、爬虫系统运行装置、存储装置、数据分析装置，所述爬虫启停入口配置装置上设置有主数据通讯端口，所述爬虫启停入口配置装置的输出端连接爬虫框架设置装置的输入端，所述爬虫框架设置装置的输出端连接爬虫系统运行装置，所述的爬虫框架设置装置的辅助通讯端口连接有解析规则控制装置，所述爬虫框架设置装置的互联端口上连接存储装置，所述存储装置的数据通讯端口上连接有数据分析装置，所述的数据分析装置上设置有副数据通讯接口，所述的主数据通讯端口与副数据通讯接口提供连接服务器通讯装置。

【技术特征摘要】

【专利技术属性】
技术研发人员：王专，张海龙，马和平，郭凤林，王晓钟，庞绍进，王祚德，靳彩娟，
申请(专利权)人：同程网络科技股份有限公司，
类型：实用新型
国别省市：