[实用新型]智能爬虫用控制设备

说明书

技术领域

本实用新型涉及一种控制设备，尤其涉及一种智能爬虫用控制设备。

背景技术

就现有技术来看，对网络数据的工作往往需要服务器来承担，导致服务器负载过大，不利于后台程序与服务器本身的稳定运行。需要一种装置来配合服务器，实现网络爬虫的功能。爬虫，又称为蜘蛛，它不是昆虫的名称，而是人们为了形象描述计算机程序在网络不断通过定制的入口网址去提取网页的链接，并根据这些链接再度抓取提取更深的其它未知的链接，以此下去，将这样的程序抓取形为形容成类似爬虫似的动作，称之为爬虫，爬虫是一种自动获取网页内容的程序，是搜索引擎的重要组成部分。

实用新型内容

本实用新型的目的就是为了解决现有技术中存在的上述问题，提供一种智能爬虫用控制设备。

本实用新型的目的通过以下技术方案来实现：

智能爬虫用控制设备，包括有设备盒体，设备盒体上设置有盒盖，其中：所述的设备盒体内设置有接插式控制电路板，所述的接插式控制电路板上设置有插槽，所述的插槽上连接有爬虫启停入口配置装置、爬虫框架设置装置、解析规则控制装置、爬虫系统运行装置、存储装置、数据分析装置，所述爬虫启停入口配置装置上设置有主数据通讯端口，所述爬虫启停入口配置装置的输出端连接爬虫框架设置装置的输入端，所述爬虫框架设置装置的输出端连接爬虫系统运行装置，所述的爬虫框架设置装置的辅助通讯端口连接有解析规则控制装置，所述爬虫框架设置装置的互联端口上连接存储装置，所述存储装置的数据通讯端口上连接有数据分析装置，所述的数据分析装置上设置有副数据通讯接口，所述的主数据通讯端口与副数据通讯接口提供连接服务器通讯装置。

上述的智能爬虫用控制设备，其中：所述的服务器通讯装置上设置有USB接口、RJ45接口、无线通讯模块、蓝牙通讯模块。

进一步地，上述的智能爬虫用控制设备，其中：所述的爬虫启停入口配置装置、爬虫框架设置装置、解析规则控制装置、爬虫系统运行装置上均设置有独立的数据扩充接口。

更进一步地，上述的智能爬虫用控制设备，其中：所述的设备盒体内设置有螺钉孔，所述的接插式控制电路板上设置有定位孔，所述的接插式控制电路板与设备盒体螺钉连接。

更进一步地，上述的智能爬虫用控制设备，其中：所述的设备盒体内设置有容纳槽。

更进一步地，上述的智能爬虫用控制设备，其中：所述的设备盒体内设置有加强筋。

更进一步地，上述的智能爬虫用控制设备，其中：所述的设备盒体内设置有散热片。

更进一步地，上述的智能爬虫用控制设备，其中：所述的设备盒体上设置有散热孔。

再进一步地，上述的智能爬虫用控制设备，其中：所述的设备盒体上设置有挂钩。

本实用新型技术方案的优点主要体现在：能够满足爬虫通用性要求，适合各类垂直抓取需求，扩展方便，插件式开发。可以很方便从存储容量水平方向上伸缩数据库，进行数据库扩容。抓取处理的数据不受后续连接抓取机器的存储空间限制，能够配合服务器进行有效存储。再者，本实用新型构造简单，拥有较佳的牢固程度和散热效果。

本实用新型的目的、优点和特点，将通过下面优先实施例的非限制性说明进行图示和解释，这些实施例是参照附图仅作为例子给出的。

附图说明

图1是智能爬虫用控制设备的构造示意图。