一种基于网络设备的数据反抓取构建方法技术

本发明专利技术涉及数据安全设备技术领域，具体公开了一种基于网络设备的数据反抓取构建方法，包括：

【技术实现步骤摘要】
一种基于网络设备的数据反抓取构建方法


[0001]本专利技术属于数据安全设备
，具体涉及一种基于网络设备的数据反抓取构建方法
。

技术介绍

[0002]网络设备是用来将各类服务器
、PC、
应用终端等节点相互连接，构成信息通信网络的专用硬件设备
。
随着社会的发展，网络信息增长迅速，使得网络数据的信息量更大，范围更广，在如今社会，行业之间的竞争日益白热化，其中通过对竞品进行数据抓取，可以进行竞品分析，为竞争提供了基础支持和后续相关支持；而相应的，为了保护自身数据，企业也需要对企业的数据进行反抓取，以保护自身的利益
。
[0003]目前，数据反抓取的常规解决方式是针对异常
IP
进行
IP
封禁或者采用验证码进行验证，然而，这种操作方式虽然简单直接，但是，效果并不理想，进而导致企业在运营过程中受到侵入而遭受损失
。

技术实现思路

[0004]本专利技术的目的在于提供一种基于网络设备的数据反抓取构建方法，以解决上述
技术介绍
中提出的问题
。
[0005]为实现上述目的，本专利技术提供如下技术方案：
[0006]一种基于网络设备的数据反抓取构建方法，包括：
[0007]S1
：获取数据访问端发送的用户请求，通过预设网络连接和数据安全传输协议与目标服务器建立数据连接；
[0008]S2
：判断用户请求是否包含非正常访问信息及附加访问数据文件，并对预设目标服务器传输黑名单中的用户请求进行回绝；
[0009]S3
：将可接入的用户请求数据和目标服务器的源数据进行比对，判断用户请求数据是否接入目标服务器；
[0010]S4
：在用户请求接入目标服务器后，获取与用户请求所对应信息数据在目标服务器内的数据投放策略，并依据该数据投放策略将数据反馈给数据访问端
。
[0011]优选的，所述用户请求包括
IP
地址
、
用户信息
、
请求标识
、
请求数据，依据预设网络连接状态判断目标服务器是否进行数据接收和反馈，所述目标服务器包括计算机设备及所配备的存储单元包含外部连接存储硬件
。
[0012]优选的，所述数据安全传输协议包含目标服务器的基础数据传输协议及目标服务器内程序的数据传输协议，并依据用户的预设定义在数据传输时变化不同的数据传输措施
。
[0013]优选的，所述在依据用户请求信息进行判断时，对包含非正常访问信息的用户请求在经过数据安全传输协议判断后，对用户请求进行驳回并在目标服务器上输出响应报文，并对包含有附加访问数据文件的用户请求进行拦截，驳回或隔离用户请求反馈至用户
进行处理
。
[0014]优选的，所述对于预设的黑名单内容进行定期的更新，用户可对黑名单中的内容随时进行更改，并在更改后更新预设的黑名单相关联的目标服务器源数据，根据用户请求在目标服务器的源数据中进行检索，并对不存在的数据信息进行反馈
。
[0015]优选的，所述在与目标服务器正常建立连接后，若对目标服务器进行抓取，则针对数据投放策略划分的不可抓取的数据生成虚假数据
,
将所述虚假数据反馈给数据访问端，并根据数据抓取的情况判断是否打开此次连接，同时记录此次目标服务器数据访问的关联信息数据
。
[0016]与现有技术相比，本专利技术的有益效果是：
[0017]本专利技术通过对访问请求进行不同层次方面的数据检验比对，排除部分恶意的访问请求，并在建立安全数据连接时，对于抓取内容的操作根据数据内容策略做出响应，将数据反馈给访问端时对应的后一时刻生成的虚假数据大于前一时刻生成的虚假数据，这样不会被抓取用户觉察，误导其操作，保护数据资源不会外流，提高数据反抓取的效果
。
附图说明
[0018]图1为本专利技术数据反抓取系统流程示意图；
[0019]图2为本专利技术一种数据反抓取操作流程示意图；
[0020]图3为本专利技术一种数据反抓取装置的结构示意图
。
具体实施方式
[0021]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚
、
完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例
。
基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围
。
[0022]实施例：
[0023]请参阅图1‑
图3所示，一种基于网络设备的数据反抓取构建方法，包括：
[0024]S1
：获取数据访问端发送的用户请求，通过预设网络连接和数据安全传输协议与目标服务器建立数据连接；
[0025]S2
：判断用户请求是否包含非正常访问信息及附加访问数据文件，并对预设目标服务器传输黑名单中的用户请求进行回绝；
[0026]S3
：将可接入的用户请求数据和目标服务器的源数据进行比对，判断用户请求数据是否接入目标服务器；
[0027]S4
：在用户请求接入目标服务器后，获取与用户请求所对应信息数据在目标服务器内的数据投放策略，并依据该数据投放策略将数据反馈给数据访问端
。
[0028]用户请求包括
IP
地址
、
用户信息
、
请求标识
、
请求数据，依据预设网络连接状态判断目标服务器是否进行数据接收和反馈，目标服务器包括计算机设备及所配备的存储单元包含外部连接存储硬件；数据安全传输协议包含目标服务器的基础数据传输协议及目标服务器内程序的数据传输协议，并依据用户的预设定义在数据传输时变化不同的数据传输措施
。
[0029]在依据用户请求信息进行判断时，对包含非正常访问信息的用户请求在经过数据安全传输协议判断后，对用户请求进行驳回并在目标服务器上输出响应报文，并对包含有附加访问数据文件的用户请求进行拦截，驳回或隔离用户请求反馈至用户进行处理；对于预设的黑名单内容进行定期的更新，用户可对黑名单中的内容随时进行更改，并在更改后更新预设的黑名单相关联的目标服务器源数据，根据用户请求在目标服务器的源数据中进行检索，并对不存在的数据信息进行反馈
。
[0030]在与目标服务器正常建立连接后，若对目标服务器进行抓取，则针对数据投放策略划分的不可抓取的数据生成虚假数据
,
将虚假数据反馈给数据访问端，并根据数据抓取的情况判断是否打开此次连接，同时记录此次目标服务器数据访问的关联信息数据
。
[0031]由上可知，通过对访问请求进行不同层次方面的数据检验比对，排除部分恶意的访问请求，并在建立安全数据连接时，对于抓取内容的操作根据数据内容策略做出响应，将数据反馈给访问端本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种基于网络设备的数据反抓取构建方法，其特征在于，包括：
S1
：获取数据访问端发送的用户请求，通过预设网络连接和数据安全传输协议与目标服务器建立数据连接；
S2
：判断用户请求是否包含非正常访问信息及附加访问数据文件，并对预设目标服务器传输黑名单中的用户请求进行回绝；
S3
：将可接入的用户请求数据和目标服务器的源数据进行比对，判断用户请求数据是否接入目标服务器；
S4
：在用户请求接入目标服务器后，获取与用户请求所对应信息数据在目标服务器内的数据投放策略，并依据该数据投放策略将数据反馈给数据访问端
。2.
根据权利要求1所述的一种基于网络设备的数据反抓取构建方法，其特征在于：所述用户请求包括
IP
地址
、
用户信息
、
请求标识
、
请求数据，依据预设网络连接状态判断目标服务器是否进行数据接收和反馈，所述目标服务器包括计算机设备及所配备的存储单元包含外部连接存储硬件
。3.
根据权利要求1所述的一种基于网络设备的数据反抓取构建方法，其特征在于：所述数据安全传输协议...

【专利技术属性】
技术研发人员：高继勇，
申请(专利权)人：北京奇光和点科技有限公司，
类型：发明
国别省市：