请选择 进入手机版 | 继续访问电脑版
热搜: 活动 交友 discuz

只需一步,快速开始

扫一扫,微信登陆

免费查看安装密码,每次消耗20个银币 会员可通过签到、邀请好友注册,获得更多的银币 空白用户名,恶意会员,将直接封号
微信扫一扫 分享朋友圈

已有 1.9K 人浏览分享

Discuz X如何抵御国外垃圾蜘蛛抓取?

[复制链接]

120

主题

248

帖子

1295

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
1295
发表于 2021-4-25 21:27 | 显示全部楼层 | 阅读模式
image.png

有很多新手站长,建设好网站过后,总发现自己的网站,莫名其妙的卡。
但是,实际上自己是新站,浏览的人没几个,为什么却非常卡呢?
这个时候,就要查看是不是有大量蜘蛛在抓取自己的网站了。


蜘蛛我分为2种:
1种是搜索引擎的正常蜘蛛,比如百度、谷歌、360等等的...;如下图:
image.png


还有1种就是垃圾蜘蛛了,绝大部分是国外的,不知名的垃圾蜘蛛,一直爬取自己的网站资源,
导致网站非常卡,影响会员的正常浏览。如下图:
image.png


那么如何屏蔽这些垃圾蜘蛛?


1,你需要安装Discuz X官方的应用“蜘蛛记录”。
image.png
然后开启后,过一段时间,就可以看到有哪些蜘蛛在爬取你的网站了。
如上面的那张图,Other就是垃圾蜘蛛了。


2,你的服务器必须是用宝塔安装和配置的。
路径:宝塔面板-安全-防火墙;那里选择“屏蔽IP”,然后输入需要屏蔽的ip即可。
比如:144.76.0.0/16

image.png


3,屏蔽规则:
IP段:10.0.0.1-10.0.0.255 的表示方法:10.0.0.0/24
IP段:10.0.0.1-10.0.255.255 的表示方法:10.0.0.0/16
IP段:10.0.0.1-10.255.255.255 的表示方法:10.0.0.0/8
看的你有点迷糊是不是,没关系看我的概述:
ip一共有4位,
如果你想要屏蔽最后1位,就在后面填24就好了;
如果你想要屏蔽后2位的ip,就在后面填16就好了;
如果你想要屏蔽后3位的ip,就在后面填8就好了;
一般情况下,输入16就好了


4,举例:
例如:有个垃圾蜘蛛ip为144.76.86.9
因为垃圾蜘蛛可能不止这一个ip,如果发现被屏蔽,他们会更换ip,
所以我们就要把144.76.x.x这个段的ip都禁掉。
那么,我们的屏蔽ip就应该输入:144.76.0.0/16


版主随时在线,本站资源 请放心购买!售后、投诉,请联系QQ1398792532
回复

使用道具 举报

0

主题

11

帖子

11

积分

新手会员

Rank: 1

积分
11
发表于 2021-4-26 09:27 | 显示全部楼层
谢谢老师分享
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

1

关注

1

粉丝

120

主题
  • 微信公众平台

  • 扫描访问手机版

手机版|小黑屋|优优发现

GMT+8, 2021-6-24 08:24 , Processed in 0.074390 second(s), 44 queries .

© 2017-2021 优优发现