逝水年华 发表于 3 天前

使用宝塔面板的把这个设置一下,可以解决一大部分垃圾爬虫+采集

宝塔面板
WAF
流量限制
应用网站(全选)
触发条件
路径(/)
访问限制(IP+UA)
每秒访问限制(10次)
时间访问限制(60内超出60次)
响应结果
操作选项(封锁ip)


ps:可以解决一部分垃圾爬虫+采集网站的问题,对于大神无效,因为大神只要能看到的页面内容就都可以爬取采集到!

Crystαl 发表于 3 天前

发给有需要的人!
发给有需要的人!
发给有需要的人!
如果有需要bing蜘蛛池的可以看下!
https://www.1zzc.com/register.php?inv=9QS43MGU
大部分爬了就会放收录!价格便宜!

拾光 发表于 3 天前

发给有需要的人!

浅生 发表于 3 天前

感谢分享

拾光 发表于 3 天前

感谢分享

TyCoding 发表于 3 天前

是收费的功能吗

独家记忆 发表于 3 天前

感谢分享

拾光 发表于 3 天前

我的是专业版,免费版我忘记有没有这个了 如果你是免费版可以在Nginx配置文件里面设置下!

拾光 发表于 3 天前

不错不错

Crystαl 发表于 3 天前

现在大部分都是AI采集的,烦死了
页: [1]
查看完整版本: 使用宝塔面板的把这个设置一下,可以解决一大部分垃圾爬虫+采集