Ai爬虫不讲武德啊，禁止了都爬

左右不逢缘 · 发表于 2024-12-24 14:22:40

马上注册，免费下载更多dz插件网资源。

您需要登录才可以下载或查看，没有账号？立即注册

×

如题

现在的AI爬虫太多了

服务器一半的资源都被爬虫占了

关键AI还不讲武德

禁止都禁不了

。。。

©DZ插件网所发布的一切资源仅限用于学习和研究目的；不得将上述内容用于商业或者非法用途，否则，一切后果请用户自负。
本站内容为站长个人技术研究记录或网络，不提供用户交互功能，所有内容版权归原作者所有。您必须在下载后的24个小时之内，从您的电脑中彻底删除上述内容。如果您喜欢该程序，请支持正版软件，得到更好的正版服务。
您在本站任何的赞助购买、下载、查阅、回复等行为等均表示接受并同意签订《DZ插件网免责声明协议》。
如有侵权请邮件与我们联系处理: discuzaddons@vip.qq.com 并出示相关证明以便删除。敬请谅解！

独家记忆 · 发表于 2024-12-24 14:23:01

直接禁前两段IP

TyCoding · 发表于 2024-12-24 14:23:18

你看看国外的网站，都是先验证人工才能访问的，禁爬都是小事

拾光 · 发表于 2024-12-24 14:23:41

12月份，大量不重复的ip爬网站，一个ip一天只爬四五次二十来个页，网站都崩了，怎么办。

独家记忆 · 发表于 2024-12-24 14:24:09

我也一样，技术直接强制禁止爬取了

Crystαl · 发表于 2024-12-24 14:24:25

现在没几个遵守的

拾光 · 发表于 2024-12-24 14:24:38

有条件的话，建议加个防御。
可有效防护DDoS，CC，Web应用攻击，恶意刷流量，恶意爬虫等危害网站的行为，保障平台稳定运营。
传统高防，在拦截攻击的同时，还会误杀正常用户，我们防护是根据用户请求逻辑配合强大的攻击特征库精准防御，0误杀用户。可根据不同攻击，不同平台，定制型防护模块，防不住不收任何费用，可测试防御效果。