ClaudeBot 爬虫一定要拦截很恶心！

镖师 · 发表于 11 小时前

马上注册，免费下载更多dz插件网资源。

您需要登录才可以下载或查看，没有账号？立即注册

×

目测这个爬虫起码上万个IP，而且还不是同一个机器，导致JA3指纹根本拦截不过来。只能针对UA来拦截了。
ClaudeBot 爬虫一定要拦截很恶心！爬虫,防火墙,IP,UA,ClaudeBot

这爬虫懂得躲过防火墙的，每秒就访问三次，而且不同的URI，一般防火墙不可能限制用户每秒只能访问三次的，所以百度云防护根本没拦截，更恶心的是你如果把他这个IP拦截了，他转头又来了一个新的IP，无穷无尽，所以靠IP拦截没啥用。
最有效的方法是拦截包含ClaudeBot的UA或者拦截他爬虫的数据中心的ANS，ClaudeBot 爬虫的数据中心是在亚马逊的，ASN编码为AS16509
高级点的WAF都能针对这两个特征拦截，大家看下。

ClaudeBot 爬虫一定要拦截很恶心！爬虫,防火墙,IP,UA,ClaudeBot

©DZ插件网所发布的一切资源仅限用于学习和研究目的；不得将上述内容用于商业或者非法用途，否则，一切后果请用户自负。
本站内容为站长个人技术研究记录或网络，不提供用户交互功能，所有内容版权归原作者所有。您必须在下载后的24个小时之内，从您的电脑中彻底删除上述内容。如果您喜欢该程序，请支持正版软件，得到更好的正版服务。
您在本站任何的赞助购买、下载、查阅、回复等行为等均表示接受并同意签订《DZ插件网免责声明协议》。
如有侵权请邮件与我们联系处理: discuzaddons@vip.qq.com 并出示相关证明以便删除。敬请谅解！