·设为首页收藏本站📧邮箱修改🎁免费下载专区🔐设置/修改密码👽群雄群聊
返回列表 发布新帖

当你发现,你的站点日志里,出现大量的各种蜘蛛爬行记录,不要太兴奋,或许是机器人取证,留下的痕迹

170 7
发表于 2022-4-5 08:18:08 | 显示全部楼层 阅读模式

马上注册,免费下载更多dz插件网资源。

您需要 登录 才可以下载或查看,没有账号?立即注册

×
当你看到这么多记录,且包含了,图片文件和css、、js各种链接,都被蜘蛛爬行一遍,基本可以确定是,取证机器人,在爬行你的服务器了

且这种行为,并不是为了帮你收录,只是人家取证获取你网站的相关文件而己

更可以通过,即然有大量蜘蛛爬行,却没有对应的页面收录记录,就基本可以确认,就是取证了
我要说一句 收起回复

评论7

独家记忆Lv.8 发表于 2022-4-5 08:18:45 | 显示全部楼层
只要是百度、搜狗、谷歌爬的不就行了。
我要说一句 收起回复
独家记忆Lv.8 发表于 2022-4-5 08:19:31 | 显示全部楼层
你会发现,网站日志几百M ,网站收录,没有增加的变化,基本就是机器人爬行了
我要说一句 收起回复
浅生Lv.8 发表于 2022-4-5 08:19:48 | 显示全部楼层
蜘蛛就那么几个ip段。。。会连是搜索引擎抓取还是恶意抓取都分不出来吗
我要说一句 收起回复
婷姐Lv.8 发表于 2022-4-5 08:20:36 | 显示全部楼层
我的蜘蛛很多,都是神马
我要说一句 收起回复
IT618发布Lv.8 发表于 2022-4-5 08:20:44 | 显示全部楼层
关键是我没有采集,不怕
我要说一句 收起回复
CrystαlLv.8 发表于 2022-4-5 08:21:17 | 显示全部楼层
一般是变换着ip群,并不是几个固定的IP地址

我曾就此事向某通管局反应过问题,

通管局专门对接工作人员,加我QQ,给过解析过,都是**他们的内部IP
具体,可以让我与他们IP使用部门,联系确认,是什么情况

一个站,几百M的蜘蛛记录,我只能呵呵了
我要说一句 收起回复
浅生Lv.8 发表于 2022-4-5 08:21:30 | 显示全部楼层
取证机器人,只管取证,取的是网站页面信息和内容,

包含页面里的图片和版面结构,

最后取证的人,根据页面内容,来判断,是侵了什么方面的权

再决定做出下一步安排
我要说一句 收起回复

回复

 懒得打字嘛,点击右侧快捷回复【查看最新发布】   【应用商城享更多资源】
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

投诉/建议联系

discuzaddons@vip.qq.com

未经授权禁止转载,复制和建立镜像,
如有违反,按照公告处理!!!
  • 联系QQ客服
  • 添加微信客服

联系DZ插件网微信客服|最近更新|Archiver|手机版|小黑屋|DZ插件网! ( 鄂ICP备20010621号-1 )|网站地图

您的IP:3.145.156.46,171.214.24.71,GMT+8, 2024-4-28 05:22 , Processed in 0.224766 second(s), 133 queries , Gzip On, Redis On.

Based on Discuz! W1.0 Licensed

© 2001-2024 Discuz! Team.

关灯 在本版发帖
扫一扫添加微信客服
QQ客服返回顶部
快速回复 返回顶部 返回列表