·设为首页收藏本站📧邮箱修改🎁免费下载专区📒收藏夹👽聊天室📱AI智能体
12下一页
返回列表 发布新帖

蜘蛛一直抓搜索页面啊,还都是些我没有的词,啥情况呢?

113 12

马上注册,免费下载更多dz插件网资源。

您需要 登录 才可以下载或查看,没有账号?立即注册

×
抓的都是搜索页面,不存在的关键词,这样会放收录吗

蜘蛛一直抓搜索页面啊,还都是些我没有的词,啥情况呢? 蜘蛛抓小虫,蜘蛛频繁出现
我要说一句 收起回复

评论12

独家记忆Lv.8 发表于 3 天前 | 查看全部
内容可能违规暂时被隐藏
也不是啊,虽然是不存在的关键词,但是跟行业相关。并不是黑灰之类的词呀
我要说一句 收起回复
IT618发布Lv.8 发表于 3 天前 | 查看全部
蜘蛛一直抓搜索页面啊,还都是些我没有的词,啥情况呢? 蜘蛛抓小虫,蜘蛛频繁出现
我要说一句 收起回复
CrystαlLv.8 发表于 3 天前 | 查看全部
确定是百度的蜘蛛。反正抓了好多都放出来了。
我要说一句 收起回复
独家记忆Lv.8 发表于 3 天前 | 查看全部
查不到....看了下Nginx防火墙,也不在宝塔的百度蜘蛛白名单里....

蜘蛛一直抓搜索页面啊,还都是些我没有的词,啥情况呢? 蜘蛛抓小虫,蜘蛛频繁出现
我要说一句 收起回复
CrystαlLv.8 发表于 3 天前 | 查看全部
上回也发不来了这个类型的ip。人家说是不带ua的抓取蜘蛛,收录后是site不出来的,但是在m端搜网址可以搜到,并且可以参与排名。
我要说一句 收起回复
拾光Lv.8 发表于 3 天前 | 查看全部
不用理会
我要说一句 收起回复
CrystαlLv.8 发表于 3 天前 | 查看全部
现在很多能收录文章的百度蜘蛛,都是不带UA的,模仿真人浏览。
那些带UA的大部分反而是巡查蜘蛛,只爬行检查不收录(也就是网上公开的部分蜘蛛ip段,现在在干粗活)这种方法是它自以为是的防止黑灰产手段。
厉害的他防不住~不厉害的他根本不用防
我要说一句 收起回复
CrystαlLv.8 发表于 3 天前 | 查看全部
大概是的吧,反正我觉得百度活不了好久了
我要说一句 收起回复
CrystαlLv.8 发表于 3 天前 | 查看全部
在检索你站有没有违规内容,他搜索的东西都是有规则的
我要说一句 收起回复

回复

 懒得打字嘛,点击右侧快捷回复【查看最新发布】   【应用商城享更多资源】
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

图文热点
关闭

站长推荐上一条 /1 下一条

最新热评 加载中...
AI智能体
投诉/建议联系

discuzaddons@vip.qq.com

未经授权禁止转载,复制和建立镜像,
如有违反,按照公告处理!!!
  • 联系QQ客服
  • 添加微信客服

联系DZ插件网微信客服|最近更新|Archiver|手机版|小黑屋|DZ插件网! ( 鄂ICP备20010621号-1 )|网站地图 知道创宇云防御

您的IP:216.73.216.212,GMT+8, 2025-6-14 04:23 , Processed in 0.306610 second(s), 120 queries , Gzip On, Redis On.

Powered by Discuz! X5.0 Licensed

© 2001-2025 Discuz! Team.

关灯 在本版发帖
扫一扫添加微信客服
QQ客服返回顶部
快速回复 返回顶部 返回列表