·设为首页收藏本站📧邮箱修改🎁免费下载专区🔐设置/修改密码👽群雄群聊
返回列表 发布新帖

我的网站,近期抓取诊断都显示失败,但是网站能够正常打开

198 9
发表于 2022-6-2 13:38:03 | 显示全部楼层 阅读模式

马上注册,免费下载更多dz插件网资源。

您需要 登录 才可以下载或查看,没有账号?立即注册

×
您好,我的网站,近期抓取诊断都显示失败,但是网站能够正常打开,下面对应的网站都能够正常快速打开。

测试过三台服务器上的站点,都是显示抓取失败。都说说socket 读写错误,IP是服务器IP。
直访的时候,百度抓取不了。

然后加了百度云加速的CDN,又能够抓取,但是抓取的IP显示百度的CDN的IP。

1、www.***.com 对应IP 103.90.155.** 服务器系统干净,也没有安装防火墙之类的防护

2、www.***.cn 对应IP 103.90.155.*** 也是没有安装防火墙之类的过滤

3、www.***.com 对应IP 103.90.155.*** 同样也是没有防火墙的。

这几个IP都是贵州的电信机房IP。

为了避免防火墙的过滤,我们专门把系统重装,关闭了所有的服务,也是一直报错。

现在抓取不了,导致我网站的流量和收录下降,连首页都没法搜索出来,我现在也没办法,只能够重新BA,转移到腾讯云那边去试试!

希望能够协助看看是什么问题呢?
我要说一句 收起回复

评论9

拾光Lv.8 发表于 2022-6-2 13:38:27 | 显示全部楼层
是不是换了IP的原因
我要说一句 收起回复
独家记忆Lv.8 发表于 2022-6-2 13:38:44 | 显示全部楼层
抓取诊断ip正确吗  服务器是否ping的通www.baidu.com
我要说一句 收起回复
婷姐Lv.8 发表于 2022-6-2 13:39:34 | 显示全部楼层
ip不正确的话 点报错 多点几次 隔天就正常了
我要说一句 收起回复
婷姐Lv.8 发表于 2022-6-2 13:40:01 | 显示全部楼层
可能是机器开启了金盾之类的防御,肯定不是百度问题多半你服务器问题
我要说一句 收起回复
CrystαlLv.8 发表于 2022-6-2 13:40:57 | 显示全部楼层
IP是正确的啊
我要说一句 收起回复
IT618发布Lv.8 发表于 2022-6-2 13:41:25 | 显示全部楼层
之前怀疑是宝塔问题 但是后面把宝塔都去掉了
啥都没开   
还是不行
不知道是不是这个IDC的问题
我要说一句 收起回复
TyCodingLv.8 发表于 2022-6-2 13:42:00 | 显示全部楼层
抓取IP是正确的。
网站访问也正常
我要说一句 收起回复
CrystαlLv.8 发表于 2022-6-2 13:42:23 | 显示全部楼层
这就是云服务的弊端  还是要搞一台高配服务器
我要说一句 收起回复
独家记忆Lv.8 发表于 2022-6-2 13:43:22 | 显示全部楼层
楼主可能犯了一个错误:使用CDN,1、在域名解析处,为搜索引擎单独做一条A记录解析,解析到你的源服务器IP。 2、CDN控制台找找看 搜索引擎 指向原站IP 这一项开启。
以上操作 能避免 搜索引擎抓CDN。
我要说一句 收起回复

回复

 懒得打字嘛,点击右侧快捷回复【查看最新发布】   【应用商城享更多资源】
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

投诉/建议联系

discuzaddons@vip.qq.com

未经授权禁止转载,复制和建立镜像,
如有违反,按照公告处理!!!
  • 联系QQ客服
  • 添加微信客服

联系DZ插件网微信客服|最近更新|Archiver|手机版|小黑屋|DZ插件网! ( 鄂ICP备20010621号-1 )|网站地图

您的IP:18.189.193.172,117.68.52.63,GMT+8, 2024-5-6 18:57 , Processed in 0.230959 second(s), 148 queries , Gzip On, Redis On.

Based on Discuz! W1.0 Licensed

© 2001-2024 Discuz! Team.

关灯 在本版发帖
扫一扫添加微信客服
QQ客服返回顶部
快速回复 返回顶部 返回列表