去评论
dz插件网

百度蜘蛛突然巨降,百度客服的回复竟然是。。。

xiao9469
2023/08/03 13:07:56
前段时间蜘蛛突然一天掉完,然后每天就剩下几百了,发反馈,给的是这种答复。。。


您好,抓取异常数据目前无法直接给出,请站长自查,我们建议这种2个排查方法:1、站长可以在站点日志中查看是否有50x或40x返回码的链接;2、如果日志中没有类似错误,那请站长不要担心,这个可能是spider在发起抓取时,中间过程中超时导致的,并不会影响网站实际的抓取效果。