去评论
dz插件网

求大佬指点百度蜘蛛问题?!!紧急!!!

逝水年华
2022/10/15 12:29:45
就是最近我一个帝国的站点,蜘蛛增量比较多,但发现个问题,总是访问一些奇怪的路径,并且大部分都是访问这些路径,是怎么回事呢?另外我在robots也做了屏蔽,好像没用!Disallow: /e/extend/

Disallow: /e/public/
问题一:116.179.37.* 这段的蜘蛛拼命访问那两个目录下的奇怪链接,需要屏蔽吗,怎么屏蔽呢?有什么影响呢?
问题二:220.181.108.*这段的蜘蛛访问的是我正常的文章链接,这类属于权重蜘蛛吧?
以上两个段的蜘蛛是怎么回事?一个段固定访问乱七八糟链接,一个段固定访问有效链接,如下图: