搜索不遵守规则怎么办

婷姐 · 发表于 2021-12-30 12:29:12

马上注册，免费下载更多dz插件网资源。

您需要登录才可以下载或查看，没有账号？立即注册

×

弄了一个备份站点不对外开放，放损友们的游戏截图游戏宏备份等，游戏友们内部使用（当然没有学习日语的视频，都是一群不正经的正经人）
并且在论坛根目录下的
robots.txt 规则只有两行

## robots.txt for Discuz! X3#User-agent: *Disallow:/

复制代码

禁止所有搜索引擎抓取，可谷歌蜘蛛还是时常来，是规则有问题么？

©dz插件网所发布的一切资源仅限用于学习和研究目的；不得将上述内容用于商业或者非法用途，否则，一切后果请用户自负。
本站信息来自网络，版权争议与本站无关。您必须在下载后的24个小时之内，从您的电脑中彻底删除上述内容。如果您喜欢该程序，请支持正版软件，得到更好的正版服务。
如有侵权请邮件与我们联系处理:discuz-x@qq.com（手机随时接收邮件）并出示相关证明以便删除。敬请谅解！