Googlebots 忽略 robots.txt? [关闭]

2024-01-27

我有一个网站,根目录中有以下 robots.txt:

User-agent: *
Disabled: /

User-agent: Googlebot 
Disabled: /

User-agent: Googlebot-Image
Disallow: /

该网站内的页面整天都被 Googlebot 扫描。我的文件或 Google 有问题吗?


它应该是Disallow:, not Disabled:.

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

Googlebots 忽略 robots.txt? [关闭] 的相关文章

随机推荐