1.文件名为:robots.txt
2.文件存放在网站根目录下。
3.文件以ansi编码保存。
示例：
User-agent: *
Disallow: /BBS
在线robots.txt检测：http://tool.motoricerca.info/robots-checker.phtml
robots.txt编写规范：http://www.robotstxt.org/orig.html
1.文件名为:robots.txt
2.文件存放在网站根目录下。
3.文件以ansi编码保存。
示例：
User-agent: *
Disallow: /BBS
在线robots.txt检测：http://tool.motoricerca.info/robots-checker.phtml
robots.txt编写规范：http://www.robotstxt.org/orig.html
博客园 © 2004-2026
浙公网安备 33010602011771号
浙ICP备2021040463号-3
此内容由惯性聚合(RSS阅读器)自动聚合整理，仅供阅读参考。 原文来自 — 版权归原作者所有。