Robots.txt 文件必须放在网站的根目录。放在子目录的 Robots.txt 文件搜索引擎不能爬取到,所以不会起任何作用。
例子:
http://www.seowhy.com/robots.txt 有效
http://www.seowhy.com/bbs/robots.txt 无效
如果你不能控制根目录的 robots.txt,则你可以通过在子目录网页中使用标签阻止网页被收录。
2009年3月22日星期日
订阅:
博文评论 (Atom)
一起学SEO,一起进入SEO大门,虽然我们很菜,但我们和SEOer们的起点基本是一样的,努力坚持,SEO一定会在我们手上出彩!营销就是这样,让我们一起书写推广小秘诀吧!
没有评论:
发表评论