Disallow,是网站控制是否允许SE搜索引擎收录文件robots.txt中的一个语句。

        1. 允许所有SE收录本站:robots.txt为空就可以,什么都不要写。

  2. 禁止所有SE收录网站的某些目录:

  User-agent: *

  Disallow: /目录名1/

  Disallow: /目录名2/

  Disallow: /目录名3/

  3. 禁止某个SE收录本站,例如禁止百度:

  User-agent: Baiduspider

  Disallow: /

  4. 禁止所有SE收录本站:

  User-agent: *

  Disallow: /

  它的用途是告诉上一子集,确定某个对象用的。

此条目发表在 SEO 分类目录,贴了 标签。将固定链接加入收藏夹。

发表评论