首页 » 成都SEO论坛 » SEO探讨

看晕了,我的robots.txt该怎么写

(共有2层楼)
  • 永久链接：http://yeeseo.com/discuss/topic/13
  • CAT 发表于 1 年前
  • 最新回复来自 Yeeseo
  1. CAT 3

    看robots规则看的有点晕了，我想让Google和百度禁止收录不同的目录，如：禁止Google收录下载目录，禁止百度收录论坛目录，同时允许其他搜索引擎收录所有内容，是该这样写吗？

    User-agent:Googlebot
    Disallow: /down

    User-agent:Baiduspider
    Disallow: /bbs

    仰望天空 一片蔚蓝 那里是每个人最后的归宿
    发表于 1 年前 #
  2. Yeeseo 1

    你说的情况就是这么写，因为是最简单的情况。

    发表于 1 年前 #

回复

您需要 登录 才能发帖