网站收录 robots 设置求助
本帖最后由 yefeng787 于 2014-3-9 15:09 编辑我的page页被收录了,
xxxx.com/page/4
我想用 robots 设置不被收录
是不是应该这样:
User-agent: *
Disallow: /page
如果是这样,一般多久谷歌会删除这些收录??
没人告诉我吗?求解。。。。 等谷歌蜘蛛再次爬行你的网址的时候 (个人猜测)
为什么要禁了,page页一般不怎么重复
顶上去,好心人来回答写 谢谢!!!!!!!
页:
[1]