1. 首页>>搜索引擎

如何让 sogou spider 不抓我的网站

sogou spider 支持 robots 协议,您可以在网站的根目录放置 robots.txt。

robots.txt 的规则请参阅 http://www.robotstxt.org/。需要注意的是,最新更新的 robots.txt 可能需要几个星期才能体现出效果来,另外,被您禁止 sogou spider 收录的网页将不能在搜狗搜索引擎上检索到。


本文由网络搜索发布,不代表本站立场,如有侵权请联系站长删除。

投稿信箱

956558536@qq.com

文档附件24小时内上线

内容不反对人民不反对党