如何使用robots语法禁止搜索引擎蜘蛛抓取图片

  由于大量图片会增加服务器大大增加带宽,一些主机是有限制月流量的,所以为了控制可以使用以下方法解决:(当然带宽无限大,不建议这样做,必竟对SEO有影响)

打开robots.txt文件,添加以下代码:

  User-agent: Baiduspider    Disallow: /*.jpg$    Disallow: /*.jpeg$    Disallow: /*.gif$    Disallow: /*.png$    Disallow: /*.bmp$    如果想进一步了解ROBOTS文件的用法可以参见:13个robots文件常见用法说明表(http://www.dosxp.com/seo/4357.html)。


文章来自全球站长之家(www.dosxp.com):http://www.dosxp.com/seo/4354.html

你可能感兴趣的:(知识收藏,搜索引擎,服务器)