中国领先的网络营销服务提供商! 全国统一电话: 13510676752,0755-25238082
关于我们 联系我们 付款方式
深圳网站优化      
首页 百度SEO 360 SEO Google SEO Alibaba SEO SEO型网站 SEO案例
seo我不想我的网站被Baiduspider访问,我该怎么做?
来源: 深圳seo 发布时间:2020-2-6

Baiduspider遵守互联网robots协议。您可以利用robots.txt文件完全禁止Baiduspider访问您的网站,或者禁止 Baiduspider访问您网站上的部分文件。 注意:禁止Baiduspider访问您的网站,将使您的网站上的网页,在百度搜索引擎以及所有百度提供搜索引擎服务的搜索引擎中无法被搜索到。关于 robots.txt的写作方法,请参看百度的 robots.txt写作方法
您可以根据各产品不同的user-agent设置不同的抓取规则,如果您想完全禁止百度所有的产品收录,可以直接对Baiduspider设置禁止抓取。网站优化
以下robots实现禁止所有来自百度的抓取:
User-agent: Baiduspider
Disallow: /

以下robots实现禁止所有来自百度的抓取但允许图片搜索抓取/image/目录:
User-agent: Baiduspider
Disallow: /

User-agent: Baiduspider-image
Allow: /image/

相关seo文章
seoBaiduspider抓取造成的带宽堵塞?
seo我希望我的网站内容被百度索引但不被保存快照,我该怎么做?
seo为什么我的网站已经加了robots.txt,还能在百度搜索出来?
seo我不想我的网站被Baiduspider访问,我该怎么做?
seo如何判断是否冒充Baiduspider的抓取?
seo为什么Baiduspider不停的抓取我的网站?
seoBaiduspider对一个网站服务器造成的访问压力如何?
seoBaiduspider的user-agent是什么?
seo什么是Baiduspider
seo通过什么方式才能保持网站的稳定?
深圳地址:深圳市南山区深南大道嘉南美地E栋19F  电话:13510676752        汕头地址:汕头市澄海区同益路中信金城11栋3F 电话:15815070505
 Copyright @ 2002-2021 版权所有 阳光网营网 粤ICP备08118165号 深圳seo
在线客服

  在线客服1号
  在线客服2号
  在线客服3号
热线电话

微信二维码