我不想我的网站被Baiduspider访问,我该怎么做?
seo优化 2022-07-27 11:52www.1681989.comseo排名
Baiduspider遵守互联网robots协议。您可以利用robots.txt文件完全禁止Baiduspider访问您的网站,或者禁止 Baiduspider访问您网站上的部分文件。 注意禁止Baiduspider访问您的网站,将使您的网站上的网页,在百度搜索引擎以及所有百度提供搜索引擎服务的搜索引擎中无法被搜索到。关于 robots.txt的写作方法,请参看我们的介绍robots.txt写作方法
您可以根据各产品不同的user-agent设置不同的抓取规则,如果您想完全禁止百度所有的产品收录,可以直接对Baiduspider设置禁止抓取。
推火网以下robots实现禁止所有来自百度的抓取
User-agent: Baiduspider
Disallow: /
推火网以下robots实现禁止所有来自百度的抓取但允许图片搜索抓取/image/目录
User-agent: Baiduspider
Disallow: /
User-agent: Baiduspider-image
Allow: /image/
请注意Baiduspider-cpro抓取的网页并不会建入索引,只是执行与客户约定的操作,所以不遵守robots协议,如果Baiduspider-cpro给您造成了困扰,请联系union1@baidu.。
Baiduspider-ads抓取的网页并不会建入索引,只是执行与客户约定的操作,所以不遵守robots协议,如果Baiduspider-ads给您造成了困扰,请联系您的客户服务专员。
推火专家百度搜索资源平台 百度搜索学堂
网站seo
- google关键词分析 什么是Google关键词分析
- 专业seo关键词优化 专业seo关键词优化策略
- seo菜鸟论坛:菜鸟论坛的核心优势
- 石狮SEO:石狮seo排名
- 汕头网站优化:汕头网站优化公司
- 什么是seo:什么是seo优化
- 新手做seo怎么做 新手seo如何操作
- 网站seo优化:seo网站优化怎么做
- 如何进行seo:如何进行seo搜索引擎优化
- 日照网站优化:日照seo公司
- 哪里有seo排名优化 seo排名优化哪里好
- 辽宁网站优化:沈阳网站优化排名
- 网站seo整站优化 网站seo整站优化怎么做
- 免费seo在线优化 免费seo在线优化方案
- 贵州网站优化:贵州网站优化的必要性
- 莆田SEO:莆田seo快速排名