如何禁止所有搜索引擎访问或收录网站?

 2017-09-06 15:35:01  260 人阅读  0 条评论
 最佳答案:

方式一:设置 robots.txt 方法

搜索引擎默认的遵守 robots.txt 协议,创建 robots.txt 文本文件放至网站根目录下,编辑代码如下:

  1. User-agent: *
  2. Disallow: /

通过以上代码,即可告诉搜索引擎不要抓取采取收录本网站,注意慎用如上代码:这将禁止所有搜索引擎访问网站的任何部分。

下面举几个 robots.txt 用法的例子:

  1. User-agent: *
  2. Disallow: /

禁止所有搜索引擎访问网站的所有部分

  1. User-agent: Baiduspider
  2. Disallow: /

禁止百度收录全站

  1. User-agent: Googlebot
  2. Disallow: /

禁止 Google 收录全站

  1. User-agent: Googlebot
  2. Disallow:
  3. User-agent: *
  4. allow: /

禁止除 Google 外的一切搜索引擎收录全站

  1. User-agent: Baiduspider
  2. Disallow:
  3. User-agent: *
  4. allow: /

禁止除百度外的一切搜索引擎收录全站

  1. User-agent: *
  2. Disallow: /css/
  3. Disallow: /admin/

禁止所有搜索引擎访问某个目录(例如禁止根目录下的 admin 和 css)

方式二:设置网页代码方法

在网站首页代码<head>与</head>之间,加入<meta name="robots" content="noarchive">代码,此标记禁止搜索引擎抓取网站并显示网页快照。

在网站首页代码<head>与</head>之间,加入<meta name="Baiduspider" content="noarchive">即可禁止百度搜索引擎抓取网站并显示网页快照。

在网站首页代码<head>与</head>之间,加入<meta name="googlebot" content="noarchive">即可禁止谷歌搜索引擎抓取网站并显示网页快照。

答案来自:html 模板网 - https://www.haook.cn/html/Va/show/40.html

问题标签: ,  更多问题标签>>
编辑作者:懿古今(QQ号:2226524923,QQ群:415623933
免责声明:本文内容来源于互联网,仅供参考学习之用,如有侵权请联系本站修改删除!
问题分类:WordPress问题 ,  建站技术问题 ,  操作系统问题 ,  办公软件问题 ,  搜索热点问题 ,  综合其他问题

相关问题 热门问题近期问题随机标签

 发表评论

中国赞表情摊手表情吃瓜表情笑哭表情偷笑表情衰表情汗表情思考表情费解表情抓狂表情晕表情流泪表情疑问表情嘻嘻表情吃惊表情鼓掌表情