如何禁止搜索引擎收录指定网页内容

2020-02-12 22:10:30 编辑:七云网络 来源:本站原创

我们介绍了如何使用 robots.txt 文件来禁止搜索引擎的蜘蛛抓取网站内容的方法。

但是该方法也并非对所有搜索引擎都有效,而且也有实现不了的效果,比如禁止传递链接权重、禁止快照等。

本文就介绍下如何使用 meta 标签完全禁止搜索引擎收录和索引网站的指定内容

meta 标签使用方法

meta 标签(漫游器元标记)是网页 HTML 语言标记的一种,可以让我们更精确地控制网页如何被编入搜索引擎的索引并在搜索引擎结果中显示。

# 使用方法

将编辑好的 meta 标签放在目标网页的 <head> 部分即可,示例如下:

<!DOCTYPE html>
<html>
  <head>
    <meta name="robots" content="nofollow">
    <meta name="googlebot" content="noindex, nofollow">
    ……
  </head>
  <body>……</body>
</html>

其中:

  • name:指生效的目标抓取工具(网络蜘蛛),robots 表示全部蜘蛛,也可以指定单个蜘蛛,如 Googlebot;
  • content:操作效果,noindex 表示不收入索引。

指令和效果说明:

禁止搜索引擎收录指定网页内容

# 常用代码示例

1、禁止所有搜索引擎的收录和索引,也不追踪网页上的链接,

<meta name="robots" content="noindex, nofollow">

2、只禁止谷歌和百度蜘蛛的收录和索引,

<meta name="googlebot" content="noindex">
<meta name="baiduspider" content="noindex">

3、允许搜索引擎收录,但不追踪网页上的链接,也不传递链接权重,

<meta name="robots" content="nofollow">

4、允许搜索引擎收录,但禁止显示网页快照,

<meta name="robots" content="noarchive">

5、允许搜索引擎收录,但禁止索引网页上的图片,

<meta name="robots" content="noimageindex">
本站文章均为英德网站建设网络原创文章或转载,如有版权纠纷,请联系站长QQ删除
我们猜你喜欢