帮助企业成功,是我们的梦想!

如何使用标签来阻挡搜寻蜘蛛检索网页

你可以使用特定的标签去告知搜寻引擎机器人,不要去检索特定的网页内容。

如果你想要知道,如何去阻挡网页蜘蛛检索你全部的网站,可以阅读这篇文章(如何使用robots.txt阻止搜寻引擎爬(抓取)你的网站?)

你也可以使用相同的标签,来命令搜寻机器人不要去扫描网页以及追踪网页连结。

这是一个很好用的标签,即使你只想尝试去限制整个网站的一个网页。

在HTML程式码中,’no follow, no index’是基本的:

若要複製使用请将<>改为半形。

<html>
<head>
<title>…</title>
<META NAME=”ROBOTS” CONTENT=”NOINDEX, NOFOLLOW”>
</head>
</html>
当使用标籤时,有三个重点部分是需要牢记的。

1.如果他们愿意,网路机器人可以忽略标签,会忽略标籤大多是不良的网路机器人,他们会扫描网路安全漏洞并利用它,或者是使用电子邮件收割机,让滥发邮件者抓取E-mail。

2.NOFOLLOW 指令只是用于网页上的连结,如果搜寻机器人找到其它网页的连结,并且没有使用NOFOLLOW,搜寻机器人会直接到达这个网页。

3.在这裡的NOFOLLOW标签,是不同于rel=”nofollow”属性,你可以设定在<a href> 标签里。
撰写给搜寻机器人看的标签
像其它标签一样使用在HTML,他们应该被放置在HTML程式码的部分,就如同范例上。

<META NAME=”ROBOTS” CONTENT=”NOINDEX, FOLLOW”>
让我们依照上面的例子再接再厉。

1.NAME属性是使用”ROBOTS”。

2.CONTENT属性有四种不同的参数可以设定:
逗号分开参数是允许的,但是只有某些组合是有意义的,如果没有使用标籤,对搜寻机器人的预设而言,是使用INDEX,FOLLOW的,所以你不需要去指定,还是可以被抓取到。

<META NAME=”ROBOTS” CONTENT=”NOINDEX, FOLLOW”>
<META NAME=”ROBOTS” CONTENT=”INDEX, NOFOLLOW”>
<META NAME=”ROBOTS” CONTENT=”NOINDEX, NOFOLLOW”>

点赞
     

博主作者:梁永昌 (QQ/微信号:1558154330 )
博主提供 南宁seo优化,企业网站排名优化,seo推广,网络营销,网站建设,微信小程序开发。
我们的梦想就是帮助企业快速增长,我们是企业的搬运工,神奇快速的搬运工。
业务洽淡 QQ/微信号:1558154330

发表评论

电子邮件地址不会被公开。 必填项已用*标注

<友情连结>新利安卓下载/亚博在线国际/Ju111.net/