使用<META>标籤来阻挡搜寻蜘蛛检索网页

    SEO基础 wuya 71次浏览 已收录 0个评论

    使用标籤来阻挡搜寻蜘蛛检索网页
    你可以使用特定的标籤去告知搜寻引擎机器人,不要去检索特定的网页内容。
    如果你想要知道,如何去阻挡网页蜘蛛检索你全部的网站,可以阅读这篇文章(如何使用robots.txt阻止搜寻引擎爬(抓取)你的网站?)
    你也可以使用相同的标籤,来命令搜寻机器人不要去扫描网页以及追蹤网页连结。
    这是一个很好用的标籤,即使你只想尝试去限制整个网站的一个网页。
    在HTML程式码中,’no follow, no index’是基本的:

    若要複製使用请将<>改为半形。
    <html>
    <head>
    <title>…</title>
    <META NAME=”ROBOTS” CONTENT=”NOINDEX, NOFOLLOW”>
    </head>
    </html>

    当使用标籤时,有三个重点部分是需要牢记的。

    1.如果他们愿意,网路机器人可以忽略标籤,会忽略标籤大多是不良的网路机器人,他们会扫描网路安全漏洞并利用它,或者是使用电子邮件收割机,让滥发邮件者抓取E-mail。

    2.NOFOLLOW 指令只是用于网页上的连结,如果搜寻机器人找到其它网页的连结,并且没有使用NOFOLLOW,搜寻机器人会直接到达这个网页。

    3.在这里的NOFOLLOW标籤,是不同于rel=”nofollow”属性,你可以设定在<a href> 标籤里。

    撰写给搜寻机器人看的标籤
    像其它标籤一样使用在HTML,他们应该被放置在HTML程式码的部分,就如同範例上。
    <META NAME=”ROBOTS” CONTENT=”NOINDEX, FOLLOW”>
    让我们依照上面的例子再接再厉。
    1.NAME属性是使用”ROBOTS”。
    2.CONTENT属性有四种不同的参数可以设定:
    逗号分开参数是允许的,但是只有某些组合是有意义的,如果没有使用标籤,对搜寻机器人的预设而言,是使用INDEX,FOLLOW的,所以你不需要去指定,还是可以被抓取到。

    <META NAME=”ROBOTS” CONTENT=”NOINDEX, FOLLOW”>
    <META NAME=”ROBOTS” CONTENT=”INDEX, NOFOLLOW”>
    <META NAME=”ROBOTS” CONTENT=”NOINDEX, NOFOLLOW”>

    如果你需要进一步的了解,如何阻挡搜寻机器人检索你的网站,你可以观看这篇文章(如何使用robots.txt阻止搜寻引擎爬(抓取)你的网站?)


    学海无涯 , 版权所有丨如未注明 , 均为原创丨转载请注明使用<META>标籤来阻挡搜寻蜘蛛检索网页
    喜欢 (0)
    发表我的评论
    取消评论
    表情 加粗 删除线 居中 斜体 签到

    Hi,您需要填写昵称和邮箱!

    • 昵称 (必填)
    • 邮箱 (必填)
    • 网址