有时候需要对页面上的部分链接做网络机器人(robots)的禁爬操作,即不允许蜘蛛通过此页面去访问此链接。HTML中的A标签有一个属性可以做到这一点,写法如下:

<a href=”URL” rel=”nofollow”>**</a>

对应的URL在当前页面中,网络机器人将不会通过此页面去访问该链接。

如果需要对整个页面屏蔽网络机器人,或更多需要请参考HTML语言meta标签中robots属性值详解

12 Comments

  1. Great post and right to the point. I don’t know if this is in fact the best place to ask but do you folks have any thoughts on where to employ some professional writers? Thx 🙂

发表评论

电子邮件地址不会被公开。 必填项已用*标注

You may use these HTML tags and attributes: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <s> <strike> <strong>


*