网站添加nofollow标签的用法

首页加nof主要为了节省蜘蛛的多次重复抓取。特别是页面总数比较大的网站,主导航上的首页 有必要加上nof。搜外问答主导航还没加nof,因为首页权重还不是太高,希望更高权重后吧。

使用nof标签(个人经验)爬行频率调节,重量流量调节。锚文本或没有排名意义的页面,如1:查看更多,点击查看全文;2.关于我们和企业文化,调整页面权重定位。例如,当包括所有列表页时,nof用于2-N翻页。调整蜘蛛爬行,例如,有一个外国网站的牛xx(记不住名字,根据印象说出来)。2013年12月28日12: 00,首页nof更新为掉部门导航栏,内页导航栏nof首页链接,首页nof掉新产品发布,内页nof掉子分类。据说调整主页的抓取频率,提高新页面的抓取频率,调整内部页面分类和重点页面排名~当然效果是针对谷歌的,流量很大。

例外的是,主页链接通常出现在徽标、导航栏和页面底部。适当的nof可以提高相关锚文本的链接。

其实一个页面的每个链接爬一次就够了。重复爬行对网站没有任何好处。鉴于大型网站结构复杂,需要使用nofollow禁止重复链接,让爬虫可以抓取其他有价值的页面。