robots与nofollow在池站里的正确用法
robots 和 nofollow 是两个最老的控抓取工具,也是池站里被误用最多的两个。
robots 的取舍
池站该封的是无价值页:搜索结果页、登录注册页、空标签页。该放的是全部内容页和 sitemap。最蠢的操作是整站 Disallow 然后纳闷为什么不收录,这种 case 每个月都能见到。
nofollow 的取舍
池站导出链里,广告位、友情链接交换位加 nofollow 保护自身权重。挂载的业务站链接绝对不要加,加了等于把池子的导流效果掐掉一半。
一个组合技巧
用 robots 封掉参数页和打印页,用 canonical 而不是 nofollow 处理重复页。nofollow 控制的是权重流动,canonical 声明的是页面唯一性,两个工具别混用。