1.人工处理
很多人在处理无效页面的时候可能会首先想到会用robots或者nofollow把这个页面屏蔽掉,但是这种方法是不太好的,robots的生效周期是不固定的有时候会非常的长,这对于我们网站是不太好的。
最直接的办法是人工处理该页面,也就是对于这个页面我们合理的去增加相关的内容和信息,比如说联系我们这种内容很少的页面,我们可以一分为二在原来只有电话、地址、名字这些信息的基础上,增加用户的留言版块,写一写关于自己的产品优势的内容或者我们给予用户的服务承诺等等。
2.入口的处理
针对于无效页面,我们要及时的去掉该页面的入口,等我们对于这个页面填充了相关的内容以后,我们再给予该页面的入口供用户浏览。
3.ROBOTS.TXT屏蔽
有些无效页面我们是需要用ROBOTS屏蔽的,比如我们的企业产品网站,可能存在像销售网络这种的页面,这种页面往往是一个地图的图片告诉用户我们的销售网络能达到哪里,但是这种页面对于搜索引擎来说是属于无效页面。
比如我们网站的咨询页面,这种页面很多时候是镶嵌在我们网站中的一个JS,像这样的JS页面是属于无效页面,应该直接屏蔽掉。
4.相对性页面的处理
注册页、登陆页、商城的购物车、订单页面、论坛的个人中心、博客留言页面等这些页面都是属于相对性的页面,这些页面针对于用户来说是有用的,包含的很多用户的信息,而对于搜索引擎是没有太大作用的,对排名也是没有贡献值的,是不需要被搜索引擎抓取的,所以说注册页和登陆页也是需要屏蔽的。
5.论坛分页的处理
我们论坛的帖子随着不断地回复会产生很多的分页,从第一页到第N页,这些页面的相似度和重复度是相对来说比较高的,针对于这种情况,我们可以在标签中加入rel=canonical这个标签,来解决论坛帖子分页重复的问题,百度在今年开始对canonical进行支持了。