【什么样的页面属于无效页面呢?】
简单的来讲“信息被收录了,但是从来带不来任何一丁点的流量,这样的页面就是无效页面!”复杂的来讲,这些页面通常包含:大量的翻页列表页、评论页、无有价值信息页,还有:“百度认为的重复页”。
对于最后一点做一个解释,什么是百度认为的重复页呢?就是所谓的你对其他站点进行的采集、复制。但是就目前而言:百度认为互联网上目前存在的信息,已经可以满足用户需求了,不再需要你这个可有可无的信息,那么又会如何给你排名呢?
【蜘蛛为什么还会收录无效页面?】
首先来讲:无效页面不意味着严重影响蜘蛛的抓取页面,不影响其抓取的,不存在严重作弊问题的都会被收录。其次:百度收录一些信息后,会对其进行再次判断,如果信息质量达不到索引要求,会被重新踢出去!或者说,还有一部分没有被T出去的理由是:你被当做备胎来处理了!
跑长途的汽车,后面都挂着几个备胎,对于搜索引擎也是一样,平时你是没有任何价值的。除非另外的几个轮胎爆了,才有你的使用价值!备胎,知道什么是备胎吗?如果还不懂的话,换个角度:你喜欢的女神不跟你在一起,但又不疏远你!理由?万一她被甩了呢?或者甩人了。
【如何降低无效的收录页面提升网站价值?】
对此,要补充一个知识点,关于robots.txt的文件,很多网站都没有增加这个文件,甚至即使增加了也是允许蜘蛛抓取全站。这样的协议有什么意义呢?
优秀的seo们会利用其减少无效的收录页面,举个简单的例子:关于我们、联系我们、合作方式,以及一些即使被搜索引擎抓取了,又没有用的页面!
除了这些外,还要控制如“评论、留言”这样的页面,有很多网站,点击一个用户评论后,都会打开一个新的URL地址!