一、实验前提:
SEO实践过程中,我们经常会碰到这样的困难:
网站上,有一些内容页面,内容原创性很好,也符合文章友好性标准,但莫名其妙得,就是不被搜索引擎收录,我们称为黑名单URL。
此次,我们准备了一些长尾都没有被收录的页面URL,通过各方面渠道试图解决这些“困难户”。
二、实验过程:
过程中,通过百度的单条URL提交入口提交过这些未被收录的页面URL,后面的URL未提交(但不排除有其他人提交过)。但通过这次的实验,已经可以明白,针对具体某一个URL,不存在黑名单的问题。通过提交URL,多角度展示和外链吸引蜘蛛,一段时间后,是可以让获得收录。
三、实验结果:
从7月25日到9月1日,这些页面均被正常收录。主要采取的手段有:
1、在网站首页放置未被收录页面的URL;
2、通过百度单条URL提交通道,将以上URL逐个提交;
3、部分搜外网友通过发布外链方式参与实验。
你还可以通过这些方式:
1、sitemap中着重添加不收录的页面URL;
2、使用Google抓取方式来提醒Googlebot抓取。
四、达人实验观点:
1、郭振兴观点:
1.蜘蛛在第一次抓取时,从算法来看认为该页面价值偏低,决定不予收录;
2.蜘蛛在第二次抓取时,页面没有改动,不再分析;
3.蜘蛛在第三次抓取时,在页面更新的内容中没有发现更多价值,决定不予收录;
4.如果页面不改动,虽然加很多链接,蜘蛛返回一个无变化的状态码,就不容易收录;
5.改一改页面的标题或内容,让蜘蛛发现页面出现较大变动,发现页面出现了更多的价值,收录可能性会提高。
自己手中有一个网站,很多栏目列表页收录很差,因为这些页面的内容没有办法组成一长段完整的内容(两个页面的标题没有办法组合在一起),在这些列表上方加了一些栏目描述性的内容,后来证明,收录变好了一些。
女生对男生的第一印象特别重要,如果她对你第一印象很差,之后你出现在她视界中的次数越多,她就会对你印象越差,而如果你以一种完全改变了的形象出现在她眼前,她定会士别三日刮目相看。
2、王建中观点:
刚简单看了下这些链接,搜索了下这些链接的标题
有些标题在搜索引擎呈现的 的 其他页面的 推荐的 这个标题,只是没有完全展现出来,本人觉得还是时间问题。
传统的方法
1、站内和站外 增加这些未收录的链接(内部每个页面)
2、网站地图2种格式这些链接靠前测试以及首页重点推荐
3、页面价架构问题 简单修改网站架构问题(如版块、添加最新文章版块、随即文章等)
4、简单修改页面标题和描述(原创测试)
5、高质量独立域名网站为其做锚文本链接
之前操作的@合亚眼镜网 网站改版后的将近2个月,很多列表页面都未收录,那段时间进入沙盒期,集合以上的方法 这些链接依次都慢慢开始收录!
3、吴先志观点:
来到医疗集团之后我听到一个新的概念:就是引链,称:引蜘蛛来进行抓取。做引链最多的平台就是seowhy论坛,一般新页面发了引链就会收录。
夫唯老师发的这几个URL内容都不错,至于有什么方法促进这个收录:1、到论坛发一个这种引链接,2、去除干扰版块,就是给代码瘦一下身,这个貌似可以试一下。
这个所谓的黑名单URL,没有听说过这个概念,未收录的URL很多,医疗站就不发出来了,我们对于未收录的做法就是再发一次,或是重新编辑上传。
4、杨营观点:
个人认为,如果想让之前的一些页面收录,最好的方法就是改变原来的目录内容,增加更多新颖的有吸引力的内容,并去一些收录较快的平台进行展示,一般久未收录的内页,一般再次被百度收录时间周期相对较长,在被收录的过程中,这些页面如果能够让搜索引擎发现有新的改动,那么网站的内页也一样会被再次更新快照,被百度所收录。
或许是因为百度发现这些内容或许在某些网站内已经被收录,或是因为内容质量不高,而引起不收录,改变是让百度重新收录的最好方法。
5、陈超观点:
根据我个人的经验而言:
我觉得一般存在着过度优化的页面可能会导致不被收录,前两天我上线了一个专题:(URL)
做了一些推荐,就是不被收录。后来一检查,关键词密度太高了。加了一段内容,稀释了密度,但是由于加的内容是摘抄的百科的,可能导致页面的质量度下降,依然没被收录。
往往不被收录的页面,应该是由于百度认为其不具备推荐价值,也就是说存在过度优化的嫌疑。页面的过度优化,往往表现在关键词密度过度以及关键词布局等方面,可以修改下这两个方面。
如果不行的话,就保持页面的更新,稀释掉页面的过度优化。
五、结论:
除此之外,还有一些常被大家疏忽的小原因,比如:
1、Robots冲突导致部分页面被拒;
2、Google根据不同地区政策,隐藏部分收录,比如Safe Search;
3、一些程序默认添加的meta标记;
4、网站首选问题导致只收录单个标准形式的页面(Google存在)。
既然不存在黑名单的情况,那小伙伴们开始动手检查网站上有哪些重要的页面还没被收录吧。