颠覆传统,我有担当 学SEO只选有担当的机构
首页 >SEO常见问题 > 内容页不收录,不一定是百度蜘蛛Baidu Spider的错

内容页不收录,不一定是百度蜘蛛Baidu Spider的错

优就业SEO学院2016-09-01 10:22:06来源:优就业SEO学院

第31届夏季里约奥林匹克奥运会结束了,各新闻网站的小编们终于可以好好休息了,可有些站长们却高兴不起来,据说:编辑们辛苦做的原创稿件,可百度却不收录!.并且在奥运会期间有这样的事情.

后据百度工程师调查发现,这些未收录的链接,发现均显示为“死链”,然而这些所谓的死链,现在访问都是好好的。原来,各新闻网站为了抢新闻,提前制作了新闻稿并制作成链接并且发布,虽然没有在首页等重要页面推送给用户,但却被百度蜘蛛Baidu Spider发现,更重要的是,这些链接向百度蜘蛛Baidu Spider发出的返回的状态码是404

举个例子: 中国女排进入决赛后,某网站做了A和B两个页面,分别为夺冠和摘银,为了防止用户在比赛结束之前阅读到页面内容,站点将两个链接都设置为404!(等到比赛结束后,再将其中一个页面的html返回码改为200)。虽然页面并没有向用户推送,但还是被聪明的百度蜘蛛Baidu Spider发现。然而这里的问题是,百度蜘蛛Baidu Spider发现页面是404,又无法判断出这是一个重要页面,于是直接打入冷宫不再理睬。

所以,我们得出个最终的结论

1:页面制作完成后再放到Baidu spider可以发现的地方,这样才能达到最好的抓取效果。

2:页面未对外公开之前,千万不要通过工具推送给百度。

最后,让我们再了解更多关于百度蜘蛛Spider的搜索流程

快速读懂Baidu Spider 3.0

百度蜘蛛 Baidu Spider 常见的8大问题

免责声明:本文来源于网络,由网友提供或网络搜集,仅供个人交流学习参考使用,不涉及商业盈利目的。如有版权问题,请联系本站管理员予以更改或删除。谢谢合作!

热门标签:
百度蜘蛛 BaiduSpider
收藏人收藏
3

相关文章

最新文章

专业的SEO培训机构

师资团队教学环境关于我们联系我们学员体验热门标签

Copyright©1999-{date('Y')} 北京中公教育科技股份有限公司 .All Rights Reserved
京ICP备10218183号-88 京ICP证161188号 京公网安备11010802020723号