关于百度不收录新的文章
04月 10th, 2007 by Jackie Zhang
发现百度对此博克的收录越来越慢了，爬虫来了，也只在首页爬爬，不收录新的页面。估计是被百度定位为了垃圾页面，原因就是，我在这里写的内容，有些会被写到blogspot上面去，然后在由blogspot的邮件功能发给spaces.live.com上面，就造成即使是我的原创内容，也会一起有几份，又由于百度对spaces.live.com一直很友好，一般都是爬虫先去了spaces.live.com，在发现有很多相同内容，就视为了垃圾内容，不再收录了，所以今天就先把spaces.live.com权限改变了，让爬虫去不了。后面在看看效果，截至现在百度收录数为：198
还也许有个原因就是加入了联盟，搜索引擎抓取到很多的页面，也为认为是垃圾站，严重还为封站的。不知道是不是这个原因，百度收录就减少了，不过百度对于加入的联盟内容到很友好，收录达3000多页了。但google对于本博克收录很快，对于联盟页面内容收录也很快。
到底是什么原因，我到现在也还没搞清楚，今天又把以往顶部的google广告也去除了，估计应该和广告没关系，爬虫不会去抓取JS里面的内容，但由于百度很是自私，不是没有先鉴，还是先去广告试试了。现在终于知道为什么有那么多的中国人喜欢外国的google，而不用自己国家的baidu。
0 Responses to “关于百度不收录新的文章”