资料简介:
我们网站新发布的文章基本都是半天就被收录,而且百度排名都能在第一页,不知道为什么突然之间新发布的内容,3-4天了都没有被收录?
查看了网站日志,可见百度蜘蛛抓取量还是很多,但是光抓取某些列表页面的URL,占据了70%的抓取比例,所以通过robots禁止了蜘蛛对该类页面的抓取,同时检查了一遍网站的友情连接、同时发布一些原创文章,希望能好吧!
我们网站新发布的文章基本都是半天就被收录,而且百度排名都能在第一页,不知道为什么突然之间新发布的内容,3-4天了都没有被收录?
查看了网站日志,可见百度蜘蛛抓取量还是很多,但是光抓取某些列表页面的URL,占据了70%的抓取比例,所以通过robots禁止了蜘蛛对该类页面的抓取,同时检查了一遍网站的友情连接、同时发布一些原创文章,希望能好吧!
暂无评论