分享
 
 
 

百度蜘蛛状态码与百度快照是否有关系

王朝网站推广·作者佚名  2011-12-05
窄屏简体版  字體: |||超大  

做网站有大半年了,今天第一次写这类文章。至于为什么要写这篇文章,是因为2009年下半年以来一直到现在,百度经常不正常,导致很多站长的网站出现快照不更新,快照回档,甚至被K的现象。所以在A5论坛和seowhy论坛上经常看到有些站长说,希望百度能尽快更新自己的快照。其实快照第二天是否更新,不一定要寄希望于他人,只要自己查查web日志,就能知道。也就是我今天要跟大家说的话题。

下面我就简单的谈一下关于百度蜘蛛访问网站后,web日志所返回的状态码与首页的百度快照是否会更新之间的关系,所谈到的都是小弟大半年以来每天观察自己网站的web日志里百度蜘蛛的爬行痕迹所摸索出来的规律,希望对大家有些帮助。

大家可以尝试着打开web日志的.log文件,web日志的默认路径是C:\WINDOWS\system32\LogFiles\W3SVC1 ,用虚拟主机的朋友可以找空间商索要。打开文件夹下的.log文件,搜索百度蜘蛛,百度蜘蛛的名字为baiduspider。然后一直Enter,可以查出百度蜘蛛访问网站后留下的所有足迹。在查找中,注意一下百度蜘蛛名字前面的IP,还有整行最后的状态码。

一般情况下,蜘蛛抓取网页如果返回200 0 0代码,则表示该网页已经成功编入索引,200 0 64是指索引数据库已经存在,没有发现网页有更新的内容,不需要重新索引的意思。304 0 0是指原来缓冲的文档还可以继续使用,跟200 0 64意思应该差不多吧。 (值得一提的是:200 0 64并不是网上很多人说的会被K站或降权,是正常现象,动态网站抓取的时候大多数出现200 0 0,即便是网站没有更新。)

在说一下蜘蛛IP,我的web日志里查到的蜘蛛IP一般都是220.181.7.*和123.125.66.*比较多,还有一个61.135.162.*,这三个段的IP是抓取网页的,123.125.68.*这个段的是百度沙盒蜘蛛IP。61.135.168.*这个段的蜘蛛是抓取图片的。不过百度蜘蛛应该还有很多,可能是按照网站的地区和线路发放蜘蛛的吧。具体情况还要具体对待。不过有一点可以肯定的是,在网站没被降权的情况下,只要有两个IP段的蜘蛛(比如我的日志里的220.181.7.*和123.125.66.*这两个段)都抓取了网站首页且返回的状态码是200 0 0,那就不用每天等到零晨四点看百度更新首页的快照了(我以前经常等到凌晨四五点才睡觉,呵呵,不过现在一般都是在早上六七点才更新快照)。

一般百度首页快照比较慢、网站权重比较低或者被降权的网站,蜘蛛一般都是返回的200 0 64的状态码。我有一个被K过的网站,当时每天都只有123.125.68.*这个段的IP,且状态码都是返回的200 0 0。

本文由热血传奇私服 http://www.123chuanqi.com 站长原创,首发于admin5,转载请保留链接,谢谢!

 
 
 
免责声明:本文为网络用户发布,其观点仅代表作者个人观点,与本站无关,本站仅提供信息存储服务。文中陈述内容未经本站证实,其真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。
2023年上半年GDP全球前十五强
 百态   2023-10-24
美众议院议长启动对拜登的弹劾调查
 百态   2023-09-13
上海、济南、武汉等多地出现不明坠落物
 探索   2023-09-06
印度或要将国名改为“巴拉特”
 百态   2023-09-06
男子为女友送行,买票不登机被捕
 百态   2023-08-20
手机地震预警功能怎么开?
 干货   2023-08-06
女子4年卖2套房花700多万做美容:不但没变美脸,面部还出现变形
 百态   2023-08-04
住户一楼被水淹 还冲来8头猪
 百态   2023-07-31
女子体内爬出大量瓜子状活虫
 百态   2023-07-25
地球连续35年收到神秘规律性信号,网友:不要回答!
 探索   2023-07-21
全球镓价格本周大涨27%
 探索   2023-07-09
钱都流向了那些不缺钱的人,苦都留给了能吃苦的人
 探索   2023-07-02
倩女手游刀客魅者强控制(强混乱强眩晕强睡眠)和对应控制抗性的关系
 百态   2020-08-20
美国5月9日最新疫情:美国确诊人数突破131万
 百态   2020-05-09
荷兰政府宣布将集体辞职
 干货   2020-04-30
倩女幽魂手游师徒任务情义春秋猜成语答案逍遥观:鹏程万里
 干货   2019-11-12
倩女幽魂手游师徒任务情义春秋猜成语答案神机营:射石饮羽
 干货   2019-11-12
倩女幽魂手游师徒任务情义春秋猜成语答案昆仑山:拔刀相助
 干货   2019-11-12
倩女幽魂手游师徒任务情义春秋猜成语答案天工阁:鬼斧神工
 干货   2019-11-12
倩女幽魂手游师徒任务情义春秋猜成语答案丝路古道:单枪匹马
 干货   2019-11-12
倩女幽魂手游师徒任务情义春秋猜成语答案镇郊荒野:与虎谋皮
 干货   2019-11-12
倩女幽魂手游师徒任务情义春秋猜成语答案镇郊荒野:李代桃僵
 干货   2019-11-12
倩女幽魂手游师徒任务情义春秋猜成语答案镇郊荒野:指鹿为马
 干货   2019-11-12
倩女幽魂手游师徒任务情义春秋猜成语答案金陵:小鸟依人
 干货   2019-11-12
倩女幽魂手游师徒任务情义春秋猜成语答案金陵:千金买邻
 干货   2019-11-12
 
推荐阅读
 
 
 
>>返回首頁<<
 
靜靜地坐在廢墟上,四周的荒凉一望無際,忽然覺得,淒涼也很美
© 2005- 王朝網路 版權所有