通过HTTP状态代码查看搜索引擎蜘蛛如何爬行你的网站 晴

郝聪 , 2006/08/30 21:23 , 搜索引擎优化(SEO) » SEO技术 , 评论(8) , 阅读(38975) , Via 本站原创 | |


更多



所有 HTTP 状态代码及其定义。

代码 指示
2xx  æˆåŠŸ
200  æ­£å¸¸ï¼›è¯·æ±‚已完成。
201  æ­£å¸¸ï¼›ç´§æŽ¥ POST 命令。
202  æ­£å¸¸ï¼›å·²æŽ¥å—用于处理,但处理尚未完成。
203  æ­£å¸¸ï¼›éƒ¨åˆ†ä¿¡æ¯ — 返回的信息只是一部分。
204  æ­£å¸¸ï¼›æ— å“åº” — 已接收请求,但不存在要回送的信息。
3xx  é‡å®šå‘  
301  å·²ç§»åŠ¨ — 请求的数据具有新的位置且更改是永久的。
302  å·²æ‰¾åˆ° — 请求的数据临时具有不同 URI。
303  è¯·å‚阅其它 — 可在另一 URI 下找到对请求的响应,且应使用 GET 方法检索此响应。
304  æœªä¿®æ”¹ — 未按预期修改文档。
305  ä½¿ç”¨ä»£ç† — 必须通过位置字段中提供的代理来访问请求的资源。
306  æœªä½¿ç”¨ — 不再使用;保留此代码以便将来使用。
4xx  å®¢æˆ·æœºä¸­å‡ºçŽ°çš„错误
400  é”™è¯¯è¯·æ±‚ — 请求中有语法问题,或不能满足请求。
401  æœªæŽˆæƒ — 未授权客户机访问数据。
402  éœ€è¦ä»˜æ¬¾ — 表示计费系统已有效。
403  ç¦æ­¢ — 即使有授权也不需要访问。
404  æ‰¾ä¸åˆ° — 服务器找不到给定的资源;文档不存在。
407  ä»£ç†è®¤è¯è¯·æ±‚ — 客户机首先必须使用代理认证自身。
410   请求的网页不存在(永久)ï¼›
415  ä»‹è´¨ç±»åž‹ä¸å—支持 — 服务器拒绝服务请求,因为不支持请求实体的格式。
5xx  æœåŠ¡å™¨ä¸­å‡ºçŽ°çš„错误
500  å†…部错误 — 因为意外情况,服务器不能完成请求。
501  æœªæ‰§è¡Œ — 服务器不支持请求的工具。
502  é”™è¯¯ç½‘å…³ — 服务器接收到来自上游服务器的无效响应。
503  æ— æ³•èŽ·å¾—服务 — 由于临时过载或维护,服务器无法处理请求。

比如说:
2004-12-03 07:33:25 61.135.145.208 - *.*.*.* 80 GET /index/119.htm - 304 Baiduspider+(+http://www.baidu.com/search/spider.htm)
这就意味着百度蜘蛛在2004-12-03 07:33:25爬过/index/119.htm这一页,它发现这页是没有更新过的。

再比如说:2004-12-03 07:33:25 61.135.145.208 - *.*.*.* 80 GET /index/120.htm - Googlebot/2.1
(http://www.google.com/bot.html)
这就意味着Google蜘蛛在2004-12-03 07:33:25爬过/index/119.htm这一页,它发现这页是新的,并全部爬完。
相关日志
SEO项目分析及运作流程
第五届Netconcepts SEO排行榜大会演讲PPT分享
百度搜索结果图文标识规则分析
Flash网页SEO特殊优化策略
Wordpress SEO插件
搜搜SoSo搜索引擎优化SEO规范
【SEO必备】百度蜘蛛IP段大全与权重说明
社会化购物分享网站SEO策略研究
百度站长平台“外链工具”与“搜索关键词查询”功能评测
从Bing(必应)SEO技巧中分析未来网站优化的发展趋势

最后编辑: 郝聪 编辑于2006/11/17 18:32
韩国旅游 Email
2011/08/30 16:37
能说的再详细点吗?像200  0  64、400  0  64这都是怎么回事?
深圳代驾 Email
2011/07/16 15:44
学习了  è°¢è°¢
seo Email
2010/11/19 21:50
503状态码的存在并不意味着服务器在过载的时候必须使用它。某些服务器只不过是希望拒绝客户端的连接。
王亚波 Email
2009/12/17 16:12
学习了,从来没自己看过。我的是虚拟主机怎么查看?我是一个菜鸟,能麻烦给我发一封邮件吗?
小哀
2007/06/02 22:43
APACHE 的log文件在那里??????
黑色梦中 回复于 2007/06/05 08:58
看你安装APACHE在哪个目录了
一般是/usl/local/apache/logs
一休
2007/05/07 22:23
LOG文件是在服务器中吗,我要到哪去看呢,说详细点好吗,我菜呀
黑色梦中 回复于 2007/05/09 17:39
WEB服务器(IIS或APACHE)位每个运行的站点都建立一个LOG文件,用于记录站点的访问记录
APACHE里的LOG文件在/usr/local/apache/logs里
IIS里的LOG文件:查看[默认网站]的属性,启用日志记录,默认地址是:C:\WINDOWS\system32\LogFiles
fabulous
2007/04/12 10:24
这个在那儿看啊
黑色梦中 回复于 2007/04/12 15:35
LOG文件
jeok
2007/04/09 15:50
zan
分页: 1/1 第一页 1 最后页
发表评论

昵称

网址

电邮

打开HTML 打开UBB 打开表情 隐藏 记住我 [登入] [注册]