网站日志各字段含义

请求（request）

记录表单数据的请求类型，通常只有GET、POST两种。

状态码（status）

通过响应的状态码来判断页面状态，对统计这些信息可以有效地改进页面的设计，提高用户体验以及SEO的友好程度，传输字节数（bytes）

显示出访客对网页的下载字节数，我们可以利用这点来判断访客是否完全打开，或者下载网页中途是否中断、关闭。

来源页面（referrer）

即访客访问网页的来源地址，记录访问的来源网页、跳转网页、搜索引擎关键字等…

用户代理（agent）

分析访客的系统、浏览器类型、以及其他信息，还可以记录下搜索引擎的蜘蛛名称。

来看看蜘蛛抓取留下的网站日志记录：

“123.125.68.72 – – [20/May/2010:01:42:03 +0800] “GET
/tag/seo HTTP/1.1″ 200 12495 “-”
“Baiduspider+(+http://www.baidu.com/search/spider.htm)”

对这条网站日志记录字段依次分析：

1. 123.125.68.72 访客来源IP
2. [20/May/2010:01:42:03 +0800] 访客访问时间以及地区时间差异值
3. GET /tag/seo HTTP/1.1 GET为请求方式，/tag/seo 目标地址， HTTP/1.1 版本协议号
4. 200 12495 200表示访问完成，详情查看：HTTP状态码含义以及分析。 12495为下载网页大小，单位：字节。
5. Baiduspider+(+http://www.baidu.com/search/spider.htm) 访客代理信息，为百度的爬虫程序名称。

很明显，这是一条百度蜘蛛抓取过的记录，在20/May/2010:01:42:03，来源于123.125.68.72的百度蜘蛛
Baiduspider+(+http://www.baidu.com/search/spider.htm)，用过GET方式访问/tag/seo
HTTP/，网页下载大小为12495字节，反馈出200状态码表示成功抓取/访问。

来源页面在哪里查看呢 ？” 200 12495 ““——” “Baiduspider+(+http://www.baidu.com/search/spider.htm)”，红色字体部分即为来源页面。