草根站长论坛's Archiver

芳子 发表于 2008-6-20 14:17

教你看百度蜘蛛爬行检测代码意思

首先你要查看服务器IIS日志,看看为什么被K站.p G{!] Z&Wi
  具体操作方法记事本打开IIS日志内容,然后用ctrl+F查找baidu 如果发现有 Baiduspider就说明百度蜘蛛爬行过,QK7N@6V;w$?u jJV8@
  反之则没有。百度蜘蛛一般晚上凌晨工作的很勤。以下是百度蜘蛛爬行检测代码意思。希望对各位站长好友有所帮助。 q"s7w0b*R;h7H
  2xx 成功%O&q,A:L8[3Lm
  200 正常;请求已完成。"q'W.z-QrO"t8Tu
  201 正常;紧接 POST 命令。h&Jc8Q9oS U${XB
  202 正常;已接受用于处理,但处理尚未完成。
ZQgn-M_z   203 正常;部分信息 — 返回的信息只是一部分。
1c$tm5T6S'ZN   204 正常;无响应 — 已接收请求,但不存在要回送的信息。Y ca,G-O
  3xx 重定向'^%z@{#{
  301 已移动 — 请求的数据具有新的位置且更改是永久的。
k6Wy |8h BKZC   302 已找到 — 请求的数据临时具有不同 URI。
0@8AJK-h.e:?G[   303 请参阅其它 — 可在另一 URI 下找到对请求的响应,且应使用 GET 方法检索此响应。W%vl{#jJ/GL I*V
  304 未修改 — 未按预期修改文档。
i3pb `pS/~,t?6p   305 使用代理 — 必须通过位置字段中提供的代理来访问请求的资源。huW'c~:L
  306 未使用 — 不再使用;保留此代码以便将来使用。:W,g u]&N
  4xx 客户机中出现的错误hTnYpaX-iN
  400 错误请求 — 请求中有语法问题,或不能满足请求。^0C_]-CU#rz
  401 未授权 — 未授权客户机访问数据。
'r ZKRzD,xn$S[   402 需要付款 — 表示计费系统已有效。'G$D^_:f?0nRB
  403 禁止 — 即使有授权也不需要访问。
G'R8i/[8n.o:ap-d   404 找不到 — 服务器找不到给定的资源;文档不存在。
\ I:v!]eh|`   407 代理认证请求 — 客户机首先必须使用代理认证自身。-h)E [-X5L3I6c
  410 请求的网页不存在(永久);]r+Q*Z&l K/l`e*]
  415 介质类型不受支持 — 服务器拒绝服务请求,因为不支持请求实体的格式。l ]#g l?5qzxb
  5xx 服务器中出现的错误
K4s)\bA$L:f-a   500 内部错误 — 因为意外情况,服务器不能完成请求。(hckgI6C)pb
  501 未执行 — 服务器不支持请求的工具。
v[n~ {   502 错误网关 — 服务器接收到来自上游服务器的无效响应。+r9OL b}A
  503 无法获得服务 — 由于临时过载或维护,服务器无法处理请求。
f4[9sTm9O8EY#`   比如说:
Y DT O`j&u   2008-06-19 00:25:03 W3SVC818374 222.214.218.36 GET /Server.aspx- 80 - 221.10.254.26 Baiduspider+(+[url=http://www.baidu.com/search/spider.htm]http://www.baidu.com/search/spider.htm[/url]) 200 0 0 21089n7_W&q~f jY.v
  如果你的网址是[url=http://www.poidc.net/]www.poidc.net[/url]这就意味着百度蜘蛛在2008-06-19 00:25:03 爬过Server.aspx 这一页,200 0 0 21089中的200协议代码代表了请求已完成也就是它发现这页并以入库了。根据这个我们可以多查看iis日志,研究蜘蛛爬行的路径,找出自己网站存在的问题,进而改正。

页: [1]

Powered by 草根站长网 © 2007-2008