教你看百度蜘蛛爬行检测代码意思
首先你要查看服务器IIS日志,看看为什么被K站.p G{!]Z&Wi具体操作方法记事本打开IIS日志内容,然后用ctrl+F查找baidu 如果发现有 Baiduspider就说明百度蜘蛛爬行过,QK7N @6V;w$? ujJV8@
反之则没有。百度蜘蛛一般晚上凌晨工作的很勤。以下是百度蜘蛛爬行检测代码意思。希望对各位站长好友有所帮助。 q"s7w0b*R;h7H
2xx 成功%O&q,A:L8[3Lm
200 正常;请求已完成。"q'W.z-QrO"t8Tu
201 正常;紧接 POST 命令。h&Jc8Q9oS U${XB
202 正常;已接受用于处理,但处理尚未完成。
203 正常;部分信息 — 返回的信息只是一部分。
204 正常;无响应 — 已接收请求,但不存在要回送的信息。Yca,G-O
3xx 重定向'^%z@{#{
301 已移动 — 请求的数据具有新的位置且更改是永久的。
302 已找到 — 请求的数据临时具有不同 URI。
303 请参阅其它 — 可在另一 URI 下找到对请求的响应,且应使用 GET 方法检索此响应。W%vl{#jJ/GLI*V
304 未修改 — 未按预期修改文档。
305 使用代理 — 必须通过位置字段中提供的代理来访问请求的资源。huW'c~:L
306 未使用 — 不再使用;保留此代码以便将来使用。:W,g u]&N
4xx 客户机中出现的错误hTnYpaX-iN
400 错误请求 — 请求中有语法问题,或不能满足请求。^0C_]-CU#rz
401 未授权 — 未授权客户机访问数据。
402 需要付款 — 表示计费系统已有效。'G$D^_:f?0n RB
403 禁止 — 即使有授权也不需要访问。
404 找不到 — 服务器找不到给定的资源;文档不存在。
407 代理认证请求 — 客户机首先必须使用代理认证自身。-h)E[-X5L3I6c
410 请求的网页不存在(永久);]r+Q*Z&l K/l`e*]
415 介质类型不受支持 — 服务器拒绝服务请求,因为不支持请求实体的格式。l ]#g l?5qzxb
5xx 服务器中出现的错误
500 内部错误 — 因为意外情况,服务器不能完成请求。(hckgI6C)pb
501 未执行 — 服务器不支持请求的工具。
502 错误网关 — 服务器接收到来自上游服务器的无效响应。+r9OL b}A
503 无法获得服务 — 由于临时过载或维护,服务器无法处理请求。
比如说:
2008-06-19 00:25:03 W3SVC818374 222.214.218.36 GET /Server.aspx- 80 - 221.10.254.26 Baiduspider+(+[url=http://www.baidu.com/search/spider.htm]http://www.baidu.com/search/spider.htm[/url]) 200 0 0 21089n7_W&q~fjY.v
如果你的网址是[url=http://www.poidc.net/]www.poidc.net[/url]这就意味着百度蜘蛛在2008-06-19 00:25:03 爬过Server.aspx 这一页,200 0 0 21089中的200协议代码代表了请求已完成也就是它发现这页并以入库了。根据这个我们可以多查看iis日志,研究蜘蛛爬行的路径,找出自己网站存在的问题,进而改正。
页:
[1]
草根站长论坛's Archiver 