★→ASP程序學習群:62655404 微信公眾號開發

詳細的百度蜘蛛爬行檢測代碼詮釋

網絡 2009/4/25 11:41:50 深山行者 字體:  瀏覽 12942 我要評論
當前標簽
蜘蛛百度

【完整足球指数】欧赔 www.urvgw.com 最近在網上看了篇有關百度蜘蛛的爬行代碼的解釋,發現和現在的爬行有些改變,已至于開始時看我的[url]www.pipiflash.com[/url]這個站的日志看不懂是什么意思,經過多次研究終于明白其中,所以今重新整理解釋如下:

做seo的朋友都知道,研究se爬行規律對于網站優化意義重大,特別是對百度蜘蛛Baiduspider的研究。本文解釋一下百度蜘蛛爬行后返回代碼代表的具體含義:

2xx 成功

200 正常;請求已完成。

201 正常;緊接 POST 命令。

202 正常;已接受用于處理,但處理尚未完成。

203 正常;部分信息 — 返回的信息只是一部分。

204 正常;無響應 — 已接收請求,但不存在要回送的信息。

3xx 重定向

301 已移動 — 請求的數據具有新的位置且更改是永久的。

302 已找到 — 請求的數據臨時具有不同 URI。

303 請參閱其它 — 可在另一 URI 下找到對請求的響應,且應使用 GET 方法檢索此響應。

304 未修改 — 未按預期修改文檔。

305 使用代理 — 必須通過位置字段中提供的代理來訪問請求的資源。

306 未使用 — 不再使用;保留此代碼以便將來使用。

4xx 客戶機中出現的錯誤

400 錯誤請求 — 請求中有語法問題,或不能滿足請求。

401 未授權 — 未授權客戶機訪問數據。

402 需要付款 — 表示計費系統已有效。

403 禁止 — 即使有授權也不需要訪問。

404 找不到 — 服務器找不到給定的資源;文檔不存在。

407 代理認證請求 — 客戶機首先必須使用代理認證自身。

410 請求的網頁不存在(永久);

415 介質類型不受支持 — 服務器拒絕服務請求,因為不支持請求實體的格式。

5xx 服務器中出現的錯誤

500 內部錯誤 — 因為意外情況,服務器不能完成請求。

501 未執行 — 服務器不支持請求的工具。

502 錯誤網關 — 服務器接收到來自上游服務器的無效響應。

503 無法獲得服務 — 由于臨時過載或維護,服務器無法處理請求。

比如說:

2008-05-10 00:28:03 W3SVC818374 222.214.218.36 GET /flash/1622.html - 80 - 221.10.254.26 Baiduspider+(+[url]//www.baidu.com/search/spider.htm[/url]) 200 0 0 21089

如果你的域名是[url]www.pipiflash.com[/url],這就意味著百度蜘蛛在2008-05-10 00:28:03 爬過[url]//www.pipiflash/flash/1622.html[/url] 這一頁,200 0 0 21089中的200協議代碼代表了請求已完成也就是它發現這頁并以入庫了。根據這個我們可以多查看iis日志,研究蜘蛛爬行的路徑,找出自己網站存在的問題,進而改正。

相關閱讀
( 2019/4/9 13:50:50 )國內網站常用的一些 CDN 靜態資源公共庫加速服務
( 2019/3/18 14:11:33 )ios蘋果版手機微信內置瀏覽器$(document).on(
( 2015/10/16 19:27:41 )httpd.ini偽靜態網站分享到微信好友微信朋友圈鏈接打不開報404錯誤的解決辦法
( 2011/5/18 16:52:10 )屏蔽優酷、奇藝、新浪視頻等視頻網站廣告的方法
( 2010/10/18 22:24:42 )對于網站改版的一些記憶。
( 2010/1/20 13:40:45 )ASP漢字轉拼音,支持自定義特殊詞語
( 2010/1/7 15:55:14 )從百度扣下來的javascript日歷
( 2009/9/26 20:31:14 )深山行者留言系統V2.3
共有0條關于《詳細的百度蜘蛛爬行檢測代碼詮釋》的評論
發表評論
正在加載評論……
返回頂部發表評論
呢 稱:
表 情:
內 容:
評論內容:不能超過 1000 字,需審核,請自覺遵守互聯網相關政策法規。
驗證碼: 驗證碼 
深山工作室網友評論聲明,請自覺遵守互聯網相關政策法規。

您發布的評論即表示同意遵守以下條款:
一、不得利用本站危害國家安全、泄露國家秘密,不得侵犯國家、社會、集體和公民的合法權益;
二、不得發布國家法律、法規明令禁止的內容;互相尊重,對自己在本站的言論和行為負責;
三、本站對您所發布內容擁有處置權。

更多信息>>欄目類別選擇
rss學習
個人空間
網站設計
網站公告
下載
photoshop學習
ASP學習
DIV+CSS學習
SEO搜索引擎憂化
java學習
HTML學習
網站信息
網站類信息
更多>>同類信息
告訴你一些GOOGLE搜索你不知道的東西
12個定律原則
百度蜘蛛飼養技巧
國內各大搜索引擎的蜘蛛名稱列表
七種網站添加鏈接的簡單方法
怎樣增加網站外鏈接和注意事項
網站需要SEO,基本的SEO建站要點
搜索引擎優化八個基礎的知識
更多>>最新添加文章
sql server中前綴為PK、UK、DF、CK、FK表的意思
網站從http改成https(ssl證書)后設置301跳轉將http跳轉到https的方法
ASP利用fso讀取文件夾里所有文件的名字
jquery動態生成的html代碼中無法使用jquery事件的解決方法
asp實現獲得當前文章的上一篇信息與下一篇信息功能及代碼
asp導出內容到excel表并自定義命名后下載(非打開)
'禁止站外提交頁面和數據
asp將中文漢字字符轉為unicode編碼(\u編碼)與把unicode編碼轉為漢字
更多>>隨機抽取信息
CSS編寫過程中常見的10個錯誤
連云港旅游網
關于字體在CSS中處理效果的思考
記錄滾動條位置
萬家樂
初學ASP動態網頁制作常用錯誤處理
FLASH中加入LOADING的最簡便方法
深山旅行社管理系統免費版 V2.3