） 進(jìn)行了第一次抓取。把IP地址65.55.106.108輸進(jìn)到IP138或其他查詢IP的系統(tǒng)里面可以看出，該IP地址對(duì) 應(yīng)的是“美國(guó) Microsoft公司”，那么我們可以看成微軟的bing搜索引擎的蜘蛛的第一次到來(lái)。搜索引擎根據(jù)robots.txt的設(shè)定，知道了哪些答應(yīng)抓取，哪些不盼看被抓取，那它就在這個(gè)網(wǎng)站上開(kāi)工了，“日志2”顯示的是bing首先抓取了該網(wǎng)址的主頁(yè)（斜杠/意為主頁(yè)）。
/blog/2009/11/21/125879090551788.html
感謝 田東山 的投稿
公司介紹 | 合作程序 | 信譽(yù)聲明 | 寧波網(wǎng)站建設(shè) | 營(yíng)業(yè)執(zhí)照 | 付款方式 | 聯(lián)系我們
浙江省寧波海曙品優(yōu)網(wǎng)絡(luò)技術(shù)有限公司 版權(quán)所有 2003-2010 浙ICP備06045724號(hào)
QQ：416624725 851863692 網(wǎng)站建設(shè)熱線：0574-87742316
寧波網(wǎng)站建設(shè)——九年老牌寧波網(wǎng)絡(luò)公司熱誠(chéng)為全國(guó)各企業(yè)網(wǎng)站建設(shè)服務(wù)，努力幫企業(yè)建設(shè)出真正能產(chǎn)生效益的企業(yè)網(wǎng)站
本網(wǎng)站所有的圖片、文字資料歸寧波海曙品優(yōu)網(wǎng)絡(luò)技術(shù)有限公司所有，任何人不得盜用，違者必究。
