- 掛牌上市企業(yè)
- 60秒人工響應(yīng)
- 99.99%連通率
- 7*24h人工
- 故障100倍補(bǔ)償
什么是Baiduspider - 百度蜘蛛 |
| 發(fā)布時(shí)間: 2012/9/18 11:30:06 |
|
百度是如何收錄到那么多網(wǎng)頁(yè)的呢？這個(gè)百度用以抓取互聯(lián)網(wǎng)上數(shù)以億計(jì)的網(wǎng)頁(yè)的程序，就叫做Baiduspider-百度蜘蛛。 它是一個(gè)程序，夜以繼日得在互聯(lián)網(wǎng)上找尋新的URL，接著抓取URL上的內(nèi)容，返回到百度的網(wǎng)頁(yè)暫存數(shù)據(jù)庫(kù)。 百度用來(lái)抓取網(wǎng)頁(yè)內(nèi)容的程序，叫做Baiduspider，抓取其他內(nèi)容的蜘蛛，則是新的名字： 產(chǎn)品名稱對(duì)應(yīng)user-agent 網(wǎng)頁(yè)搜索Baiduspider 無(wú)線搜索Baiduspider-mobile 圖片搜索Baiduspider-image 視頻搜索Baiduspider-video 新聞搜索Baiduspider-news 百度搜藏Baiduspider-favo 百度聯(lián)盟Baiduspider-cpro 不少朋友會(huì)在自己的網(wǎng)站日志里看到這個(gè)蜘蛛Baiduspider-cpro，現(xiàn)在我們明白它是百度聯(lián)盟蜘蛛，用以百度聯(lián)盟程序匹配相應(yīng)的廣告。本文出自：億恩科技【www.ibaoshan.net】 服務(wù)器租用/服務(wù)器托管中國(guó)五強(qiáng)！虛擬主機(jī)域名注冊(cè)頂級(jí)提供商！15年品質(zhì)保障！--億恩科技[ENKJ.COM] |
0371-60135900
京公網(wǎng)安備41019702002023號(hào)
香港服務(wù)器租用
美國(guó)服務(wù)器租用
電信骨干機(jī)房
聯(lián)通骨干機(jī)房
