資料介紹
單機(jī)Web Spider的數(shù)據(jù)采集速度較慢,采用MPI技術(shù)或直接用Java開發(fā)分布式Web Spider代價(jià)較高。該文利用ProActive中間件提供的主動(dòng)對(duì)象技術(shù)、網(wǎng)絡(luò)并行計(jì)算技術(shù)、自動(dòng)部署機(jī)制設(shè)計(jì)實(shí)現(xiàn)了P-Spider分布式并行Web Spider。實(shí)驗(yàn)結(jié)果表明,該P(yáng)-Spider采集速率是單機(jī)多線程Web Spider的2.2倍。
關(guān)鍵詞:Web Spider程序;ProActive中間件;并行;分布式
關(guān)鍵詞:Web Spider程序;ProActive中間件;并行;分布式
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- AI框架的分布式并行能力的分析和MindSpore的實(shí)踐一混合并行和自動(dòng)并行
- AI框架的分布式并行能力的分析和MindSpore的實(shí)踐一混合并行和自動(dòng)并行
- 基于Simulink的電子對(duì)抗分布式仿真系統(tǒng) 26次下載
- 新型的分布式并行稠密矩陣乘算法 5次下載
- 基于分布式數(shù)據(jù)Cache的實(shí)時(shí)動(dòng)態(tài)遷移機(jī)制 20次下載
- Spider67可擴(kuò)展分布式IO系統(tǒng)的用戶手冊(cè) 0次下載
- 基于Web的分布式計(jì)算機(jī)過(guò)程控制軟件設(shè)計(jì) 24次下載
- 分布式環(huán)境下的Web資源訪問(wèn)控制研究
- 基于Web Services的分布式異構(gòu)系統(tǒng)應(yīng)用集成的研究
- 基于Web Service的遠(yuǎn)程分布式故障診斷專家系統(tǒng)
- Hash和存儲(chǔ)過(guò)程在分布式數(shù)字認(rèn)證中的應(yīng)用
- 分布式并行BOD系統(tǒng)資源管理算法研究
- 基于DSP的分布式并行遺傳算法
- 分布式并行服務(wù)器中的高性能通信研究
- 基于Web services的分布式企業(yè)信息整合模型
- Java手寫分布式鎖的實(shí)現(xiàn) 612次閱讀
- tldb提供分布式鎖使用方法 923次閱讀
- 基于PyTorch的模型并行分布式訓(xùn)練Megatron解析 3196次閱讀
- 深入理解redis分布式鎖 988次閱讀
- 鴻蒙分布式相機(jī)“踩坑”分享 1910次閱讀
- 詳解Zabbix分布式監(jiān)控平臺(tái)建設(shè) 888次閱讀
- Redis分布式鎖真的安全嗎? 1029次閱讀
- 利用NI VeriStand 2010實(shí)現(xiàn)分布式同步系統(tǒng)的設(shè)計(jì) 3437次閱讀
- 詳談分布式系統(tǒng)的定義及屬性 3896次閱讀
- 分布式光纖傳感器原理_分布式光纖傳感器的應(yīng)用 8835次閱讀
- Redis 分布式鎖的正確實(shí)現(xiàn)方式 3615次閱讀
- 淺談分布式塊存儲(chǔ)的元數(shù)據(jù)服務(wù)設(shè)計(jì) 4951次閱讀
- 并行計(jì)算和分布式計(jì)算的區(qū)別和聯(lián)系 3.6w次閱讀
- 深度解讀分布式存儲(chǔ)技術(shù)之分布式剪枝系統(tǒng) 1861次閱讀
- 分布式電源應(yīng)用若干問(wèn)題解答 1378次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費(fèi)下載
- 0.00 MB | 1490次下載 | 免費(fèi)
- 2單片機(jī)典型實(shí)例介紹
- 18.19 MB | 93次下載 | 1 積分
- 3S7-200PLC編程實(shí)例詳細(xì)資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識(shí)別和講解說(shuō)明
- 4.28 MB | 18次下載 | 4 積分
- 5開關(guān)電源原理及各功能電路詳解
- 0.38 MB | 11次下載 | 免費(fèi)
- 6100W短波放大電路圖
- 0.05 MB | 4次下載 | 3 積分
- 7基于AT89C2051/4051單片機(jī)編程器的實(shí)驗(yàn)
- 0.11 MB | 4次下載 | 免費(fèi)
- 8基于單片機(jī)的紅外風(fēng)扇遙控
- 0.23 MB | 3次下載 | 免費(fèi)
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費(fèi)
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費(fèi)
- 4LabView 8.0 專業(yè)版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費(fèi)
- 5555集成電路應(yīng)用800例(新編版)
- 0.00 MB | 33562次下載 | 免費(fèi)
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費(fèi)
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費(fèi)
- 8開關(guān)電源設(shè)計(jì)實(shí)例指南
- 未知 | 21539次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費(fèi)
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537791次下載 | 免費(fèi)
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費(fèi)
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費(fèi)
- 6電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191183次下載 | 免費(fèi)
- 7十天學(xué)會(huì)AVR單片機(jī)與C語(yǔ)言視頻教程 下載
- 158M | 183277次下載 | 免費(fèi)
- 8proe5.0野火版下載(中文版免費(fèi)下載)
- 未知 | 138039次下載 | 免費(fèi)
評(píng)論