×

基于ProActive的分布式并行Web Spider设计

消耗积分:2 | 格式:rar | 大小:97 | 2009-04-14

分享资料个

单机Web Spider的数据采集速度较慢，采用MPI技术或直接用Java开发分布式Web Spider代价较高。该文利用ProActive中间件提供的主动对象技术、网络并行计算技术、自动部署机制设计实现了P-Spider分布式并行Web Spider。实验结果表明，该P-Spider采集速率是单机多线程Web Spider的2.2倍。
关键词：Web Spider程序；ProActive中间件；并行；分布式
下载并关注上传者 低至0.43元/天 开通VIP 免费下载

声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表电子发烧友网立场。文章及其配图仅供工程师学习之用，如有内容侵权或者其他违规问题，请联系本站处理。 举报投诉

评论(0)
发评论

下载排行榜

全部0条评论

快来发表一下你的评论吧 !