上海市教育发展基金(06QZ00207ZZ92)
- 作品数：2 被引量：12H指数：2
- 相关作者：陈庆奎徐文杰那丽春更多>>
- 相关机构：上海理工大学上海立信会计学院更多>>
- 发文基金：上海市教育委员会重点学科基金上海市教育发展基金国家自然科学基金更多>>
- 相关领域：自动化与计算机技术更多>>
- 采用动态缓冲池的SOAP并行通信模型被引量：3
- 2008年
- 为了提高simple object access protocol(SOAP)的通信性能,有效地支持多机群网格上的并行计算,提出了SOAP并行通信模型.利用并发数据流、动态缓冲池技术、压缩编码技术和并行流水机制,通过内存储器实现了通信资源和计算资源的并行运行.描述了模型的主要部件、体系结构和通信过程.分析和实验表明,该模型具有良好的通信效率并可有效支持并行计算,能满足网格并行计算的需求.
- 陈庆奎那丽春
- 关键词：SIMPLEOBJECTPROTOCOL并行通信多机群网格
- 增量更新并行W eb爬虫系统被引量：9
- 2009年
- 介绍了并行Web爬虫系统的总体结构,引入了增量更新爬虫策略,在提高Web海量数据更新效率的同时,考虑到机群中各个爬虫的能力不一,为了使机群中爬虫的能力得到充分应用,又提出了向量度量技术,解决了抓取任务和爬虫能力匹配的问题。对抓取任务向量、爬虫向量进行了定义,并在此基础上给出了相关的并行算法。实践表明,系统具有良好的分配适应性,并可以在此基础上渐增式地提高网页库新鲜度。
- 徐文杰陈庆奎
