您的位置: 专家智库 > >

邓斌

作品数:1 被引量:3H指数:1
供职机构:哈尔滨工业大学深圳研究生院更多>>
发文基金:国家自然科学基金更多>>
相关领域:自动化与计算机技术更多>>

文献类型

  • 1篇中文期刊文章

领域

  • 1篇自动化与计算...

主题

  • 1篇爬虫
  • 1篇流水线
  • 1篇负载平衡
  • 1篇负载平衡模型

机构

  • 1篇哈尔滨工业大...

作者

  • 1篇孟祥乾
  • 1篇邓斌
  • 1篇叶允明

传媒

  • 1篇计算机工程

年份

  • 1篇2009
1 条 记 录,以下是 1-1
排序方式:
基于流水线负载平衡模型的并行爬虫研究被引量:3
2009年
针对并行爬虫系统在多任务并发执行时所遇到的模块间负载平衡问题,提出流水线负载平衡模型(PLB),将不同的任务抽象为独立模块而达到各模块的处理速度相等,采用多线程的方式实现基于PLB的并行爬虫,根据线程的休眠和缓冲区的变化对线程数量进行动态调整以实现PLB。实验结果表明该方法具有良好的运行效率和稳定性。
孟祥乾叶允明邓斌
关键词:爬虫流水线负载平衡
共1页<1>
聚类工具0