李青
- 作品数:5 被引量:7H指数:2
- 供职机构:北方工业大学更多>>
- 发文基金:北京市教育委员会科技发展计划更多>>
- 相关领域:自动化与计算机技术更多>>
- 科技云平台的数据存储管理技术研究
- 近些年来国家在不断地推广云计算产业,使其与具体行业相结合。因此,作为云计算中著名开源架构之一的Hadoop也受到了独特的青睐,许多企业都是在此技术之上发展的。国家科技管理系统同样也将云计算技术作为基础,用于保障存储数据的...
- 李青
- 关键词:HDFS异构集群存储调度
- 文献传递
- HDFS异构集群中的分级存储调度机制被引量:5
- 2017年
- 大部分存储集群构建时可能包含有遗留设备及新购置设备,这些设备在存储性能方面存在较大差异.采用HDFS默认的机架感知存储策略时,可能使访问频率高的数据存储在低性能节点上,而访问频率低的数据存储在高性能节点上,既影响集群响应时间,又降低了资源利用率.针对以上问题,提出一种分级存储调度机制.在HDFS机架感知调度策略基础上,首先根据节点的CPU、内存大小、磁盘大小、磁盘I/O等固有硬件性能将节点划分为高配置节点和低配置节点,其次根据节点的CPU使用率、内存使用率、网络带宽使用率、磁盘使用率等性能的动态因素建立节点的性能评价模型,并建立三个性能级别.根据节点配置情况、性能级别及网络位置等多方面因素进行综合调度.同时在集群运行过程中,会根据数据的访问频率对数据块的分布进行动态调整.实验结果表明,本文提出的分级存储调度机制可以在HDFS异构集群中提高数据的访问效率,优化集群性能.
- 杨冬菊李青邓崇彬
- 关键词:HDFS异构集群存储调度
- 云应用系统的负载管理方法及系统
- 本发明提供一种云应用系统的负载管理方法。该方法包括:根据用户请求量的历史数据序列估计下一个时间间隔的云应用系统中的虚拟机或物理机的预测负载值;基于所述预测负载值执行创建虚拟机、回收虚拟机或迁移虚拟机中的至少一项。根据本发...
- 杨冬菊邓崇彬高晶李青
- 云存储中的副本分级存储调度策略
- 当集群中的部分节点是廉价主机时,采用HDFS的随机存储策略,可能使访问频率高的数据存储在廉价节点上,受到廉价节点的性能影响,导致访问时间过长,降低集群效率.为改善以上问题,提出一种改进的副本分级存储调度策略.为减少副本调...
- 李青杨冬菊
- 关键词:云计算
- 文献传递
- 云应用系统的负载管理方法及系统
- 本发明提供一种云应用系统的负载管理方法。该方法包括:根据用户请求量的历史数据序列估计下一个时间间隔的云应用系统中的虚拟机或物理机的预测负载值;基于所述预测负载值执行创建虚拟机、回收虚拟机或迁移虚拟机中的至少一项。根据本发...
- 杨冬菊邓崇彬高晶李青
- 文献传递