搜索到76篇“ 副本复制“的相关文章
基于擦除编码和副本复制的分布式混合存储研究
2025年
随着大数据技术、云计算、计算机技术和网络技术的迅猛发展,互联网数据呈爆炸性增长,海量数据的高效存储成为当前互联网技术亟待解决的问题。然而,传统的多副本冗余机制导致了巨大的存储成本,引起了研究者们对新型存储解决方案的关注。在这一背景下,提出了一种基于擦除编码和副本复制的分布式混合存储策略。该策略根据数据特性,对热数据采用副本复制以确保高可靠性和性能,而对冷数据则采用擦除编码以提高存储利用率。基于牛顿冷却定律将数据文件划分为热文件和冷文件,并引入一种自适应的数据温度识别及冷热数据自适应动态分配算法,使系统能够在运行时自动调整冷热数据的比例,然后根据实时数据冷热情况智能调整数据的存储策略,体现了系统在动态环境下的自适应性。其不仅增强了系统对动态工作负载的适应能力,也为提高分布式存储系统在实际应用中的效率和灵活性提供了新的范式。这一创新点在学术和实践层面都具有重要的推动意义。同时,通过仿真实验验证了该策略的有效性和可用性,其为分布式存储系统的优化提供了新的思路。
付雄宋朝阳王俊昌邓松
关键词:大数据副本复制
一种分布式存储系统副本复制在网多播方法
本发明提供一种分布式存储系统副本复制在网多播方法,包括作为数据发送端和接收端的服务器和运行在某台服务器上的多播守护进程握手;多播守护进程通过控制平面接口向可编程交换机配置匹配动作表,控制平面将多播的复制和聚合表项下发给可...
田臣高翼枭李多星
基于热度的Hadoop快速副本复制算法被引量:2
2015年
在云存储中心,由于节点失效带来的文件数据块副本丢失不仅会影响系统的可靠性,还会影响文件的并发访问效率.针对Hadoop中默认的副本复制方法存在的问题,即副本复制过程某些节点数据传输过于集中,负载不均衡,磁盘I/O吞吐率低,提出一种基于热度的快速副本复制算法.该算法优先复制热度高的数据块,合理选择数据块复制的源节点和目的节点.仿真结果表明,该算法平衡了系统的工作负载,提高了磁盘I/O吞吐率,显著降低用户请求平均响应时间.
张倩郑烇王嵩
关键词:HADOOP副本复制
面向云存储副本复制的一致性关键技术研究
随着云计算范式的发展,云存储的重要性和价值得到了人们的广泛认可。作为分布式系统、数据库发展衍生的产物,云存储系统沿用来自这些领域并且已经得到了深入研究和广泛应用的复制技术,将其作为提供高可用性水平、实现快速访问并确保容错...
杨英仪
文献传递
一种副本复制和纠错码融合的云存储文件系统容错机制被引量:10
2014年
在云存储技术中,云存储文件系统的数据容错十分重要,直接关系到整个系统的可用性。该文通过对有中心的分布式文件系统进行分析,提出了双机热备的元数据管理节点容错技术和块副本与基于纠删编解码算法相结合的存储节点容错技术,为云存储文件系统设计了双重保险的容错机制。实验结果表明,该机制大大提高了云存储系统的可靠性,并提高了磁盘空间利用率。
杨东日王颖刘鹏
关键词:容错双机热备副本复制纠删码
一种无结构P2P网络的副本复制方法
本发明涉及对等网络P2P技术领域,尤其涉及一种无结构P2P网络的副本复制方法。本发明首先在搜索过程中根据文件的访问频率来确定待复制的流行文件,然后根据查询发起节点访问频率的差异计算出中间转发节点相对查询发起节点的平均代价...
胡瑞敏朱永琼杨红云陈铙谭小琼
文献传递
基于副本复制算法的数据查询方法
本发明公开了一种基于副本复制算法的数据查询方法,该方法综合考虑副本价值和复制代价因素,首先计算出节点上所有文件的流行度,基于流行度确定副本价值,然后计算副本复制的代价;对于每个网络链接,取其流量平均值,采用MMSE方法预...
许海清滕爱国陈咏秋
文献传递
一种无结构P2P网络的副本复制方法
本发明涉及对等网络P2P技术领域,尤其涉及一种无结构P2P网络的副本复制方法。本发明首先在搜索过程中根据文件的访问频率来确定待复制的流行文件,然后根据查询发起节点访问频率的差异计算出中间转发节点相对查询发起节点的平均代价...
胡瑞敏朱永琼杨红云陈铙谭小琼
基于副本复制和Bloom Filter的P2P概率路由算法被引量:6
2011年
非结构化P2P网络资源定位过程中的查询延迟、查准率和查询成本难以同时被优化,为此,提出一种基于副本复制和Bloom Filter技术的P2P概率路由算法DCBF(data copying and Bloom Filter).DCBF基于有向随机网络,对资源对象进行少量的复制,并将各个副本随机路由给网络中的节点;接收副本的节点,以分布式衰减Bloom Filter向邻近节点传递副本的成员资格信息.理论分析和实验结果均表明,DCBF仅需复制少量的副本,通过以分布式衰减Bloom Filter传递副本的成员资格信息,使得网络中的绝大多数节点能够感知到副本的成员资格信息,从而使得各个节点能够以极低的查询代价,在较低的路由延迟范围内,高概率地将查询路由到目标节点.
朱桂明郭得科金士尧
关键词:对等计算副本复制
节点在线率和资源热度相关的P2P存储系统副本复制和修复策略被引量:2
2011年
在半结构化的P2P存储系统结构下,副本是提高数据可用性的有效保证。本文结合资源所在节点的在线率和资源访问的频度来衡量所需要的资源副本数量。它较好地反映了高动态P2P网络中节点的行为特征,并据此设计了冗余数据修复策略。实验表明,设计的方法虽然占用了一定的维护带宽,但是网络中资源的可用率得到了显著提高。
刘志明沙基昌万亚平阳小华
关键词:副本

相关作者

霍林
作品数:71被引量:113H指数:6
供职机构:广西大学
研究主题:索引 副本复制 密文 索引结构 对等
黄保华
作品数:60被引量:153H指数:8
供职机构:广西大学
研究主题:密文 索引结构 索引 访问控制 数据库安全
胡和平
作品数:70被引量:343H指数:10
供职机构:华中科技大学
研究主题:索引 索引结构 P2P网络 访问控制 密文
寇玮华
作品数:42被引量:143H指数:8
供职机构:西南交通大学交通运输与物流学院
研究主题:多品种 交通网络 网络 网络流 最大流
朱永琼
作品数:13被引量:0H指数:0
供职机构:武汉大学
研究主题:无结构P2P网络 覆盖网络 邻居节点 副本复制 对等网络