搜索到438篇“ 并行文件系统“的相关文章
基于天河互连的并行文件系统网络驱动
2025年
并行文件系统是高性能计算机系统软件栈的重要组成部分。面向高速网络的驱动是并行文件系统提供高效数据访问的关键环节。设计实现了基于天河高速互连网络TH-Express的并行文件网络驱动GLND,在并行化、通信协议以及容错3方面进行了有针对性的优化,采用VP粒度并行,配合适度均衡的流水线划分,实现了高吞吐率;根据消息大小差异等因素自适应地选择底层通信协议,实现NUMA感知的内存管理机制;通过自适应调节的超时机制来避免软件异常超时对通信操作的影响。实验结果表明,在相同硬件条件下,GLND相比于TCP的写带宽平均提升了23.69%,读带宽平均提升了79.25%。
董勇邬会军杨梨花张伟王睿伯周恩强
关键词:并行文件系统互连网络网络编程接口
地学并行文件系统的性能评估方法、装置、设备和介质
本发明提供一种地学并行文件系统的性能评估方法、装置、设备和介质,涉及计算机技术领域,该方法包括:获取地学并行文件系统对应的多个输入输出操作和多个同步操作,并基于所有输入输出操作和所有同步操作确定操作跟踪日志;基于操作跟踪...
孙镜涵高培超叶思菁黄佳芮
一种应用于并行文件系统的回收站功能实现方法及系统
本发明提供一种应用于并行文件系统的回收站功能实现方法及系统。所述方法包括步骤:通过并行文件系统的存储管理界面对回收站参数进行配置,并将配置的回收站参数更新至并行文件系统的配置文件中;响应于并行文件系统的数据删除请求,判断...
魏巍彭龙根谢文才刘蓓蕾朱英张从辉
一种跨并行文件系统的并发数据同步方法及装置
本发明公开了一种跨并行文件系统的并发数据同步方法及装置,本发明方法包括记录源文件系统中所有需同步文件文件名以及文件的数据存放绝对路径;在目标文件系统中创建所有需同步文件的空文件,记录文件的数据存放绝对路径;根据同一文件...
宋振龙黎铁军谢徐超袁远田磊张根魏登萍邢建英周桐庆李志星
一种并行文件系统客户端高速缓存方法和系统
本申请公开了一种并行文件系统客户端高速缓存方法和系统,包括通过文件数据同步工具将文件数据从并行文件系统以读写缓存模式拷贝到客户端的本地缓存层,当其他所述客户端想要访问已经被本客户端缓存的文件数据时,触发该文件被拷贝到分布...
吴文峰
一种并行文件系统下的子目录配额实现方法
本发明公开了一种并行文件系统下的子目录配额实现方法,所述实现方法包括以下步骤:S1:HPFS并行文件系统的子目录配额设置;S2:HPFS子目录Quota重置流程;S3:HPFS子目录Quota删除流程。本发明降低了客户超...
任昕坤樊晓光杨隽郭军雷旭东
数据库并行文件系统的在线扩缩容方法、装置、设备及介质
本申请适用于数据库技术领域,涉及集群数据库并行文件系统的在线扩缩容方法、装置、设备及介质。该方法在对共享集群数据库并行文件系统进行磁盘扩缩容时,在线对数据库文件进行动态迁移,根据数据映射表计算出迁移的数据单元和目标磁盘位...
陆世杰 孟凡彬 郭藏龙
用户态并行文件系统性能优化
2022年
用户态文件系统框架(filesystem in user space,FUSE)因其相对简单快捷的开发特性被广泛应用于新型文件系统的开发过程中。但是FUSE框架在处理应用的I/O请求时存在多次用户态和内核态切换、上下文切换以及额外的内存拷贝操作,造成一定的性能开销。为减小FUSE对I/O性能的影响,提出一种绕过FUSE的方案。该方案利用动态链接技术,通过将I/O请求的接收和转发功能实现在用户空间的方式消除FUSE框架的接入。该方案针对并行日志文件系统进行了应用实现和测试,结果表明,该方案对于大块读操作的性能提升最大可达131%,对小块写操作的性能最大提升5倍左右。
邓通亮陈宸殷树
关键词:FUSE并行文件系统
一种并行文件系统IO优化方法与系统
本发明提供了一种并行文件系统IO优化方法与系统,本发明通过分层分步对Tstor3000文件系统进行调优,分别从设备BIOS、底层存储设备、系统IO调度以及文件系统配置四个方面对文件系统IO进行优化:通过服务器CPU性能调...
曹代
应用于并行文件系统的数据存储方法及装置
本发明提供一种应用于并行文件系统的数据存储方法及装置,包括:接收由并行文件系统的客户端发送的写文件请求,读取分布式命名空间下的目录元数据;基于纠删码方法,生成与所述目录元数据对应的多个元数据分片;所述多个元数据分片包括多...
冯轶

相关作者

舒继武
作品数:380被引量:1,493H指数:18
供职机构:清华大学
研究主题:内存 存储区域网络 闪存 元数据 存储设备
薛巍
作品数:120被引量:631H指数:14
供职机构:清华大学
研究主题:存储区域网络 电力系统 并行文件系统 并行计算 元数据
易乐天
作品数:18被引量:111H指数:3
供职机构:清华大学信息科学技术学院计算机科学与技术系
研究主题:并行文件系统 元数据 存储虚拟化 目录树 快照
魏文国
作品数:103被引量:106H指数:6
供职机构:广东技术师范学院
研究主题:隐写分析 并行文件系统 缓存 自适应 隐写分析方法
伍卫国
作品数:322被引量:789H指数:13
供职机构:西安交通大学
研究主题:数据中心 任务调度 缓存 分块 解压