典型文献
应用透明的超算多层存储加速技术研究
文献摘要:
在E级计算时代,超算系统一般使用多层存储架构以满足应用数据访问的容量和性能需求,这种架构中不同层次的存储介质差异较大,难以实现统一名字空间管理,往往需要应用修改数据访问流程才能最大程度利用到多层存储的性能和容量优势.针对多层存储统一名字空间的问题,提出针对非易失性双列存储模块(NVDIMM)的块级缓存和针对突发缓冲存储(BB)的文件级缓存技术.基于NVDIMM的块级缓存技术对缓存窗口灵活控制,以支持数据块粒度的异步读写,实现NVDIMM与BB层统一名字空间管理;基于BB的文件级缓存技术将数据缓存在BB层中,并动态迁移和管理文件副本,实现BB层与传统磁盘文件系统统一名字空间管理.在神威E级原型验证系统中的测试结果表明,所提出的两种技术较好地解决了多层存储的透明加速难题,NVDIMM块级缓存与BB相比,在缓存窗口16 MB时128 KB顺序读写带宽分别提升27%和36%,8 KB随机读写带宽分别提升20%和37%;基于BB的文件缓存技术利用BB的高带宽支撑数据访问,与全局文件系统相比,128 KB顺序读写带宽分别提升55%和141%,8 KB随机读写带宽分别提升163%和209%.此外,实际应用的测试也表明以上两种缓存技术具有透明的存储加速效果.
文献关键词:
超算系统;分层存储;非易失性双列存储模块;突发缓冲存储;块级缓存;文件级缓存;透明加速
中图分类号:
作者姓名:
何晓斌;高洁;肖伟;陈起;刘鑫;陈左宁
作者机构:
国家并行计算机工程技术研究中心,北京 100080;清华大学 计算机科学与技术系,北京 100084;中国工程院,北京 100088
文献出处:
引用格式:
[1]何晓斌;高洁;肖伟;陈起;刘鑫;陈左宁-.应用透明的超算多层存储加速技术研究)[J].计算机工程,2022(12):1-8
A类:
非易失性双列存储模块,NVDIMM,块级缓存,突发缓冲存储,文件级缓存,透明加速
B类:
加速技术,计算时代,超算系统,一般使用,存储架构,应用数据,数据访问,性能需求,不同层次,存储介质,难以实现,名字,空间管理,改数,BB,缓存技术,灵活控制,数据块,异步,读写,数据缓存,缓存在,动态迁移,管理文件,副本,磁盘,文件系统,统统,神威,原型验证,验证系统,MB,KB,机读,高带宽,速效,分层存储
AB值:
0.266198
相似文献
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。