检索结果-内蒙古大学图书馆

计算机工程 2025年第3期51卷 34-44页

作者：鲜港杨文祥张晓蓉喻杰田永强国防科技大学计算机学院湖南长沙410000 中国空气动力研究与发展中心计算空气动力研究所四川绵阳621000 西南科技大学计算机科学与技术学院四川绵阳621000

为解决超级计算机I/O效率不高、用户无法充分利用存储系统I/O能力的问题,研究生产型超级计算机对象存储目标(OST)上的工作负载,分析高性能计算作业的I/O模式和整个系统中作业的I/O分布情况,探索提升I/O效率的方法。研究结果显示:在传统... 详细信息

为解决超级计算机I/O效率不高、用户无法充分利用存储系统I/O能力的问题,研究生产型超级计算机对象存储目标(OST)上的工作负载,分析高性能计算作业的I/O模式和整个系统中作业的I/O分布情况,探索提升I/O效率的方法。研究结果显示:在传统非条带化设置下,OST上的瞬时负载严重不平衡,导致无法调用未充分利用的OST进行I/O请求;不同作业的I/O模式对OST的使用情况也有所不同,因此可以根据作业的I/O模式适当调整文件条带布局,调动未充分利用的OST来提升I/O性能。提出一种作业感知条带优化方法,包括静态和动态文件条带化。静态文件条带化将用户的作业均进行条带优化,而动态文件条带化利用作业名和作业路径的聚类方式提取作业之间的相似性,预测用户部分可条带优化的作业,并在作业完成后还原条带配置以减小条带设置错误的负面影响。实验结果表明,作业感知文件条带化能够增加作业使用的OST数量,有效提升作业的并行I/O性能,同时不会对系统稳定性产生显著影响。

关键词：作业感知文件条带化高性能计算并行I/O 存储系统

来源：评论

学校读者我要写书评

暂无评论

大模型时代下的存储系统挑战与技术发展

引用

大数据 2025年第1期11卷 79-91页

作者：冯杨洋汪庆舒继武清华大学计算机科学与技术系北京100084

大语言模型(简称大模型)在文本和视觉处理等复杂任务中表现出色,受到工业界和学术界的广泛关注。大模型的训练与推理高度依赖于GPU算力,而GPU的显存容量有限且属于易失性存储介质,难以满足大模型在训练和推理过程中的存储需求。深入分... 详细信息

大语言模型(简称大模型)在文本和视觉处理等复杂任务中表现出色,受到工业界和学术界的广泛关注。大模型的训练与推理高度依赖于GPU算力,而GPU的显存容量有限且属于易失性存储介质,难以满足大模型在训练和推理过程中的存储需求。深入分析了大模型时代下存储系统面临的挑战:一是大模型的数据呈现高度碎片化特征,且大模型数据语义稀疏化显著,这降低了存储系统的利用率;二是大模型训练与推理对数据的读写带宽需求高,但异构存储介质间的数据传输通信开销大,这增加了利用异构存储介质扩展GPU显存的难度;三是大模型训练过程中的容错需求高,但直接使用以CPU为中心的容错技术会带来高昂的开销。针对上述挑战,从数据管理、存储扩容和数据容错3个方面总结了现有的解决方案。最后,展望了未来大模型时代存储系统的发展趋势。

关键词：大模型存储系统数据管理存储扩容数据容错

来源：评论

学校读者我要写书评

暂无评论

改变游戏规则的模块化存储系统

引用

现代制造 2025年第2期 40-41页

作者： Eva Müser 不详

11teamsports公司利用其总部所在地Helmsstadt-Bargen的物流中心,采纳了Gridstoren公司的积木式网格状物料存储系统,从而彻底优化了客户订单的处理流程。基于11teamsports公司物流仓库的具体空间布局,Gridstoren公司对整个物流设施进行... 详细信息

11teamsports公司利用其总部所在地Helmsstadt-Bargen的物流中心,采纳了Gridstoren公司的积木式网格状物料存储系统,从而彻底优化了客户订单的处理流程。基于11teamsports公司物流仓库的具体空间布局,Gridstoren公司对整个物流设施进行了优化调整,这不仅实现了更快的交货速度,还降低了物流运营成本,并带来了前所未有的物流流程灵活性。这些改进促使11teamsports公司在国内及国际市场上均实现了快速增长。

关键词：物流设施物流中心物流流程存储系统客户订单积木式物流仓库空间布局

来源：评论

学校读者我要写书评

暂无评论

基于ClickHouse的AIS存储系统设计与实现

引用

中国水运 2025年第4期 36-37,40页

作者：丁锐恒昆明理工大学信息工程与自动化学院云南昆明650500

随着船舶水运的发展,AIS数据规模急剧增长。针对目前关系型数据库无法高效存储使用AIS数据的问题,提出了AIS数据存储系统,系统以ClickHouse列式数据库为基础主要分为接收模块、处理模块以及写入模块,借助列式存储的优势,本系统可实现高... 详细信息

随着船舶水运的发展,AIS数据规模急剧增长。针对目前关系型数据库无法高效存储使用AIS数据的问题,提出了AIS数据存储系统,系统以ClickHouse列式数据库为基础主要分为接收模块、处理模块以及写入模块,借助列式存储的优势,本系统可实现高效的AIS数据查询。测试表明,AIS存储系统能够有效提高AIS数据的查询使用效率,千万级数量下查询效率约是MySQL的43倍。

关键词： AIS数据列式数据库存储系统 ClickHouse

来源：评论

学校读者我要写书评

暂无评论

存储系统中两级纠错编码方案设计与验证

引用

航空学报 2019年第12期40卷 183-192页

作者：罗金飞赵帅兵覃落雨王刚刘晓光南开大学计算机学院天津市网络与数据安全技术重点实验室天津300350 中国空间技术研究院北京100086

针对恶劣空间环境设计了一种两级存储编码方案,以应对航天系统中存储单元发生多个单粒子翻转(SEU)错误的问题。方案设计的主要思想是根据简单低纠错编码组合出高容错编码,通过编码组合,使用字间编码来纠正字内编码无法纠正的错误,从而... 详细信息

针对恶劣空间环境设计了一种两级存储编码方案,以应对航天系统中存储单元发生多个单粒子翻转(SEU)错误的问题。方案设计的主要思想是根据简单低纠错编码组合出高容错编码,通过编码组合,使用字间编码来纠正字内编码无法纠正的错误,从而使存储系统更加可靠;对两级编码方案提出若干优化策略,以提高编解码性能,使得两级冗余编码效率接近于原始字内编码。实验结果表明,提出的两级冗余编码方案能够较好解决存储系统中发生多个单粒子翻转错误的问题。即与单一的字内编码相比,两级纠错编码方案能够大大降低星上存储系统出现不可修复的概率,保证了星上存储系统的可靠运行。

关键词：纠错编码两级系统存储系统存储可靠性单粒子翻转

来源：评论

学校读者我要写书评

暂无评论

存储系统中的纠删码研究综述

引用

计算机研究与发展 2012年第1期49卷 1-11页

作者：罗象宏舒继武清华大学计算机科学与技术系北京100084

随着海量存储系统的发展和在复杂环境中的应用,存储系统的可靠性受到了严重的挑战.纠删码作为存储系统容错的主要方法越来越受到重视.首先介绍了当前典型和常见的纠删码技术的发展现状,从评价纠删码性能的各项重要指标的角度详细地对比... 详细信息

随着海量存储系统的发展和在复杂环境中的应用,存储系统的可靠性受到了严重的挑战.纠删码作为存储系统容错的主要方法越来越受到重视.首先介绍了当前典型和常见的纠删码技术的发展现状,从评价纠删码性能的各项重要指标的角度详细地对比和分析了现有的纠删码技术,给出了不同纠删码在容错能力与磁盘要求、空间利用率、编码效率、更新效率、重构效率等方面的不足和可能的改进见解,并讨论了磁盘阵列系统、P2P存储系统、分布式存储系统、归档存储系统等不同存储系统对于纠删码各类性能的差别要求,并进一步指明了当前存储系统纠删码研究中尚未解决的一些难题和未来纠删码可能的发展方向.通过分析得出,目前不同纠删码在容错能力、计算效率、存储利用率等方面都存在不同程度的缺陷,如何平衡这些影响纠删码性能的因素,设计出更高容错能力、更高计算效率及更高存储利用率的纠删码,仍是未来很长一段时间内值得不断深入研究的问题.

关键词：存储系统纠删码容错率存储利用率计算效率

来源：评论

学校读者我要写书评

暂无评论

存储系统的集中式Cache替换算法

引用

华中科技大学学报（自然科学版） 2006年第11期34卷 41-43页

作者：罗益辉谢长生张成峰湖北大学数学与计算机科学学院湖北武汉430062 华中科技大学计算机科学与技术学院湖北武汉430074

为了最大限度地优化存储系统的I/O性能,通过对存储系统性能的分析,提出一种Cache替换算法———最小访问时间算法(LAT).该算法为Cache中数据对象定义一个排队函数,该函数不仅与对象的Cache命中率有关,还与对象的设备访问速度有关.按照... 详细信息

为了最大限度地优化存储系统的I/O性能,通过对存储系统性能的分析,提出一种Cache替换算法———最小访问时间算法(LAT).该算法为Cache中数据对象定义一个排队函数,该函数不仅与对象的Cache命中率有关,还与对象的设备访问速度有关.按照此函数,Cache替换访问次数少、设备访问时间短的对象,从而使得存储系统的平均I/O时间最短.实验结果表明,随着设备访问速度差的增加,LAT算法的平均I/O性能远远优于LRU和LFU.

关键词：存储系统 Cache替换算法加速比数据对象

来源：评论

学校读者我要写书评

暂无评论

存储系统数据通道的On-The-Fly纠错

引用

小型微型计算机系统 1998年第7期19卷 45-48页

作者：万志坤张江陵华中理工大学计算机系

对于高性能、高可靠性存储系统，其控制器须具备实时在线检纠错能力。为了便于硬件实现ＯＴＦ（Ｏｎ－Ｔｈｅ－Ｆｌｙ）检纠错，本文提出了ＲＳ（Ｒｅｅｄ－Ｓｏｌｏｍｎ）码译码的并行Ｂｅｒｌｅｋａｍｐ算法，并设计了实现算法的模块... 详细信息

对于高性能、高可靠性存储系统，其控制器须具备实时在线检纠错能力。为了便于硬件实现ＯＴＦ（Ｏｎ－Ｔｈｅ－Ｆｌｙ）检纠错，本文提出了ＲＳ（Ｒｅｅｄ－Ｓｏｌｏｍｎ）码译码的并行Ｂｅｒｌｅｋａｍｐ算法，并设计了实现算法的模块化纠错硬件单元和相应控制逻辑。根据不同应用场合对纠错能力的要求，可以对这些模块化纠错硬件单元进行灵活的组合。

关键词： OTF纠错存储系统数据通道

来源：评论

学校读者我要写书评

暂无评论

基于服务质量需求的存储系统动态优先权调度策略

引用

计算机研究与发展 2006年第11期43卷 2027-2032页

作者：李中王刚刘璟天津航海仪器研究所天津300131 南开大学信息技术科学学院天津300071

多媒体应用要求存储系统提供保证服务质量的数据访问服务,响应时间超过延迟上限的访问请求必须小于一定的比例.基于服务质量需求的动态优先权调度策略(QADPS)根据多媒体应用接受存储系统服务的历史信息,计算多媒体应用的服务质量失败距... 详细信息

多媒体应用要求存储系统提供保证服务质量的数据访问服务,响应时间超过延迟上限的访问请求必须小于一定的比例.基于服务质量需求的动态优先权调度策略(QADPS)根据多媒体应用接受存储系统服务的历史信息,计算多媒体应用的服务质量失败距离;并为失败距离较小的多媒体应用分配较高的调度优先权.QADPS根据多媒体应用的不同服务质量需求,实现了有差别的调度:多媒体应用的服务质量需求越严格,它的访问请求被调度的机会越高.QADPS能够在保证服务质量的前提下,支持更多的并发多媒体应用.

关键词：存储系统多媒体应用服务质量动态优先权调度策略

来源：评论

学校读者我要写书评

暂无评论

面向存储系统的低功耗SoC设计

引用

固体电子学研究与进展 2007年第3期27卷 402-407页

作者：黄少珉周凡张宇胡晨东南大学国家专用集成电路系统工程技术研究中心南京210096

降低存储系统功耗是SoC设计中的重要问题,基于对程序执行与器件特性的分析,在SDRAM中引入数据缓冲区,给出针对多进程数据访问特性的实现方法,降低了程序运行时外存设备的功耗。在EMI中实现了指令FIFO,并给出定制方法,降低了程序运行时的... 详细信息

降低存储系统功耗是SoC设计中的重要问题,基于对程序执行与器件特性的分析,在SDRAM中引入数据缓冲区,给出针对多进程数据访问特性的实现方法,降低了程序运行时外存设备的功耗。在EMI中实现了指令FIFO,并给出定制方法,降低了程序运行时的SDRAM能耗。实验与仿真表明,该方法能有效降低程序运行时SoC存储系统整体功耗。

关键词：低功耗存储系统片上系统设计缓冲区指令先入先出队列

来源：评论

学校读者我要写书评

暂无评论

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案：

请选择收藏分类：

通借通还

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：