近日,国家能源局发布关于加快能源数字化、智能化发展的若干意见。快速推进以新能源为主体的新型电力体系建设成为关键。随着建设的推进,传统的电力调度系统将面临诸多挑战。作为数据基础设施基地,中科曙光存储一直致力于助力能源电力行业数字化、智能化转型。近日,中科曙光存储为国际知名能源用户打造存储资源池,利用存储推动AI算力高效处理。
该用户运营着全球最复杂的交直流混合电网,并拥有全国首个区域性电力现货交易市场。如此大规模的电网调度需要强大的智能大脑支持,这导致对高性能存储的需求日益强烈。
AI训练过程中会产生数十亿甚至数百亿的文件。由于很多训练模型都是基于图像、音频等的分析和学习,每个文件基本上都会在几KB到几MB之间。曙光ParaStor分布式对象存储基于IO协议的极致优化,实现了每桶千亿KB的存储容量,并拥有百万级TPS吞吐量,不仅存储更多,而且存储速度更快。
此外,曙光存储还为用户打造了更具性价比的大数据存储与计算分离解决方案。在AI训练中,“多读少写”是一大特点。曙光ParaStor分布式可根据存储和计算资源按需配置,以相对更划算的成本保存海量数据,并提供海量并发能力;同时,对于训练过程中产生的热点数据采用扁平化的目录结构进行管理,结合全局数据检索功能、标签管理等功能,可以快速高效地实现数据分类和检索。与其他厂家冗长的树形结构相比,是最有优势的地方。
近年来,曙光ParaStor集成了文件、对象、块、HDFS等多种协议,真正实现了海量异构数据资源的整合,广泛应用于人工智能、通信、自动驾驶等领域。在中科曙光存储的支持下,知识图谱、AI预测、强化学习等前沿人工智能技术在电网得到有效落地,助力电网调度“智慧大脑”迭代升级。
上一篇
新型工业化课件,新型工业化ppt