泛联信息UbiPower 18000分级存储,让智算和超算存力更高效、更经济

由于数据具有阶段性热点访问的特点,随着时间的推移,约80%以上的数据被访问的频率会逐渐降低,最终成为历史数据存储在数据中心。如何减少这部分数据的存储成本,成为智算和超算中心面临的新问题,为解决这一问题同时提升数据存储效率,需要存储厂商提供适配智算、超算业务场景的创新分级存储方案。
传统分级存储架构如下图所示:

泛联信息UbiPower 18000分布式全闪存存储(以下简称UbiPower 18000)在传统分级存储架构的基础上进行进一步优化,通过统一命名空间的智能分级存储,基于数据访问热度,实现数据在不同存储层自动迁移。在UbiPower 18000存储系统中,只有频繁访问的热数据存放在高性能介质中,为实时业务提供最佳的数据访问性能;温冷数据从高性能存储层动态迁移至成本更低的存储层长期存放,实现性能与成本的均衡配比,在满足业务性能的同时降低系统整体的TCO(Total Cost of Ownership,总拥有成本),使不同级别的存储层都能发挥最大的性能效益和成本效益,实现企业数据高价值存储管理。
UbiPower 18000提供以下两种高性能分级存储架构,可以满足不同业务场景数据分级存储需求。
该分级存储架构采用QLC(Quad-Level Cells,四层单元) SSD(Solid State Disk,固态硬盘)作为容量扩展,以低成本介质在读取繁重的工作负载中替代 SLC(Single Level Cell,单层单元)SSD。在部分使用场景中,QLC SSD的读取性能可媲美甚至超越 TLC(Triple-Level Cell,三层单元)SSD。
SCM(Storage Class Memory,存储级内存) + SLC SSD + QLC SSD分级存储架构如下图所示。

该分级存储架构适用于AI(Artificial Intelligence,人工智能)/ML(Machine Learning,机器学习) 数据管道 、大数据分析等读取型密集型高性能场景。

该分级存储架构采用成本更低的S3来扩展容量,在计算时可满足数据存取性能要求,当数据生命周期结束后,数据向下归档存储,待下次使用时再向上加载到高性能介质。
SCM + TLC SSD + S3对象存储分级存储架构如下图所示。

该分级存储架构适用于高性能计算、视频渲染等高性能大容量归档场景。

值得一提的是,泛联信息基于此分级存储架构推出的“高性能计算分级存储解决方案”(UbiPower 18000高性能分布式全闪存存储+UbiScale 12000分布式海量存储),高度契合高性能计算场景对存力的卓越性能及超大容量经济性的需求,更是一举斩获第19届CCF全国高性能计算学术年会“解决方案奖”!
UbiPower 18000以上两种分级存储架构,在传统分级存储的基础上优化和实现了以下功能:
-
智能迁移,应用无感知
支持SCM/Tier1(SLC SSD/TLC SSD)/Tier2 (S3/QLC SSD)之间动态分级存储,对业务端提供全局统一的命名空间,数据在不同介质之间流动对应用客户端透明无感知。
采用Write-Back写入机制,IO写入SCM/SSD 后直接返回,业务性能体验最佳,可直接从对应存储介质读取(QLC SSD),也可通过预读功能(S3),提前将数据由低速介质移动到高速介质后再读取。
-
灵活的迁移策略、流控机制
支持按时段、IO热度等迁移策略进行数据迁移。
系统自动根据业务压力、空间利用率进行流控,支持多级迁移策略。
系统自动根据业务压力、空间利用率进行流控,支持多级删除和延迟删除策略。
-
智能聚合,减少擦写,提升QLC寿命
迁移数据前,系统会对低速介质的IO数据进行聚合,提升迁移效率。
删除数据时,系统会对删除操作进行智能聚合,减少GC(Garbage Collection,垃圾回收机制)对前端IO的影响。
数据作为新型生产要素,是数字化、网络化、智能化的基础,驱动数字经济高速增长。泛联信息UbiPower 18000分级存储方案,兼顾数据存储的性能和成本,在确保数据访问性能的前提下,提供更大的存储空间,高效满足智算、超算场景的存力需求,助力我国超算、智算、算力一张网等算力领域的建设,共同促进数字经济的快速发展。
