浪潮信息李博乐:释放闪存力量在数据密集型时代遨游
背景:在海洋中,鱼可以毫不费力地实现速度和优雅的兼顾,最高速度可达每小时70英里,而人类几乎达不到每小时4英里,即使是潜艇也只能达到每小时50英里为什么鱼能达到如此快的速度这个问题让物理学家,生物学家和工程师着迷如今,面对数据密集型的新范式,为了帮助企业游出数据海洋,各存储厂商也纷纷出大招
日前,2022全球闪存峰会在线举行,汇聚国内外专家学者,共同探讨全球闪存及存储半导体产业发展趋势浪潮信息存储产品线副总经理李伯乐表示,伴随着云,大数据,AI等新技术的快速发展,数据已经成为数字经济时代的关键要素和核心引擎浪潮存储的使命是秉承浪潮信息智慧计算战略,为企业构建行业领先的以存储平台为核心的数据基础设施,充分释放基于磁盘控制协调的闪存的力量
新的数据密集型范式测试数据处理能力。
模拟神经网络,探索人脑中数千亿个神经元是如何连接和工作的,带来每秒数百万亿字节数据的高吞吐量,1000辆自动驾驶汽车每天产生数十Pb的实时数据,用于训练AI视觉识别算法,油气勘探,一次三维勘探会产生PB级的原始实时数据,在后期的数据分析处理中会产生15倍体量的二次数据...
数字经济时代,在数据密集型新范式的驱动下,传统数据中心正在快速向云数据中心演进这是因为在传统数据中心,应用与基础设施紧密耦合,IT架构孤立,数据不流动,不共享,就像一潭死水在云数据中心,计算资源虚拟化,信息孤岛开放,涓涓细流汇成海洋所有行业都可以基于海量数据之间的关联分析,加速商业创新,创造新的商业和业态
比如目前非常热门的类脑研究,一个重要的方向就是多模态多尺度数据分析的理论和应用首先建立脑成像中心,利用一整套磁共振成像设备对小动物或人体进行脑成像,持续收集和分析脑科学数据,建立多模态,多尺度的脑数据库然后利用模式识别,深度学习等类脑智能方法,寻找基因,脑图像,认知功能的诊断指标,从而揭示脑部疾病的发病机制,提高脑部疾病临床诊断和药物疗效评价的准确性和效率这个例子只是冰山一角数据密集型新范式已经成为驱动各行各业创新发展和高质量增长的加速器
可是,正如硬币的AB面一样,新的数据密集型范式和基于云的数据中心为大数据挖掘带来好处,同时数据基础设施需要面对海量的客户端和应用,海量多模态数据的爆炸式增长对数据基础设施的处理能力提出了更高的要求。
释放以磁盘控制协调为核心的闪存潜力
面对海量新数据,新应用的挑战,浪潮存储如何释放闪存的性能对此,李伯乐表示,浪潮提出新的存储方式,坚持以存储为平台的理念,以磁盘控制协同策略为核心,充分发挥闪存的性能,创造极致的性价比
首先,存储系统要想充分发挥闪存的性能,需要经过三岛关。
一是伴随着NAND media,NVMe协议,SCM等新媒体的出现,存储系统性能的瓶颈不是磁盘,而是软件栈要想用好高性能闪存盘,需要优化存储系统软件栈,解决系统性能瓶颈其次,这几年CPU的发展一直遵循摩尔定律,性能突飞猛进但最近几年来CPU性能发展进入瓶颈期,性能提升缓慢如果想进一步提高存储系统的性能,需要使用额外的硬件,如DPU,FPGA,数据压缩卡等用于协同处理以加速系统第三,数据存储需要优化元数据和数据的写入策略,减少不必要的垃圾收集,提高系统性能
其次,存储系统如何降低闪存的使用成本虽然闪存的成本在降低,并且将取代2.5英寸的机械盘,但成本仍然高于3.5英寸的大容量机械盘此外,不同闪存介质对应的可擦除次数或使用寿命不同,存在很大差异例如,目前主流的TLC和QLC介质的可擦时间相差5倍因此,根据数据热度的差异,合理使用介质,提高介质寿命和空间利用率,可以有效降低使用成本
对于以上两个问题,李伯乐认为协调控盘是最优解。
比如在提升性能方面,浪潮存储是业内唯一具备存储软件栈和闪存盘全栈技术研发能力的厂商通过磁盘控制协调,可以促进闪存盘针对特定场景和存储系统性能的定向优化,它还可以优化元数据和数据的写入,减少写入放大,将系统性能提高到一个更高的水平在SPC—1国际基准测试中,浪潮存储六次刷新存储性能世界纪录
李伯乐表示,在今年的IPF上,浪潮存储还推出了新一代PCIe 4.0 NVMe企业级SSD通过扩展NAND与控制器之间的通道,大幅提升SSD性能,达到业界领先的性能水平,其中顺序写入性能超过5GB/s,随机写入性能超过45万IOPS,超越所有主流厂商
再比如降低闪存使用成本的问题浪潮存储采用介质分层技术,将不同热度的数据存储在不同的介质中,避免了介质性能的瓶颈和介质的过度使用此外,像浪潮这样具备媒体R&D能力的厂商,可以提高SSD磁盘的使用寿命,降低TCO通过不断优化数据管理算法和容错算法此外,通过协调磁盘控制和合理的数据组织,通过减少写放大来降低闪存盘的OP,提高SSD的空间利用率
李伯乐表示,目前,浪潮信息围绕智能计算战略,以计算力,算法,数据,网络四大支柱为客户构建开放,敏捷,集约,高效的数字化信息基础设施浪潮存储这几年表现非常好,市场增速全国第一,存储装机量已经跻身全球前三,中国第一未来,浪潮存储希望借助新一代G6存储平台和企业级SSD,以全栈技术创新加速存储业务增长,释放数据价值加速数字与现实融合
郑重声明:此文内容为本网站转载企业宣传资讯,目的在于传播更多信息,与本站立场无关。仅供读者参考,并请自行核实相关内容。