移动云郭建楠:面向“东数西算”打造新一代算网存储能力
数东数西工程突出数据作为生产要素的价值,并对其进行分类管理mdashmdashLdquo,对网络延迟要求不高,如服务后台处理,存储容灾,离线分析,存储备份等冷数据,优先考虑贵州,内蒙古,甘肃,宁夏的节点,Ldquo具有较高的网络延迟要求,热点数据,选择在东部城市装修
Ldquo最近举办的,网络整合,创新与发展mdashmdash移动技术品鉴会事实上,中国移动云能力中心IaaS产品部总经理助理郭建南指出,在数东数西在这种场景下,存储系统面临以下新的挑战:如何高性能地访问本地/近场的热数据如何灵活存储和迁移海量数据如何屏蔽存储系统层的操作细节,将便捷的业务应用呈现给客户
计算网络中的新存储容量:抓牢保存用好
Ldquo Jiannan进一步指出,面对上述问题,存储系统要解决高性能,高可扩展性和易用性的问题抓牢,保存,用好满足企业关键业务云的存储性能要求,提供高带宽,高IOPS,低时延保障,满足高速增长的数据存储需求,为海量文件提供易扩展,高吞吐量,高效的索引保障,屏蔽了存储系统层面复杂的操作细节,提供了易部署,易操作,简洁易用的产品形态
移动将以计算力网络为核心,不断提升存储性能,提升产品竞争力,并基于对象存储的跨域擦除能力推动所有存储产品的演进。
首先是构建超高性能存储系统,满足高端存储需求中国移动云能力中心自主研发的完整大源泉统一存储引擎百万IOPS云盘产品的研发,实现了单个逻辑卷百万IOPS的超高性能和数百微秒的超低时延保障
二是针对海量数据存储需求,提供EB级存储容量扩展完成基于天全统一存储引擎的第四代对象存储产品研发多级负载均衡策略提供Tbps级系统吞吐量,多集群设计提供EB级存储规模,分级元数据管理提供高效文件索引,满足海量数据存储需求
三是实现冷热数据自动分层,支持数据跨域自由流动基于对象存储的用户桶空间,标准频率—低频—归档类型的数据可以在存储集群中自由迁移,通过跨域复制实现集群间能力数据的高效东西向流动
全新存储解决方案:打破记忆墙,连接到孤岛
郭建南介绍,移动云存储产品围绕大源泉统一存储引擎扩展,并在其上构建分布式块存储,对象存储和文件存储产品右系列存储产品长期在移动公有云推广和商用,部署规模超过3万台服务器,容量规模超过2500 PB,为超过80万移动云客户提供稳定安全的存储服务
面对计算网络下新的存储挑战,移动云提出了新的存储解决方案:
存储产品:从IO调度策略,IO路径加速,数据丢弃模式三个维度深度优化存储引擎,通过多通道顺序预读和智能IO调度策略降低延迟,通过SPDK全用户无锁队列和RDMA网络卸载技术解决上下文切换和锁抢占问题,优化IO全链路深度,打造百微秒级超高性能延迟基于天泉存储引擎,打造百万IOPS,数百微秒延迟,4GB/s吞吐量的新一代云硬盘产品,可有效支持大型数据库,实时日志分析等IO密集型业务场景和AI训练,基因测序等高吞吐量业务场景,满足现场和近场计算需求郭建南说
存储产品:通过存储多协议协作实现,算一个,尽量多算,实现数据冷热智能分层,实现数据自由跨域流动,打破记忆墙,连接到孤岛,支持数据迁移到计算能力,创造数据可以随意取的存储服务系统
目前,相关工作已取得初步进展数据和元数据分开存储,形成集中式元数据架构,将文件协议处理,文件元数据存储和数据存储解耦,提高文件系统的元数据性能,增强文件存储容量的可扩展性进行跨领域数据库研发,基于灵活性+高可用性+可扩展性+ACID+通用基础框架分而治之的设计原则,实现组件模块化,功能正交,减少耦合,实现跨域场景下的故障统一,快速检测和快速恢复通过S3等标准对象存储接口访问移动云EOS,在统一的元数据管理下,借助移动云EOS数据的跨域擦除和存储能力,文件存储数据可以分片跨域分布
IDC指出,2021年上半年,运营商阵营的云厂商增长迅速,自主研发,云网融合成为其关键词。通过自主研发大云基础,移动将加快构建云网融合,云边协同,云数融合,云智融合的差异化竞争优势,为客户提供端到端全栈式云服务。
郑重声明:此文内容为本网站转载企业宣传资讯,目的在于传播更多信息,与本站立场无关。仅供读者参考,并请自行核实相关内容。