6 月 4 号,2020 年日本最大的 ICT 展会 Interop 东京展传来消息:华为新一代 OceanStor 存储 Dorado 系列赢得日本评委一致青睐,喜获 2020 Interop 服务器与存储类产品 Best of Show Award 金奖,在组委会官方给出的评语中提到:“华为 OceanStor 存储 Dorado 系列,具有压倒性的性能和稳定低时延,内嵌 AI 自我优化 I/O 能力”。
这也是华为全闪存第二次斩获该奖项。
回顾 2017 年 Interop 东京盛会,华为在全球率先发布支持 NVMe 技术的 OceanStor 存储 Dorado 系列,它以业界最快的全闪存,最优的 0.3ms 时延第一次获得日本专家认可并获得展会金奖。
而在 2019 年,华为最新发布的全新一代 OceanStor 存储 Dorado 系列,作为一款由华为存储全球研发团队历时近 12 年沉淀打造的全新存储产品,其在存储架构层面有着巨大的突破与创新,并且首次融入了华为多款自主创新的芯片,基于 AI 算法实现了全生命周期的智能运维,可谓是给全闪存树立了新标杆。这个新标杆,也再一次彻底征服日本专家,获得所有参展存储厂商唯一的金奖。
华为 OceanStor 存储 Dorado 系列脱颖而出绝非偶然,其根基是华为在产品设计和核心技术方面的持续创新。在全球范围内,华为直接投入到存储产业的研发工程师超过 3600 名,分布到全球的 12 个存储研发中心,是业内唯一具备存储操作系统、控制器、SSD 盘(固态硬盘)全自主创新的供应商,并能够针对闪存存储进行端到端的深度优化。“早在 2008 年,华为就开始研究闪存技术,我们在闪存领域拥有超过 12 年的持续积累。”华为全闪存首席架构师林宇介绍道,“这一路走来,我们的研发过程经历了从无到有,从弱到强,从最开始在普通应用部署,到将闪存应用于高端存储满足核心应用批量商用的过程。”
坚定方向,牛刀小试
“现在回想起来,2008 年是华为全闪存起步的关键之年,由此华为开始了 12 年在全闪存领域的技术研发。”林宇感慨道。就在这一年,华为存储团队经过激烈的内部研讨,决定利用闪存兴起弯道超车、打破老牌存储厂商基于 HDD 构筑的垄断地位。“2008 年作为 IT 领域风向标的硅谷涌现出了很多 startup 公司开始在企业级应用中使用闪存,SSD 与 HDD 相比,其在性能、功耗、可靠性上的巨大优势让大家非常震撼,公司领导对闪存的发展趋势进行了一个总结,让我印象最深刻的是 “弯道超车”四个字,这四个字体现出了华为在存储上的战略思路以及打破老牌厂商的重要机会点,当年就是这四个字激励了无数研发团队的兄弟投入闪存领域。我也是其中的一员”
在统一战略思想后,人才成为最为紧迫的事。包括林宇本人在内的多位存储专家领着任务亲赴海外组建研发团队,从海外招聘来了业界顶级的 SSD 专家,从零开始打造华为 SSD 研发团队。“能与当时业界顶尖的技术专家一起合作,我们整个团队都备受鼓舞,在之后的研发过程中我们克服不少困难,同时收获满满。”林宇表示。在华为存储研发团队的共同努力下,团队在 SSD 硬盘的磨损均衡、垃圾回收、ECC 校验等技术上输出多篇高价值技术专利。当年首款 SATA SSD 盘发布,性能和可靠性达到业界先进水平。“记得当时华为自主创新的首款 SATA SSD,在性能测试上是超过业界标杆 Intel 的同类产品,具有划时代的意义,这更加坚定了我们在全闪存研发上走自主创新的道路。”
自主创新,初露锋芒
2011 年,闪存应用迎来商用化兴起的时代,各家存储厂商纷纷推出零级存储方案。Violin 等新兴存储厂商通过超高性能在主流数据库存储加速领域撕开了一条口子。
“这个时候我们在 SSD 和存储阵列上已经有了一定的商用积累,基于对闪存介质的深刻理解,以及成熟的企业存储产品交付经验,我们将自主创新存储阵列和 SSD 结合在一起,基于闪存的特性优化存储阵列系统的缓存、调度等关键技术,去除掉很多为 HDD 架构设计的流程和特性,把存储系统的时延开销做到最低。”林宇介绍道。
得益于存储团队对全闪存架构的全新设计,成功使得第一代 OceanStor 存储 Dorado 系列面世,并搭载自主开发 6 Gbit/s SAS SSD 盘,这是业界首批商用的全闪存产品。2012 年,第二代 OceanStor 存储 Dorado 系列也顺利发布。“Dorado 的含义是一种剑鱼,海里游得最快的鱼,这也是我们自主研发全闪存的初衷,为用户带来极致的性能体现。”OceanStor 存储 Dorado 系列这条华为倾力打造的剑鱼,第一次游入了数据的海洋。
融合闪存,渐入佳境
2014 年,五大融合的商业理念将融合存储成功的推向了市场,其中 SSD 和 HDD 的融合是混合存储一个非常重要的特性。林宇深有感触的说道,“由于这个时候 SSD 的价格还是很高,存储厂商从一开始的零级存储策略逐渐转向混合存储策略。在针对闪存的优化应用上,我们此时已经比较深刻的掌握了 SSD 内部原理以及在什么样的访问模式下可以达到最佳的性能和较好的寿命,但是在分级存储和 SSD cache 上技术积累还很薄弱。”
为了不在这项技术上面落后于友商,被友商形成控标点,存储研发团队内部挑选精兵强将成立了技术攻关团队,研究冷热识别和淘汰算法,利用一年时间先后完成 SSD cache 和分级存储的特性交付,这标志着华为存储能为客户提供业界领先的 SSD 和 HDD 混合使用方案,使得客户在享受 SSD 带来的高性能低时延优势的同时,降低 OPEX 投入。
2014 年 5 月,第三代 OceanStor 混合闪存存储正式发布,率先开启全融合数据架构时代。2015 年 5 月,OceanStor 18000 高端融合存储正式发布,在极致稳定、极致性能、面向未来三个方面实现了高端存储新标杆。
技术革新,引领业界
2016 年 9 月, 第四代 OceanStor 存储 Dorado 系列震撼上市,具备极致性能,同时具备免网关存储双活解决方案,并搭载自主创新的 12Gbit/s SAS SSD 盘。林宇直言 “第四代 OceanStor 存储 Dorado 系列在整个 IO 端到端处理上进行了大的架构变革”,经过华为团队的不懈努力,这一代 OceanStor 存储 Dorado 系列将 IO 写入模式全面切换为 ROW 方式并结合大块顺序写,开启快照、克隆的特性仍能保持平稳性能。SSD 的可靠性是提升 SSD 的使用寿命减少写放大,这与 HDD 的可靠性要求差异非常大,华为团队在设计之初就充分了考虑了这一点,不仅通过日志型写入方式聚合小 IO 请求,规避 RAID 写放大,还基于磨损均衡、专利的反磨损均衡以及创新的盘控配合算法深度优化,这使得第四代 OceanStor 存储 Dorado 系列成为业界顶级产品。
“调整写入模式意味着存储池的所有特性都会受到相应的设计修改,在整个交付过程中,存储团队经历了困难的垃圾回收性能调优过程、盘控配合算法不断升级的过程、以及在各种故障下保持稳定性能的攻关过程”林宇回想艰辛的研发过程不由感慨,2016 年 5 月,第四代 OceanStor 存储 Dorado 系列主要功能开发完成,经用户现网大压力真实测试,性能波动控制在 5% 以内,达到业界最优水平。
第四代 OceanStor 存储 Dorado 系列是业界唯一同时具备极致高性能和极致稳定性的全闪存阵列产品,奠定了闪存业界的标杆地位。
NVMe 急先锋,再次领先一步
“2016-2017 年全闪存技术越发成熟,全闪存已经是整个存储业界的发展趋势,为有效发挥全闪存能力,NVMe 技术得到空前发展。而这个方面,我们早在 3 年期开始做技术储备,存储技术团队继承第四代 OceanStor 存储 Dorado 系列稳定性架构的同时,兼顾 NVMe 技术的领先性和扩展性,2017 年 3 月,全球率先发布支持 NVMe 技术的第五代 OceanStor 存储 Dorado 系列,它是业界最快的全闪存,时延达到最优的 0.3ms;同时基于 HyperMetro 免网关双活方案,保障用户核心应用又快又稳。”林宇介绍道。
永快永稳 “芯”存储,树立全闪存新标杆
历经 12 年的技术积累,2019 年底,第六代 OceanStor 存储 Dorado 系列正式发布,“项目技术难度大、规模大,全新的硬件设计、全新的软件和操作系统,从设计到交付都面临巨大的挑战”林宇说,“这几年来我们整个团队在加班加点中度过了不知道多少个日日夜夜,在 OceanStor 存储 Dorado 系列,我们从架构稳定性、业务高性能、运维智能化方面,都进行了成果显著的技术创新和升级。”
金奖也能“梅开二度” 华为OceanStor 存储Dorado系列又双叒叕获得国际大奖
“性能上,我们基于端到端加速平台、创新的 NOF + 方案和华为独有的 FlashLink® 智能算法,实现 2000 万 IOPS,0.1ms 时延的极致性能,性能值超越友商 2 倍,树立了存储业界性能的新标杆。”
“5G 时代以来,为了应对未来数据发展可能带来的极致可靠星挑战,我们设计了 SmartMatrix 全互联架构,它能实现业界可靠性等级最高的容忍控制器 8 坏 7,业务 0 中断;容忍引擎 2 坏 1,业务 0 中断;树立了存储业界可靠性的新标杆,真正做到企业核心业务永远在线。”
“我们在新一代智能全闪存上加入了很多 AI 智能技术,如:基于智能硬件平台和智能缓存算法,主动分析并掌握多个应用模型的 IO 规律,让存储越用越快;打造了智能盘框,从存储控制器下载部分工作负载,把数据重构的工作卸载到智能硬盘框上;运用云上通用智能 + 边缘个性化智能协同技术,做到产品全生命周期智能管理。创新的智能硬件平台 + 边缘协同的智能算法,树立了存储业界智能化的新标杆。”
性能永快一步,业务永远在线,AI 使能永智高效,华为存储团队真正意义上把第六代 OceanStor 存储 Dorado 系列打造成了业界新标杆,各方面能力全面领先业界友商,能带给用户最佳的使用体验。
写在最后
华为 OceanStor 全闪存能够在一年一度的日本最大 ICT 盛会上 “梅开二度”,再次获得金奖,除了专业评委的慧眼识珠外,这与华为公司在数据存储领域长期坚定的重点投入以及华为数据存储团队多年以来持续不懈的努力分不开。