华为V3直接到V6,OecanStor Dorado 为啥子怎么快速?

大家都知道,在afa(all-flash array)的市场上,美国是大幅领先中国的。根据gartner最新发布的外部存储市场跟踪数据,2019年q1,美国国内的全闪存阵列(gartner叫ssa:solid-state array)占整个阵列市场的56%,已经超过了混合阵列12个百分点了。
虽然中国使劲追赶,但是,从销售数据上,中国的全闪存阵列占比只占整个阵列市场的26%,约为混合阵列的1/3。
这个差距其实比中美两国的gdp差距要大多了。为什么两国有这么巨大的差异呢?我觉得还是国内的afa产品技术相对国外存储公司来说,还差一些火候。
但是,最近华为发布的全新架构的oecanstor dorado v6全闪存阵列,从架构和特性上比上一代产品oecanstor dorado v3有了巨大的进步。大家知道,华为一般不用v4这个命名(不吉利),但为啥不叫oecanstor dorado v5(对应混合阵列的oceanstor v5)而直接叫oecanstor dorado v6呢,我猜想是因为其全新的架构和特性远远超过oecanstor dorado v3和oceanstor v5的总和,因此直接叫oecanstor dorado v6,以提醒客户其巨大的进步。
这款oecanstor dorado v6由于采用了华为大量自研的芯片,是一款真正的中国“芯”全闪存阵列,具有强烈的中国特色。
具体的进步体现在哪里?我下面和大家来分三部分和大家聊一聊。
国产芯片,永快一步
在oecanstor dorado v6里,有5种华为自研的芯片(不只是5颗哦):
智能多协议接口芯片hi1822承载了本应由通用cpu负责的协议解析工作,加速前端访问性能20%;
智能处理器芯片采用业界标杆性能的arm-basedcpu鲲鹏920,算力优于业界水准25%;
智能ai芯片昇腾310基于机器学习框架,主动分析并掌握多个应用模型的i/o规律,实现内存空间的智能预取,读缓存命中率提升50%;
智能ssd控制芯片hi1812e承载核心ftl(flashtranslation layer)算法,加速ssd盘内数据访问,读时延优于业界水准10%;
智能bmc管理芯片hi1710内置华为存储故障基因库,加速部件故障诊断和定位,故障恢复时间从2小时缩短到10分钟。
以上5种自研芯片,有3种的老版本是oecanstor dorado v3使用过的,虽然这次芯片的版本有了巨大的更新。但其中的鲲鹏cpu和晟腾ai芯片是oecanstor dorado v6特有的。
这里,我们先来了解一下这款鲲鹏920 cpu(ai芯片后面再讲)。
高性能鲲鹏920处理器,在specint benchmark测试成绩超过930分,位居第一,超越业界主流cpu 25%
oceanstor dorado v6单引擎有768核cpu,业界核数最多,独有的corefarm众核智能调度算法,发挥众核最大性能,达到单引擎160万iops的高性能体验。
业界首创有“芯”的智能硬盘框,鲲鹏920芯片装备的智能硬盘框,承担cpu算力,系统性能30%提升。
这里我特别要强调一点就是,鲲鹏cpu不仅仅用在oecanstor dorado v6的引擎上,而且还用在硬盘框上,使得硬盘框具有计算能力,一些加密和压缩的操作完全可以卸载到智能硬盘框的鲲鹏处理器处理,系统的性能必然大大提高。这个智能硬盘框,在主流厂商里面应该是第一个。
smartmatrix,永远在线
看完oecanstor dorado v6的芯片加持部分,我们来了解一下其互联架构smartmatrix的设计和上一代有啥不同。
smartmatrix架构采用了多控前后端的全互联共享架构,前端通过fc-aa保证故障场景下的客户无感知的高可靠性,后端通过100ge roce实现高端8控对ip硬盘框的共享,达成控制器8坏7情况下硬盘仍然可用的高可靠。同时由于在硬件架构中采用了全互联cpu及cache架构,构筑了nvme端到端协议栈化的架构,smartmatrix在高可靠的前提下也可获得极高的性能。
这里我就要重点提一下针对上一代oecanstor dorado v3的一些重大改变:
前端lun级全对称aa架构。上一代产品虽然控制器是aa的,但是在lun级别是有归属的,这样在控制器故障时系统需要切换lun归属控制器(业界叫lun trespass),应用可以感觉到切换,对业务会有一些影响,一般io夯住时间要长一些。业界一般是传统高端存储才具有这个高级特性。华为的oecanstor dorado v6,圆满解决这个问题后,预计未来在金融core banking系统等关键业务场景中将会得到大量采用。
全ip互联。现在,oecanstor dorado v6引擎(控制器)之间,引擎和硬盘框之间,引擎和主机之间,全部支持100ge roce互联。由于roce上面也跑ip,因此,可以说是全ip互联架构。原来oecanstor dorado v3架构比较复杂,引擎直接是pcie互联,硬盘框采用sas互联,对外主机采用fc/iscsi互联。现在,可以全部统一到100ge roce上,当然,对外接口也保留对传统fc的支持。
端到端的nvme-of。上一代oecanstor dorado v3只有后端支持nvme,现在,在全ip互联下,前后端都支持nvme-of了。当然,为了保持兼容性,前端也可以不跑nvme-of,而采用传统的fc/iscsi,后端也兼容传统的sas硬盘框,支持sas的ssd。
正是基于这些软硬件的改进,smartmatrix全互联架构可实现:
控制器8坏7业务0中断(原特性);
控制器故障业务0感知(新特性);
1秒在线升级业务0影响(新特性)。
端云ai,永智高效
持续帮助企业提升效率是it系统的使命,在智能化时代它的重要性更为突出。华为oceanstor dorado v6全闪存存储基于ai芯片和ai算法实现全生命周期的智能运维,创新的设备永新商业模式避免数据迁移导致的业务割接与中断,提供流畅的使用体验。
云上云下协同:华为oceanstor dorado v6全闪存存储采用边缘个性化智能和云上通用智能相结合原理,设备内置昇腾a310 ai芯片增量训练,深度学习业务特征,提升个性化体验;eservice智能运维管理平台实时统计现网19万+设备规律,提取共性能力,增强基础运维能力。
ai贯穿业务全生命周期:从资源规划、业务发放、系统调优、风险预测、故障定位实现全方位智能管理,使得性能容量趋势提前60天预判、系统提前14天发现故障盘、93%问题发现即给出方案。
flash ever设备永新:智能弹性架构实现模块化升级,10年以内数据无需迁移,用户即可持续享用最新一代软硬件能力,保护用户投资。这个全新特性,可以有效解决传统存储的叉车升级的麻烦,生命周期结束升级设备硬件无压力。
由于oecanstor dorado v6有昇腾ai芯片的加持,使得其在智能程度上大大优于上一代产品。ai在各个方面都得到应用,在cache预取算法上尤其值得了解一下。因为虽然闪存很快,但是相比内存还是差不少,因此,在afa时代,内存做cache依然有很大意义。但传统的cache算法在现代io混杂负载场景下效果很差。
大量io的读取,好比大厅里大量人在同时讨论,需要准确辨别出每个人并且理解相应的说话内容。可见,智能cache预取算法所进行的大量i/o序列的分析和深度挖掘,不仅需要智能的算法,也依赖强大的计算能力。而华为oceanstor doardo v6存储真是集高性能计算和智能算法于一体的智能存储产品,是业界首创植入ai芯片(昇腾310)的存储。通过ai学习引擎中的智能算法分析和挖掘,可以自动识别io“语音关联”的规律,将客户即将读取的数据预取到dram等高端介质层,让上层业务在oecanstor dorado v6上感受最快速的数据读取体验。做到真正的知“输”达“理”,根据你的输入,就能知道你输入中蕴含的应用规律。此外,随着使用时间的积累,通过智能算法孜孜不倦的学习,oecanstor dorado v6对于上层业务的规律会挖掘的更透彻,用户体验会更上一层楼。不仅如此,oecanstor dorado v6会将自己的智慧“保存”起来,当新旧设备更替,进行数据迁移后,继续发挥作用。
相比上一代产品oecanstor dorado v3只支持16个控制器,oecanstor dorado v6支持到了32个控制器,系统整体性能高达20000万iops,时延低至0.1ms。特性方面,我用红色也标出oecanstor dorado v6重大的新特性。
oecanstor dorado v6的推出,我觉得在几个关键的领域拉起和业界标杆的差距:
支持lun级aa,拉齐了和hds vsp 1500f等高端存储的差距;
支持用ai提升cache命中率和1分钟内完成升级,拉齐和emc powermax的差距;
支持全ip互联和端到端nvme-of,拉齐了和kaminario的差距;
支持在线升级控制器硬件,拉齐了和pure storage的差距;
支持深度ai运维,拉齐了和hpe infosight的差距;
而且,oecanstor dorado v6这次还在一些创新上超越了主流厂商:
首创智能硬盘框。oecanstor dorado v6在智能硬盘框内置鲲鹏处理器,可以卸载控制器引擎上的部分负载到硬盘框上,比如加密、压缩、数据校验和硬盘重构等。这样的好处是数据无需送到引擎,处理起来更加高效;
首创内置ai芯片。oecanstor dorado v6内置昇腾ai芯片,因此可以处理大量的数据,可以支持更智能更复杂的ai算法,将会在智能运维、智能cache预读、智能qos等等构造差异化,为未来存储向全自动驾驶方向发展打下坚定的基础。
随着闪存的价格持续下滑,在主存储领域,磁盘已经没有任何优势。gartner在2018年market insight: preparing for the ssd rise and hdd demise一文中指出:当闪存介质降到hdd每gb平均销售价格(asp)的三倍时(因为闪存的重删压缩率一般超过3:1),闪存技术通常会出现一个拐点,会加速取代hdd。
因此,gartner预测,2023年,所有的数据中心的10,000rpm的hdd几乎都被ssd代替。gartner建议,现在就停止在数据中心环境中使用15,000 rpm和10,000 rpm hdd技术。
而且,ssd全面替换hdd盘,还有下面的利好。
更快:机械盘写时延需要2毫秒,而当前业界最快的nvme ssd盘写时延仅需0.02ms,ssd盘hdd机械盘快100倍;
更稳:根据业内统计,hdd机械盘的5年返还率高达13.4%, 同等条件下,ssd盘的5年返还率仅为0.8%,显然,ssd比hdd机械盘更稳;
更经济:hdd盘的功耗为10瓦,而ssd盘的功耗仅为3瓦,ssd盘比hdd机械盘更经济。
因此,闪存普惠时代已经到来。而这次全新的oecanstor dorado v6的发布,补齐了原来和业界标杆的差距,并且在某些方面有一定的领先优势。oecanstor dorado v6的强势推出,预计将会大大推动中国的闪存化进度,特别是在金融关键业务场景。

74ls290计数器电路大全(六种进制计数器电路)
如何在家居照明系统中添加RGB LED灯带
随着云计算的发展,边缘计算还存在哪些挑战
FPGA设计的高速FIFO电路技术
变电站的分类 变电站与住宅的安全距离
华为V3直接到V6,OecanStor Dorado 为啥子怎么快速?
苹果13pro手机价格和图片
24种常用金属材料及其特性!
英特尔未来的芯片都将集成语音识别技术
针对Redis服务我们应该避免哪些性能浪费
基于MSP430的心电数字无线遥测系统
多种波形发生器电路图_低频多种波形发生器电路图
UnitedSiC推出具有最低RDS(on)的DFN 8x8格式FET
单片机sbit的含义及用法
5G这么多的基站怎样来建
A6伺服系统的接线与调试
麦瑞半导体推出SY88053CL和SY88063CL限幅后置放大器
2020年的区块链如何跟随趋势的步伐
USB3.0投屏芯片MS9132介绍
三类IoT主流方案齐备亮相ELEXCON 2022