过去十年中,计算已经不仅仅局限在个人电脑和服务器内,cpu和gpu已经被广泛地用于各个新型超大规模数据中心。这些数据中心通过功能强大的新型处理器连接在一起,dpu( data processing unit ,数据处理器)已经成为了以数据为中心的加速计算模型的第三个计算单元。
cpu用于通用计算,gpu用于加速计算,而数据中心中传输数据的dpu则进行数据处理。
欢迎来到启用dpu的数据革命时代
根据现今最著名的历史学家之一yuval noah harari的说法 ,人类面临着四次重大革命:
· 公元前70,000年发生的认知革命定义了语言的诞生和交流的能力。它也克服了尼安德特人,将智人带到了舞台的前列。
· 农业革命发生在公元前10000年,它定义了人类驯养家畜和种植农作物的能力,加速了人类人口的增长,推动了城市的崛起。
· 科学革命是一系列事件,标志着现代科学在早期现代时期的出现,当时数学、物理、天文学和科学的发展为我们现代生活方式奠定了基础。
· 我们今天目睹的第四次革命是数据革命。
与之前的重大技术变革(例如个人计算机、客户端服务器甚至虚拟化)不同,数据革命比以前的革命更隐蔽。这种转变的核心是需要发动下一次重大技术飞跃,其中机器学习是实现真正人工智能的起点。为了达到这个目标,我们需要处理大量的数据。
随着我们进入数据革命时代,对更高计算性能的不断增长的需求正在推动新的数据中心加速器和处理单元的诞生。以前cpu和gpu是计算能力的主要来源。数据量和复杂性的指数级增长推动了以数据为中心的体系结构和新型加速器单元的创建。
在以数据为中心的设计中,完整的基础架构堆栈(包括计算,存储和网络)的架构旨在快速有效地捕获、分析、分类、管理和存档大量数据,新一代加速器应运而生 —— dpu。
cpu,gpu和dpu的组合是协同处理的下一个飞跃,它将利用这些革命性的硬件加速技术和软件定义的可编程性来应对以数据为中心和边缘计算架构的挑战,最大程度地提高投资回报率,并使不可能成为可能。
dpu有什么与众不同之处?
为什么人们如此渴望使用dpu?首先,它更安全,因为控制平面可以在系统内和系统集群之间与数据平面分离。目前服务器要处理的资料日益增多,除了原有的加解密、封包压缩外,加速器也让服务器要处理的资料量变得更庞大,就会造成原有cpu在处理安全能力表现上出现瓶颈。
dpu可以执行原本需要cpu处理的网络、存储和安全等任务。这就意味着如果在数据中心中采用了dpu,那么cpu的不少运算能力可以被释放出来,去执行广泛的企业应用。
dpu的主要作用就在于替代了数据中心原本用来处理分布式存储和网络通信的cpu处理器资源。在dpu之前,智能网卡(smartnic)正在网络安全和网络互连协议方面逐渐取代cpu。而现在dpu的出现,相当于是智能网卡的升级替代版本,一方面增强了智能网卡对网络安全和网络协议的处理能力,一方面又整合和加强了分布式存储的处理能力,从而在这两个领域更好地替代cpu,从而释放cpu的算力给到其他更多应用。
有了dpu的出现,就可以先在dpu将大量的信息先做消化,接着再传递给cpu做其他的分配,如此一来能减少cpu约30%的消耗。
dpu是一种新型可编程处理器,是一种soc(system on chip),它结合了:
· 行业标准的、高性能及软件可编程的多核cpu,通常基于已应用广泛的arm架构,与其的soc组件密切配合。
· 高性能网络接口,能以线速或网络中的可用速度解析、处理数据,并高效地将数据传输到gpu和cpu。
· 各种灵活和可编程的加速引擎,可以卸载ai、机器学习、安全、电信和存储等应用,并提升性能。
dpu引入机器学习算法可对数据进行智能管理、控制和分析,从而减少闪存擦写次数,延长ssd使用寿命;还可减少盘内计算和总线数据量,减轻主机cpu的负担。所有这些dpu功能对于实现安全的、裸性能的、原生云计算的下一代云上大规模计算至关重要。
cpu、gpu、dpu将代表未来计算的三大支柱。这三者之间,cpu用于通用计算,gpu用于加速计算,而dpu在数据中心周围移动数据进行数据处理。dpu可以和cpu、gpu相结合,构成完全可编程的单一ai计算单元,实现前所未有的安全性和算力支持。
国际巨头开始纷纷提前布局
自1950年代以来,中央处理器“ cpu”一直是每台计算机或智能设备的核心;到1990年代以来,gpu或图形处理单元扮演了重要角色。在过去的十年中,计算已经摆脱了pc和服务器的繁琐局限,cpu和gpu为庞大的新超大规模数据中心提供了动力。然而最近几年,随着系统中的cpu承受越来越多的网络和存储工作负载,dpu已成为以数据为中心的加速计算模型的第三个成员。
根据thenextplatform的分析指出,在2020年,在这个领域的玩家或者潜在玩家主要包括broadcom、intel、英伟达、netronome、pensando、fungible和xilinx,还包括云供应商三大巨头。
dpu是英伟达最新的一个布局。英伟达对dpu尤为重视,最主要的布局就在于2019年3月,花费69亿美元收购了以色列芯片公司mellanox —— mellanox在2015年9月以8.11亿美元的天价收购了ezchip公司,该公司拥有多核芯片创业公司tilera的资产,tilera是最早使用知识产权的高度并行smartnic实施之一,该实施源自更早的mit研究项目。
mellanox所擅长的正是为服务器、存储和超融合基础设施提供包括以太网交换机、芯片和infiniband智能互连解决方案在内的大量的数据中心产品。英伟达的gpu与mellanox的互连技术结合,可以使得数据中心工作负载将在整个计算、网络和存储堆栈中得以优化,并能实现更高的性能、更高的利用率和更低的运营成本。
黄仁勋把mellanox的技术看作是公司的“x因素”,也就是把数据中心改造成一个可以解决高性能计算要求的大型处理器架构。而如今我们看到dpu的出现,已经是具有这一架构雏形的一种尝试了。
英伟达在dpu上的技术突破,是在收购mellanox之后,在这家公司的硬件基础上开发出bluefeild系列的两款dpu —— 英伟达bluefield-2 dpu与bluefield-2x dpu。
英伟达发力dpu建设的深层目的:一个是dpu试图再一次复制gpu替代显示加速卡成为通用显示芯片的路径;再一个是doca试图再一次复制cuda在gpu通用化过程中所起到的开创生态之功。
与此同时,随着数据中心网络中传送的数据量以每年25%的速度增长,英特尔也对dpu很感兴趣。因为预算不能以这种速度增长,而且由于对原始cpu计算的偏见投资(与构建平衡的系统以更充分地利用可用的计算能力相反),网络通常不超过分布式成本的10%系统。面对所有这些压力,英特尔必须创新并帮助改善网络,英特尔认为集成显得很重要。
在dpu上,英特尔主要是将cpu和fpga结合在一起,但英特尔并自己做,而是由inventec和silicom制造的。前者对于hyperscalers和云构建者来说是日益重要的odm,而后者则是过去二十年来的网络接口供应商。
另外,英特尔收购了深度学习芯片公司nervana systems,以及移动和嵌入式机器学习公司movidius,给未来的深度学习下了重注。而英特尔所做的这一切,正是在为未来适应深度学习的数据流(dpu)架构升级布局。
越来越多供应商纷纷涌入dpu架构。dpu能否演绎cpu和gpu的佳话?十年前,随着硬件加速技术的第一次重大冲击,我们对gpu产品充满了兴趣。现在,随着fpga扩展到超过300万个逻辑单元,fpga得以与其他可组合的处理模块紧密地结合在一起,以实现网络、内存、存储和计算。有了这些进步,我们开始认识到第二次硬件加速浪潮的形成。让我们静待其变。
英伟达挑战英特尔,距离还有多远
另外一个值得注意的是英伟达提出配合dpu处理器的软件开发工具包 —— doca(data-center-infrastructure-on-a-chip architecture)。英伟达的专家将doca类比为数据中心服务器领域的cuda,其意图在于帮助开发人员在dpu加速的数据中心基础设施上构建相应的应用程序,从而丰富dpu的应用开发生态。
如果和不久前英伟达收购arm的消息结合起来,我们看到英伟达的一个重要考量,就是以arm架构的cpu为核心,从服务器的应用加速扩展到服务器的全部应用场景,从而实现在数据中心服务器领域的更大突破,目标自然是英特尔cpu为代表的x86服务器生态。
自从英伟达开始收购arm,外界能够看到英伟达已经多次显示出其试图利用arm处理器进一步占领数据中心服务器市场的决心,而集成了arm核心的dpu将成为其打入数据中心存量市场取代x86 cpu的第一个切入点。
英伟达推出dpu来切入这个市场,而非直接用arm核心cpu来与x86 cpu直接竞争,其实是一种比较讨巧的做法,相当于用集成了网络、存储、安全等任务的下一代cpu产品来达到逐渐替换cpu的目的,即使其中所内涵的arm cpu性能无法对标同一代的x86 cpu,但是整体机由于在dpu soc上集成了专用的处理加速模块,因此总体性能一定是超过x86 cpu的。
但是英伟达想要在中高端处理器市场来挑战英特尔,还要面临一系列的困难。首先,正是英伟达的gpu与x86 cpu已经形成一种非常稳定的强互补关系。英伟达想要采用基于arm架构的处理器做高端服务器,还需要arm处理器性能出现大幅的提升,而现在这一进程并不明朗。
英伟达在数据中心领域的成功与否,都与能否实现数据中心的规模化运算有关,从发展自研的dgx系列服务器到整合mellanox的技术,再到借助arm生态发展全新的数据中心计算架构,都是为转型数据中心业务所作的准备。当然,想要实现这一目标,还要看下英特尔如何应对。
英特尔早已为应对英伟达的种种挑战进行了相应的回应和布局。早在2017年,英特尔就宣布要开发全栈的gpu产品组合,而预计明年英特尔的首批gpu将在使用gpu的各个市场上发布。
目前来说,数据中心当中,95%左右的gpu仍然还是连接到x86的cpu之上,英伟达如果单纯只是做gpu的增量,仍然无法撼动英特尔在数据中心服务器的霸主地位。
数据中心业务对于英特尔来说,也正在成为其最核心的业务组成。2019年q4英特尔的数据中心业务超越pc业务,成为其收入的主要来源;而在今年,英特尔对其技术组织和执行团队的重组,也被外界视为全面转型数据中心业务的开始。
可以想见在未来的数据中心处理器业务上,英伟达将迎来英特尔最为强劲的保卫战和反击战,而广大的服务器集成商或将成为这场角力赛的受益方。
英伟达还要面对adm这一新对手的追赶,不久前adm曝出要花费300亿美金收购赛灵思,就被看作是叫板英特尔,阻击英伟达的双战略。
除此之外,英伟达还要在数据中心处理器业务中面临来自客户自研芯片的挑战。云服务商本身也不愿意完全将自身的计算核心完全交给英伟达,无论是aws、还是谷歌、阿里巴巴、华为,都已经在布局自己的云端处理器。
数据中心已经成为英特尔、英伟达、amd这些老牌芯片巨头未来争夺的主战场,dpu是数据中心战场中重要一役。
作为一个“芯”生事物,走稳是当下的要务。dpu还在早期阶段,这走的或是类似gpu的革命路线。gpu刚出来时业界均不看好,但英伟达却矢志不渝,不断迭代和优化,最终gpu一路狂奔,到最后全面接管了图形图像的显示控制,并在ai时代成为主力核心。但dpu真的会成另一个gpu吗?
成都fm频道列表
广州:到2030年将建成加氢站100座以上,氢能产业产值预计2千亿以上
投资者该如何评估比特币的长期价值
人工智能有什么好?为什么我国这么重视它?
飞利浦与默克宣布建立多年合作关系
各大巨头纷纷入局DPU:DPU真的会成另一个GPU吗
电磁屏蔽的原理与应用_电磁屏蔽的原理是什么_电磁屏蔽上的应用
“强企稳企·协同发展”交流大会隆重举行 希立仪器喜获“突出贡献奖”
如何鉴别iPhone12有没有绿屏?
变压器风冷控制柜的特点介绍
苹果全面屏内部PK!iPhone X与iPhone XR现在知道选哪个了吗?
大容量充电宝什么牌子最好,容量比高的充电宝品牌
台积电7nm工艺开始试产 骁龙845/苹果A12在路上
经纬恒润参加东风汽车品牌秋季发布会暨科技周活动
Raspberry Turk:基于树莓派的国际象棋对战机器人开源项目
能效管理平台助力企业有序用电
一个简单的红外音频链路分享
玩客币WKC:拯救一个迅雷,坑害无数韭菜
不同形状的磁芯,在开关电源中有什么影响?
智能扫地机器人什么牌子好用?新时代家庭必备好物UONI由利扫地机器人