上个月,美国发布更新针对ai芯片的出口管制规定,新措施意在填补去年10月发布法规中的漏洞。这样意味着,除了英伟达a100/h100之外,其针对中国市场推出的替代版本a800/h800等gpu对华出售也将受到限制。
近日,阿里云a100服务器业务暂停出租的消息传出。这反映出,美国对ai芯片的出口管制规定,已经对中国的算力供应造成影响。当前的情况是,需求侧大模型正在快速发展,对算力的需求不断提升;供给侧英伟达gpu芯片对华销售受阻,市面上a100/a800等现货价格水涨船高,算力租赁服务售价同样如此。而阿里云在满足自身大模型研发需求之外,也已经没有足够多算力用于对外出租。
捉襟见肘的ai算力
目前,国内各大互联网厂商都已经推出自己的大模型产品,并在不断探索技术和应用创新,同时各行各业的企业,无论大小,都在尝试将大模型技术引入自己的产品和解决方案中。而无论是大模型的研究和应用,其训练和推理过程都需要依靠强大的算力作支撑。
百度、腾讯、字节、阿里作为国内主要的云服务厂商。相较之下,购买和积累了更多的gpu产品。其中,字节跳动a100 和v100显卡总数接近10万块,阿里巴巴集团也大概拥有10万块顶级显卡。腾讯因为在2022年底砍掉一批英伟达订单,其拥有的gpu数量较少。相对来说,百度所拥有的顶级gpu数量也偏少。
近年来,大模型热潮如龙卷风般袭来,这对gpu的需求不断增加,上述各大厂商也加大了向英伟达gpu所下的订单,以扩大自己的基础硬件设施储备。今年8月,百度、字节、腾讯和阿里向英伟达下单订购50亿美元的芯片,其中价值10亿美元约10万颗英伟达a800芯片,将在年内交付。另外价值40亿美元的芯片将于2024年交付。
然而,在上个月美国发布ai芯片出口管制新规之后,这些订单都将不能如期交付。这意味着各大互联网厂商面临着不同程度的gpu芯片紧缺的局面。
阿里云此次暂停a100服务器对外出租可想而知就是如此。阿里云是全球领先的云计算服务提供商之一,它提供各种各样的云计算产品和服务,包括云服务器租赁。
阿里云云服务器租赁是一种将计算资源分配给用户的服务,用户可以通过互联网租用虚拟化的服务器资源。这些服务器资源是在阿里云数据中心中运行的,用户只需要根据自己的需求选择适合自己的云服务器,并根据需要支付租金。
在10月31日开幕的2023年云栖大会上,阿里巴巴集团董事会主席蔡崇信谈到,在当下的智能化时代,阿里巴巴要致力于打造ai时代最开放的云。他表示,目前,中国有80%的科技企业和一半的大模型公司都跑在阿里云上。
除了对外出租,阿里云正在研发和迭代自己的通义千问大模型,这对gpu算力的需求很高。举例来看,openai的gpt-3训练使用了128台英伟达a100服务器(训练34天),对应640p算力,gpt-4模型训练使用了3125台英伟达a100 服务器(训练90-100天),对应15625p算力。从gpt-3至gpt-4模型参数规模增加约10倍,用于训练的gpu数量增加了近24倍。
根据行业人士的推测,国内头部大模型厂商如果对标gpt-3模型的训练需求,需要1920台a100/a800服务器,对应15360张gpu。如果对标gpt-4模型的训练需求,则额外需要13705台a100/a800服务器,对应近11万张gpu。
根据此前传出的一份交流纪要里,阿里云ai专家提到,阿里云在云上有上万片的a100,整体能够达到10万片,集团体量应该是阿里云的5倍。该ai专家提到,大模型大规模的应用,成本也很高,比如chatgpt完成一个推理任务,需要5张a100在2秒钟之内做一次推理。
大致来看,1万张顶级显卡才刚刚算是能够跨进大模型的门。而如果要训练更高级别的大模型,对gpu的需求将会呈大幅度增长。就如上文所述,阿里云拥有大约1万张a100,已经足够其训练大模型产品,然而如果它想训练出对标gpt-4的模型,可能就要用上阿里集团目前所有的gpu卡。
逐渐能用的国产ai芯片
随着大模型的研发和应用,以及美国对ai芯片的出口管制,目前市场面现有的英伟达gpu芯片已经涨到天价,而且所剩不多,各个算力租赁服务企业价格也在不断上涨。阿里云或许是为了率先满足自己对算力的需求,只得暂停a100服务器对外出租。
然而这些举措都没有办法真正解决,目前国内对可用于大模型训练和推理的ai芯片的需求问题。近日,面对美国加强对华人工智能芯片管制,英特尔率先提出应变策略。据英特尔供应链透露,英特尔已针对最新发布的gaudi2推出降规版出货,预计将不受新禁令影响。
不过,即使gaudi2降规版短期内能够出货,然而其性能必然是会大打折扣的。要知道,之前英伟达在符合去年10月法规的基础上,推出的a800/h800,相对于a100/h100在关键性能上就已经大幅限制,如今要符合更新后的出口管制规定,gaudi2降规版计算性能还得更进一步下调。
期待国产ai算力芯片的突围,才是长久之计。事实上,目前已经有一些国产企业的人工智能芯片,受到客户的青睐。比如弘信电子近日发布公告称,已与上海燧原科技有限公司签署采购协议,拟长期向燧原科技采购一定数量的人工智能加速卡及配套产品作为原材料。本次公司已正式向燧原科技下发9152片芯片采购订单,计划于年底前完成全部芯片的交付,快速形成国产算力落地。
近日也有消息传出,百度为200台服务器订购了1600片昇腾910b ai芯片。到10月份,华为已向百度交付了超过60%的订单。而且此前科大讯飞此前就已经采用华为昇腾910b芯片,该公司还表示,当前华为昇腾910b能力已经基本做到可对标英伟达a100。
总结
可以看到,在当前大模型的不断发展,及美国对ai芯片的出口管制下,算力已经出现了极度紧缺的情况。虽然英特尔表示,已发布针对最新发布的gaudi2推出降规版。然而可想而知其性能将会大打折扣,而且不能确保美国后续不会针对降规版也实施限制。长久来看,发展中国自己的ai算力芯片极其重要,而如今已经有国产的ai芯片可以用于大模型的训练和推理,这无疑给国产ai芯片在未来的发展中增添了更多信心。
被谷歌搞怕了?中兴年内推Web OS和火狐OS手机
2021年家居家电市场走势到底会如何变?
热导式气体传感器MTCS2601在碳酸饮料浓度测量中的应用介绍
i9-9980HK移动处理器曝光 8核16线程主频达2.4GHz
Agith:openEuler 运维变更观测工具
阿里云暂停A100服务器出租,AI算力奇缺!国产AI芯片任重道远
笔记本光驱的接口类型有哪些?
压电MEMS超声换能器如何解决解决频率控制难题?
多款5G手机已经上市,哪款手机最适合大学生?
隐藏式HOME键+全面屏,它比小米MIX更具性价比
Vivado Design Suite 用户指南介绍
Mapreduce和Hive中map reduce个数设定
医疗一体机如何实现全面互联
内存泄漏有什么影响
体育科技企业FORM推出AR智能泳镜,售价199美元
ADC0832的基本应用方法
AII公布工业数据中心应用案例名单
微小植入型传感器能长期连续地对体内酒精含量进行监测
集群应用的太阳能中央热水器控制与管理系统设计
光一科技:5G基站能耗管理的软硬件服务已在试运营