禁令后大模型厂商急寻PlanB 英伟达改良版芯片已调试

2023-11-29 14:30:43 字數 3189 閱讀 3357

国内算力“涨价风暴” 期待产能上升。

作者/ it时报记者 毛宇

编辑/ 郝俊慧 孙妍

自10月24日美国针对人工智能(ai)芯片的出口管制禁令正式生效,已经月余。

《it时报》记者多方采访获悉,英伟达面向中国市场的改良版——hgx h20已与国内头部服务器厂商在进行适配测试,由于具体的性能差异和优化程度挂钩,目前还很难对其与高配版h800做性能对比,但是,预估hgx h20的8卡服务器仍高达百万级。英特尔则对gaudi 2改良版本表示暂无相关回应。仍可以在国内销售的amd mi 210则被认为在大模型微调阶段具有相当竞争力。

最近算力涨价太多,我们确实感到很吃力。”一家大模型创业公司人士告诉《it时报》记者,他们迫切希望有plan b方案。

最好的plan b当然是国产算力。目前能够与英伟达一战的华为昇腾910b已经在科大讯飞、多地智算中心落地商用,且从测试结果来看,某些性能已经与英伟达芯片相当。但突如其来的禁令,使得国内大模型厂商对华为芯片的需求直线上升。

春天来得太快,华为的**链还需时间做好准备。

针对禁令,英伟达、英特尔、amd等公司迅速做出反应,均放出消息正加紧研制改良版ai芯片。

英伟达计划推出最新改良版系列芯片——hgx h20、l20 pcle和l2 pcle,其中hgx h20被认为是此次被禁售的h800替代品。一位英伟达经销商告诉《it时报》记者,“hgx h20正在适配测试中,说是改良版,但其实是‘缩水版’。据我了解,h20符合美国出口芯片的相关规定,性能上比h800会有不小差异,但拿货最快也得下个月。”

据钛**app此前报道,h20在带宽、计算速度等方面均有所限制。理论上,整体算力要比英伟达h100(第一代被禁芯片)降低80%左右,即h20等于h100的20%综合算力性能,但增加了hbm显存和nvlink互联模块。

一份网传的调研报告认为,h20设计工艺较为一般,甚至不如华为昇腾910b的算力设计工艺,但增加的显存和网络带宽可能更适合训练参数不多的模型,适合多卡堆叠与多个ai服务器的使用,“如果有足够的买卡资源,并不考虑能耗,h20算力可以达到h100算力集群算力。”

但一位云计算业内人士认为,这种情况实现的可能性并不高,“h20是风冷,热设计功耗为400w,和a100大体相当,虽然低于h100的700w,但靠堆叠达到h100的算力,可能实际功耗是h100的2倍甚至更高。到最后比拼的都是能源,根本没有足够的电力**机房。”

受限于禁令,这一个月来,算力市场风起云涌。

11月初,包括中贝通信、优刻得等提供ai算力技术服务的国内上市公司均公开表示,受服务器**紧张影响,租赁**将会结合市场**等因素进行相应调整。

英伟达a100芯片算力服务收费**甚至最高上调100%。

it时报》记者从某云商了解到,h800的算力资源非常紧俏,基本有价无货,a100(a800)的算力租赁***幅度暂时只有20%左右,但库存水位已经很低。

众多目光聚焦于国产本土ai芯片,而热度最高的自然是华为昇腾。此前《it时报》曾独家报道,昇腾910b已在国内不少智算中心落地,进入规模化商用前期,且从多个信源反馈,在某些指标上,910b已经可以对标英伟达去年被禁的a100。

我们之前已经和华为团队有深度合作,双方研发人员联手攻克了不少困难。”最近刚刚发布千亿参数大模型星辰的中电信人工智能科技公司副总经理刘翼告诉《it时报》记者,测试中华为昇腾带来不少惊喜。

通信高级工程师、战略规划专家袁博此前在接受《华夏时报》采访时表示,华为昇腾芯片和英伟达gpu的适用场景不一样,在ai机器学习训练领域,其能力已经接近甚至部分超越英伟达的水平,但图像图形处理是弱势,因此只能弥补英伟达的部分场景。

基于华为昇腾910b的算力**大概和英伟达a100差不多,”一名接近华为的业内人士告诉《it时报》记者,尽管h20仍有生态优势,但长远来看,国内各大厂商仍将华为昇腾看作plan b的最优解,“只是910b产能正在慢慢爬坡,目前暂时无法满足这么多需求

长期来看,美国禁令的进一步收紧,给了国产算力更充足的发展时间。

idc最新报告指出,随着**支持,中国本土云端ai加速芯片制造商也正在快速增长。2023年上半年,中国ai服务器使用了50万块本地采购/开发的ai加速器芯片。这一数量占据了中国整个服务器市场的10%。显然,这个数字在2023年将飞速跃升。

至少在目前,国内各大厂商仍离不开英伟达。ceo李彦宏此前回应,得益于之前开发文心一言,已保存不少ai芯片,能够保证未来1~2年内不断更新ai大模型。腾讯高层也回应,h800等芯片库存水平较高,未来可支持几代混元大模型的更新。

it时报》记者分别致电腾讯、阿里、公司,询问ai芯片订单问题,但均未得到正面回应。

在大模型带来巨大算力消耗的红利之下,英伟达迎来了收入、利润暴增的三季度。11月22日,英伟达发布2024财年三季度财报,财报显示:英伟达三季度营收181.2亿美元,同比增长205.5%。营业利润104.2亿美元,同比增长1633.7%。营业利润率高达57.5%。

如此看来,算力芯片冲击仍有一段缓冲期,能够给到国内各大ai厂商一丝喘气和补救的时间。但另一方面,各类ai芯片正处于涨价通道,“僧多粥少”的局面仍在持续,尤其对于资金力度不够的中小ai企业来说,如今算力服务器和算力的**并不友好。

现在h800和a800服务器(不等同于算力租赁**)的**很高,一台已经飙升至350万和200万左右,比之前翻了一倍。”一名经销商表示。记者发现,不少经销商在各大社交平台发帖称手中有少量现货可以**,并长期以市场**价**二手ai芯片。

a800和h800**比较乱,且不便宜。”一名江苏的芯片经销商告诉《it时报》记者,随着美国禁令突然加强,国内二手算力芯片市场又开始活络,不少经销商开始面向全国收售英伟达二手a800和h800芯片。

另一位上海经销商告诉记者,他手上有少量现货的h800,**超310万元,国产华为昇腾910b服务器的**则为h800的一半,并称保证最快可于12月初交付现货,“越早订货可以越早交付。”

混战仍将持续一段时间。

排版/ 季嘉颖。

*/《it时报》**vittimes

芯片禁令升级,美国芯片厂商急死了,失去中国市场怎么活?

众所周知,前段时间美国被华为的新芯片吓住了,于是又升级了芯片禁令,不仅针对半导体设备,特别是光刻机进行了更严格的限制,同时还将高性能的ai芯片也禁了。美国的目的很简单,既然中国在ai上面很领先,那就将高端ai芯片禁了,毕竟目前ai算力主要掌握在美国手中。既然你们可以搞出nm芯片,那么我就将浸润式光刻...

芯片禁令升级,美国芯片厂商急死了,失去中国市场怎么活

芯片禁令升级,美国芯片厂商急死了,失去中国市场怎么活。大家都知道,就在不久前,美国因为华为的新一代芯片而感到了恐惧,所以才会加大了对芯片的封锁,禁止了包括光刻机在内的高端人工智能芯片在内的所有产品。美国的意图很明显,因为中国是人工智能领域的领头羊,所以他们禁止人工智能芯片,因为人工智能的计算能力,大...

手机厂商争相布局大模型

本报记者 张兴旺。月日,在 vivo开发者大会上,vivo发布自研ai大模型。通过ai大模型赋能,华为 小米 oppo等手机厂商均升级了语音助手,为用户带来智能体验。机构认为,搭配ai有望成为智能手机产品新卖点,看好手机端ai大模型应用。拥抱大模型。月日,vivo推出蓝心大模型。蓝心大模型包括十亿 ...