性能超英伟达A100,华为高管:近半中国大模型选择昇腾技术路线

【HowToTech科技】6月18日消息,在近日举行的2024世界半导体大会暨南京国际半导体博览会上,江苏鲲鹏・昇腾生态创新中心的首席运营官王陶披露了昇腾集群的最新进展。据王陶介绍,昇腾集群已经完成了训练千亿参数大模型的技术路线,其性能更是超越了业界知名的英伟达A100。

在中国众多的大模型中,近半数选择了昇腾技术路线,这足以彰显其在AI领域的强劲实力。王陶进一步指出,昇腾AI芯片在训练效率上最高可以达到英伟达芯片的1.1倍。更令人瞩目的是,在训练如meta
Llama、BloomGPT等大型模型时,昇腾AI的算力训练效率远超英伟达A100,甚至达到了其他国产友商的10倍。

王陶骄傲地表示,昇腾目前已经成为了国产化大模型的首选。他举例说,科大讯飞在经过严格测试后,也采纳了华为的万卡集群方案。与英伟达A100相比,该集群在效率上能达到0.8至1.2倍。尽管在某些方面与英伟达A100还存在微小差距,但在大模型训练领域,昇腾已经与英伟达A100芯片不相上下。特别是在万卡算力集群的实践应用上,无论是鲲鹏云脑还是科大讯飞,都已经过了市场的严格检验。

性能超英伟达A100,华为高管:近半中国大模型选择昇腾技术路线

据HowToTech科技了解,此前在华为全连接大会2023上,华为发布了一款全新架构的昇腾AI计算集群——Atlas 900
SuperCluster,该集群可支持超过万亿参数的大模型训练。其创新之处在于采用了华为全新的星河AI智算交换机CloudEngine
XH16800,利用该交换机高密度800GE端口的能力,仅通过两层交换网络就能实现2250节点(相当于18000张卡)的超大规模无收敛集群组网。这一技术突破无疑进一步巩固了昇腾在AI领域的领先地位。

大鱼的头像

这个人很懒,什么都没有留下~

延伸阅读:

OpenAI 测试长输出版 GPT-4o:单次输出达64K tokens

【HowToTech科技】8月1日消息,OpenAI在7月29日透露,他们正在对一款名为GPT-4o Long Outp...

大鱼的头像
大鱼
2024 年 8 月 1 日
ISC.AI2024数字安全峰会:360、华为、微软等共话安全+AI新挑战

7月31日,ISC.AI 2024数字安全峰会在北京国家会中心顺利召开。峰会以“打造安全大模型,引领安全行业革命”为主题...

大鱼的头像
大鱼
2024 年 7 月 31 日
ISC.AI2024开幕 周鸿祎发布国内首个免费安全大模型

“把大模型拉下神坛就要把免费贯彻到底,今天我在行业里第一个宣布安全大模型免费。”7月31日,ISC.AI2024第十二届...

大鱼的头像
大鱼
2024 年 7 月 31 日
阿里通义免费开放奥运AI大模型

7月31日,阿里通义宣布免费开放奥运AI大模型,具备最强奥运专业知识,并集合同声传译级别的中法互译功能。即日起,用户可以...

大鱼的头像
大鱼
2024 年 7 月 31 日
实时对话更自然,OpenAI 向部分付费订阅用户开放 GPT-4o 语音模式

【HowToTech科技】7月31日消息,OpenAI于当地时间30日宣布,即日起GPT-4o的语音模式(注:Alpha...

大鱼的头像
大鱼
2024 年 7 月 31 日