重磅!“我们需要更大的GPU” 英伟达宣布推出最强AI芯片 成本和能耗较前代改善25倍

号称今年全球头号人工智能(AI)领域开发者大会的英伟达2024 GTC AI大会于美东时间3月18日周一拉开帷幕。今年是英伟达时隔五年首次让年度GTC重回线下,也是此前分析认为英伟达要“拿出点真家伙”的AI盛会。

当地时间周一下午,英伟达创始人兼CEO黄仁勋在美国加州圣何塞SAP中心进行主题为“面向开发者的1#AI峰会”(1#AI Conference for Developers)演讲。黄仁勋介绍了运行AI模型的新一代芯片和软件。英伟达正式推出名为Blackwell的新一代AI图形处理器(GPU),预计将在今年晚些时候发货。

Blackwell平台能够在万亿参数级的大型语言模型(LLM)上构建和运行实时生成式AI,而成本和能耗比前身低25倍。

另据媒体报道,英伟达CEO黄仁勋在GTC宣布,将在其企业软件订阅中增加一款名为NIM的新产品。NIM可以更容易地使用旧的英伟达GPU进行推理,并允许公司继续使用他们已经拥有的数亿个英伟达GPU。该产品将使新人工智能模型的初始训练推理所需的算力更少。该公司的策略是让购买英伟达服务器的客户注册英伟达企业版,每个GPU每年收取费用4500美元。黄仁勋表示,该软件还将帮助在配备GPU的笔记本电脑上运行人工智能,而不是在云服务器上运行。

此外,英伟达CEO黄仁勋宣布推出下一代人工智能超级计算机,英伟达还发布6G研究云平台,以便用AI技术推进无线通信。

英伟达推新AI芯片

据外媒报道,英伟达于周一宣布推出新一代人工智能芯片和用于运行人工智能模型的软件。该公司在美国圣何塞举行的开发者大会上宣布了这一消息,正值这家芯片制造商寻求巩固其作为人工智能公司首选供应商的地位。

自OpenAI的ChatGPT于2022年末掀起人工智能热潮以来,英伟达的股价上涨了五倍,总销售额增长了两倍多。英伟达的高端服务器GPU对于训练和部署大型AI模型至关重要。微软和Meta等公司已经花费了数十亿美元购买这些芯片。

图片来源:视频截图

新一代AI图形处理器命名为Blackwell。首款Blackwell芯片名为GB200,将于今年晚些时候发货。英伟达正在用更强大的芯片吸引客户,以刺激新订单。例如,各公司和软件制造商仍在争相抢购当前一代的“Hopper”H100芯片及类似产品。

“Hopper很棒,但我们需要更大的GPU,”英伟达首席执行官黄仁勋周一在该公司于加利福尼亚州举行的开发者大会上表示。不过,周一盘后交易中,英伟达股价下跌超过1%。该公司还推出了名为NIM的创收软件,该软件将简化AI的部署,为客户提供了在日益增多的竞争者中坚持使用英伟达芯片的另一个理由。

英伟达高管表示,该公司正从一个唯利是图的芯片提供商转变为更像微软或苹果的平台提供商,其他公司可以在此基础上构建软件。

“Blackwell不仅仅是一款芯片,而是一个平台的名称,”黄仁勋表示。

英伟达企业副总裁Manuvir Das在接受采访时表示:“可销售的商业产品是GPU,而软件则是为了帮助人们以不同的方式使用GPU。当然,我们现在仍然这样做。但真正改变的是,我们现在真的有了商业软件业务。”

Das表示,英伟达的新软件将更容易在任何英伟达GPU上运行程序,甚至是那些可能更适合部署而不是构建AI的老旧GPU。“如果你是开发者,你有一个有趣的模型,你希望人们采用它,如果你把它放入NIM中,我们会确保它可以在我们所有的GPU上运行,这样你就可以覆盖很多人,”Das说道。

Blackwell拥有六项革命性技术

英伟达每两年更新一次其GPU架构,实现性能的飞跃。过去一年发布的许多AI模型都是在该公司的Hopper架构上训练的,该架构被用于H100等芯片,于2022年宣布推出。

图片来源:视频截图

据悉,英伟达称,Blackwell拥有六项革命性的技术,可以支持多达10万亿参数的模型进行AI训练和实时LLM推理:

全球最强大的芯片:Blackwell架构GPU由2080亿个晶体管组成,采用量身定制的台积电4纳米工艺制造,两个reticle极限GPU裸片将10 TB/秒的芯片到芯片链路连接成单个统一的GPU。

第二代Transformer引擎:结合了Blackwell Tensor Core技术和TensorRT-LLM和NeMo Megatron框架中的英伟达先进动态范围管理算法,Blackwell将通过新的4位浮点AI支持双倍的计算和模型大小推理能力。

第五代NVLink:为提高数万亿参数和混合专家AI模型的性能,最新一代英伟达NVLink为每个GPU提供了突破性的1.8TB/s双向吞吐量,确保最复杂LLM之间多达576个GPU之间的无缝高速通信。

RAS引擎:Blackwell支持的GPU包含一个专用引擎,实现可靠性、可用性和服务性。此外,Blackwell架构还增加了芯片级功能,利用基于AI的预防性维护进行诊断和预测可靠性问题。这可以最大限度地延长系统正常运行时间,并提高大部署规模AI的弹性,使其能连续运行数周甚至数月,并降低运营成本。

安全人工智能:先进的机密计算功能可在不影响性能的情况下保护AI模型和客户数据,并支持新的本机接口加密协议,这对于医疗保健和金融服务等隐私敏感行业至关重要。

解压缩引擎:专用解压缩引擎支持最新格式,加快数据库查询,提供数据分析和数据科学的最高性能。未来几年,在企业每年花费数百亿美元的数据处理方面,将越来越多地由GPU加速。

图片来源:视频截图

Blackwell GPU体积庞大,将两个单独制造的晶粒组合成一个由台积电制造的芯片。它还将作为一款名为GB200 NVLink 2的整个服务器提供,该服务器结合了72个Blackwell GPU和其他旨在训练AI模型的英伟达部件。

亚马逊、谷歌、微软和甲骨文将通过云服务提供对GB200的访问。GB200将两个B200 Blackwell GPU与一个基于Arm的Grace CPU配对。英伟达表示,亚马逊网络服务将构建一个包含20000个GB200芯片的服务器集群。

英伟达没有提供新款GB200或其使用系统的成本。据分析师估计,英伟达基于Hopper的H100芯片成本在2.5万至4万美元之间,而整个系统的成本高达20万美元。

英伟达推理微服务

英伟达还宣布,将在其英伟达企业软件订阅中添加一款名为NIM(英伟达推理微服务)的新产品。NIM让使用较旧的英伟达GPU进行推理(或运行AI软件的过程)变得更加简单,并允许公司继续使用其已经拥有的数亿个英伟达GPU。与新AI模型的初始训练相比,推理所需的计算能力较少。对于那些希望运行自己的AI模型,而不是从OpenAI等公司购买AI结果作为服务的企业来说,NIM无疑是他们的得力助手。

英伟达的策略是吸引购买基于英伟达的服务器的客户注册英伟达企业版,每个GPU每年的许可费为4500美元。

英伟达将与微软或Hugging Face等AI公司合作,确保他们的AI模型能够在所有兼容的英伟达芯片上运行。随后,开发者可以使用NIM在自有服务器或基于云端的英伟达服务器上高效运行模型,无需繁琐的配置过程。

“在我原本调用OpenAI的代码中,我只需替换一行代码,将其指向从英伟达获取的NIM即可。”Das说道。

英伟达表示,该软件还将助力AI在配备GPU的笔记本电脑上运行,而非仅限于云端服务器。

相关报道

3分钟速览黄仁勋GTC演讲:最强AI芯片、NIM微服务等

英伟达重磅发布 最新芯片技术Blackwell发布 推动人形机器人开发

凌晨突发!黄仁勋重大宣布!华尔街沸腾 英伟达股价盘后一度跌超2%

(文章来源:每日经济新闻)

声明:壹贝网所有作品(图文、音视频)均由用户自行上传分享,仅供网友学习交流,版权归原作者wangteng@admin所有,原文出处。若您的权利被侵害,请联系 756005163@qq.com 删除。

本文链接:https://www.ebaa.cn/20970.html

(0)
上一篇 2024年3月19日
下一篇 2024年3月19日

相关推荐

  • 肯塔基大学的英文

    美国男篮运动项目强的TOP10大学院校 2024年的美本申请季已经正式开启了,诸位同学做好准备了吗? 俗话说得好,凡事预则立,不预则废。做好美本申请规划对于今后的美本申请将大有助益,既有方向性,在努力的过程中也会更加从容。 而美本择校是美本申请规划中尤为重要的一环,如果有同学喜欢篮球运动,想要申请篮球运动项目好的大学,希望留美网整理的美国男篮运动项目强的大学…

    2025年7月30日
  • 美国俄亥俄州立大学和俄勒冈州立大学

    据《洛杉矶时报》记者Luca Evans报道,消息人士透露,俄亥俄州立大学、俄勒冈大学以及南加州大学是湖人前锋勒布朗-詹姆斯的大儿子布朗尼的前三号大学选择,仍然存在黑马学校的可能性。 布朗尼仍然只参加一家学校的官方看校招募活动(俄亥俄州立大学)。 俄亥俄州立大学位于俄亥俄州哥伦布市,俄勒冈大学位于俄勒冈州尤金市,南加州大学位于加州洛杉矶市。 (虎扑)

    2025年6月23日
  • 曼海姆商学院硕士要求

    昨天,QS世界大学排名的编纂者及全球商学院分析研究机构QS Quacquarelli Symonds发布了2025QS商科硕士排名。 这个排名包括了4大商科硕士专业:商业分析,金融,管理学和市场营销。 01 德国大学商科硕士排名 市场营销专业: 欧洲商学院(81-90) 金融专业: WHU奥托贝森商学院(28)法兰克福金融管理学院(45)EBS商学院(74)…

    2025年1月21日
  • 高考如何考进戴维森学院

    揭秘戴维逊学院:高考生如何成功申请? 戴维逊学院是一所享誉全美的文理学院,以其卓越的学术声誉和严格的入学要求著称。以下是针对高考生如何成功申请戴维逊学院的一些重要信息和建议。 了解学院概况和优势 戴维逊学院成立于1837年,位于北卡罗来纳州的戴维森小镇,拥有大约1800名学生。学院以其小班授课、高质量的教学团队和丰富的课外活动而闻名。戴维森学院在学术研究和社…

    2024年9月14日
  • 马来西亚桑德兰大学排名

     桑德兰大学的声誉显著,它获得的多个独立机构颁发的奖项就充分证实了这一点。桑德兰的玻璃业闻名全英,倍受推崇的《卫报》将桑德兰命名为“英格兰最佳新式大学”;《泰晤士报》将其评为“英格兰最佳新式研究大学”。各个学院也有自己的资源中心,可以为个体和小组的学习提供帮助。,桑德兰大学设置的学位有本科和研究生,那么桑德兰大学的含金量究竟如何呢?我们一起来了解下吧! 桑德…

    2025年8月8日
  • 维多利亚大学统计学

    #出国留学# 今年的大学录取沿袭了维多利亚世界学院「新加坡升学路径」的一贯优势,截止目前已收到75封offer,人均3-5封录取信,其中96%的OFFER来自QS世界前100名校。 据统计,维多利亚世界学院2025届学子现已成功收获: 英国G5超级精英大学录取/面邀澳洲八大名校录取加拿大及新西兰地区顶尖名校录取… … 录取专业丰富,包…

    2025年1月16日
  • 南洋大学毕业后

    新加坡南洋理工大学是新加坡的第二所公立大学,南洋理工大学回国就业前景是很好的,许多中国学生在新加坡南洋理工大学研究生毕业之后回国就业很久快就能找到合适自己的工作,很多企业需要高学历人才,新加坡南洋理工大学在世界上排名第12位,像这种国际知名大学毕业的学生在任何地方都是非常受欢迎的。 南洋理工大学回国就业 新加坡南洋理工大学的毕业学历证书是受到国内承认的,因此…

    2025年5月27日
  • 广东中山大学全国排名

    中山大学是985大学,中山大学在不同排名体系中的全国排名有所差异,以下是一些具体的排名信息: 1. 根据软科中国大学排名网站发布的2021年最新的中国大学排名,中山大学在综合排名中排名第13。 2. 根据中国教育在线的数据,中山大学在2024年校友会中国大学排名中位列全国第15名。 3. 根据ABC中国大学排名,中山大学排名全国第14、广东第1。 4. 根据…

    2025年3月6日
  • 加拿大卡车司机(加拿大卡车司机收入)

    这是《自拍》第338个真实故事 如果你有故事,请私信我 曹哥/口述 逍遥鱼/撰文 祖一飞/编辑 大家好,我是曹哥(@极地剑风),在加拿大工作的安徽老乡。别看我现在英语说得还不赖,二十年前真是被它害惨过。1999年高考,我英语只考了30分,把总成绩拖得连三本线都没够着。从民办大专毕业后,我一直没找到满意的工作。无论东莞的电子厂,还是江苏的汽配厂,我在里面干的都…

    2023年11月20日
  • 耶鲁大学周边治安

    耶鲁大学(Yale University),简称“耶鲁”(Yale),坐落于美国康涅狄格州纽黑文,是一所世界著名的私立研究型大学,全美第三古老的高等学府。 耶鲁大学是美国大学协会的14所创始院校之一,也是著名的常春藤联盟成员。 2018-19年度,耶鲁大学位列泰晤士高等教育世界大学排名世界第8名、USNews世界大学排名世界第11名、ARWU世界大学学术排名…

    2025年2月17日

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信