英伟达公布Blackwell架构更多细节:引领AI与超级计算的新纪元
时间:2024-08-27 16:44:11 来源:<新程序_sjbxin> 责任编辑:王志文,许晴,尤勇智,孙淳,葛存壮,肖雄,陈希光,郑振瑶,马红鹰,荆明华,李丁,马精武,李勤勤,宋佳,赵燕国彰

  在今日的Hot Chips 2024大会上,英伟达公布了下一代GPU架构Blackwell的更多细节信息,以及未来的产品路线图。

  会议期间,英伟达架构总监Ajay Tirumala和Raymond Wong对Blackwell平台进行了初步介绍,并解释了这些技术如何协同工作,在提高能源效率的同时为AI和加速计算性能提供新的标准。

  为Blackwell做好准备

  英伟达Blackwell是通用计算全栈矩阵的终极解决方案,由多个英伟达芯片组成,包括Blackwell GPU、Grace CPU、BlueField数据处理单元、ConnectX网络接口卡、NVLink交换机、Spectrum以太网交换机和Quantum InfiniBand交换机。

  它涵盖了从CPU和GPU计算,到用于互连的不同类型的网络。这是芯片到机架和互连,而不仅仅是GPU。它是有史以来单个GPU所拥有的最强AI计算、内存带宽和互连带宽。通过使用高带宽接口(NV-HBI),可在两个GPU芯片之间提供10TB/s的带宽。

  此外,英伟达还引入了新的FP4和FP6精度。降低计算精度是提高性能的一种众所周知的方法。通过英伟达的Quasar量化系统,可以找出哪些方面可以使用较低的精度,从而减少计算和存储。英伟达表示,用于推理的FP4在某些情况下可以接近BF16性能。

  NVLink交换机芯片和NVLink交换机托盘(tray)旨在以更低的功耗推送大量数据。英伟达演示了GB200 NVL72和NVL36。其中,NVL72包含36个Grace GPU和72个Blackwell GPU,专为万亿参数AI而设计。GB200 NVL 72作为一个统一系统,对大语言模型(LLM)推理性能提升高达30倍,释放了实时运行数万亿个参数模型的能力。

  英伟达表示,随着AI模型尺寸的增加,在多个GPU上拆分工作负载势在必行。而Blackwell足够强大, 可以在一个GPU中处理专家模型。

  最后,英伟达还展示了2024年至2028年的产品路线图。2026年的1.6T ConnectX-9似乎表明了英伟达对PCIe Gen7的需求,因为PCIe Gen6 x16无法处理1.6T的网络连接。

  Blackwell的技术突破

  今年3月,英伟达在GTC 2024开发者大会上发布了新的GPU架构Blackwell。Blackwell得名于美国数学家David Blackwell,是英伟达最新一代的AI芯片与超级计算平台。与Grace数据中心CPU、新一代网络芯片等产品一起,面向生成式AI共同组成完整解决方案。

  英伟达称,Blackwell拥有6项革命性技术,可支持多达10万亿参数的模型进行AI训练和实时大语言模型(LLM)推理。

  2.第二代Transformer引擎:结合Blackwell Tensor Core技术和TensorRT-LLM和NeMo Megatron框架中的英伟达先进动态范围管理算法,Blackwell将通过新的4位浮点AI支持双倍的计算和模型大小推理能力。

  3.第五代NVLink:为提高数万亿参数和混合专家AI模型的性能,最新一代英伟达NVLink为每个GPU提供了突破性的1.8TB/s的双向吞吐量,确保最复杂LLM之间多达576个GPU之间的无缝高速通信。

  4.RAS引擎:Blackwell支持的GPU包含一个专用引擎,实现可靠性、可用性和服务性。此外,Blackwell架构还增加了芯片级功能,利用基于AI的预防性维护进行诊断和预测可靠性问题。这可以最大限度地延长系统正常运行时间,并提高大规模部署AI的弹性。

  5.安全人工智能:先进的机密计算功能可在不影响性能的情况下保护AI模型和客户数据,并支持新的本机接口加密协议,进一步增强了芯片的安全性。

  6.解压缩引擎:专用解压缩引擎支持最新格式,加快数据库查询,提供数据分析和数据科学的最高性能。

  英伟达CEO黄仁勋称,Blackwell不只是芯片,而是一个全新的平台。它将是英伟达历史上、乃至整个计算机历史上最成功的产品。

  Blackwell的市场影响

  Blackwell的发布预示着AI的又一个突破时刻的到来,一经发布便得到了微软CEO萨蒂亚·纳德拉(Satya Nadella)、Alphabet CEO桑达尔·皮查伊(Sundar Pichai)、亚马逊CEO安迪·贾西(Andy Jassy)、OpenAI CEO萨姆·奥特曼(Sam Altman),以及其他知名科技领袖和名人的支持。

  至关重要的是,Blackwell是一个更大的生态系统战略的一部分。黄仁勋称:“Blackwell不仅是系统的核心芯片,它实际上还是一个平台。它基本上就是一个计算机系统。”

  该战略甚至延伸得更远。黄仁勋在GTC的一次会议上称:“你可以制造芯片让软件运行得更好,但没有软件你就无法创造一个新的市场。我们的独特之处在于,我相信我们是唯一一家能够创造自己市场的芯片公司。”

  随着基于Blackwell架构的GPU GB200的发布,英伟达似乎正在为创建新类别的AI软件应用程序打开大门。反过来,此类软件的推出、扩展和持续发展可能会对其超高端GPU产生更大的需求。

  Blackwell的延迟

  本月初有报道称,英伟达的下一代Blackwell系列AI芯片因设计缺陷问题被迫推迟发布,这一决定可能对包括Meta、谷歌和微软在内的大客户造成影响。

  据悉,Blackwell芯片的大规模生产原计划于今年第三季度开始,并于第四季度开始交付。但道,在准备大规模生产时,台积电的工程师发现了设计问题,导致生产受阻。

  报道称,由于台积电封装技术CoWoS的复杂性,英伟达将推迟Blackwell GPU的出货时间至2025年第一季度。

  整体而言,分析师认为有关Blackwell芯片推迟上市的担忧可能被夸大了,预计这不会对英伟达的营收或需求产生重大影响。

  英伟达CEO黄仁勋表示,Blackwell GPU的研发预算约为100 亿美元,上市后单价会在3~4万美元。鉴于当前训练和部署AI的强劲需求,该价格也并未超出市场预期。

  “反英伟达”联盟

  UXL基金会旨在创建一个软件套件,帮助在更广泛的处理器上运行AI应用程序,并减少对英伟达平台的依赖。

  据报道,UXL基金会目前正在招募微软、亚马逊和其他有影响力的科技公司。因此,尽管许多科技界的知名人士对Blackwell的能力感到兴奋,但可以理解的是,人们对更广泛的AI领域过度依赖英伟达的生态系统持抵制态度。

  在某种程度上,UXL基金会的成立说明了英伟达目前的竞争地位有多强。该公司在用于AI和其他加速计算应用的GPU市场上占据了大约90%的份额,而Blackwell的推出可能有助于它继续保持甚至扩大其主导地位。

  与不断扩大的专用软件工具相结合,英伟达正在重塑AI领域,而其竞争对手和潜在竞争对手还有很多工作要做。

责任编辑:刘明亮

跟林枫打了个招呼之后,这货便驾车离去了。

与刚才参观的酒店比起来的话,这地方就显得有些不上档次了,不过,若要是真跟国内的一些集团公司比的话,倒也不差劲,装修的及其的富丽堂皇不说,很是现代化,各种高科技层出不穷,俨然好像是一个什么神秘的高科技公司似的。

别人不说,林枫的师父白凤年就绝对有实力干掉方霸天,甚至是诸葛沧月与她的师父令狐小芸干掉方霸天都轻而易举。

可是为了不让这妞生气,林枫也只能选择答应她。

“那你当时为什么不提醒我?”英伟达公布Blackwell架构更多细节:引领AI与超级计算的新纪元“温家,温杰?”

ABEyoonQBeePx
相关报道
    分享到:

    中共中央政法委员会主办

    Copyright 2015 www.chinapeace.gov.cn All Rights Reserved 京ICP备 14028866 号-1中国长安网 © 2017版权所有

    年轻的老师3线在完整视频北京森馥科技有限公司中字

    小蝌蚪污APP下载

    商务旅行戴绿色的帽子老版

    <新程序_随机数><新程序_随机数>.<新程序_随机数><新程序_随机数>MB
    版本V<新程序_随机数><新程序_随机数>.<新程序_随机数><新程序_随机数>.<新程序_随机数><新程序_随机数>
    玛雅18我们严重反对自律 安装你想要的应用 更方便 更快捷 发现更多
    欧美一区二区无码777
87%好评(<新程序_随机数><新程序_随机数><新程序_随机数>人)
    商务旅行戴帽子的老板 62
    详细信息
    • 软件大小: <新程序_随机数><新程序_随机数>.<新程序_随机数><新程序_随机数>MB
    • 最后更新: 2024-08-27 16:44:11
    • 最新版本: V<新程序_随机数><新程序_随机数>.<新程序_随机数><新程序_随机数>.<新程序_随机数><新程序_随机数>
    • 文件格式: apk
    • 应用分类:ios-Android
    • 使用语言: 中文
    • : 需要联网
    • 系统要求: 5.41以上
    应用介绍
    一,青苹果影院,新疆旱厕50
    二,深夜福利网站www十八禁
    三,向日葵视频在线观看苏州晶体
    四,欧美熟妇XXXX 了
    五,性XXXX欧美老妇胖老太性多毛
    六,亚洲熟妇丰满美女XXXXX
    七,男生用鸡巴插进女生的鸡巴软件
    【联系我们】
    客服热线:139-2551-646
    加载更多
    版本更新
    V<新程序_随机数><新程序_随机数>.<新程序_随机数><新程序_随机数>.<新程序_随机数><新程序_随机数>
    凌辱参观

    猜你喜欢

    包含 饿了么 的应用集
    评论
    • 体育生互 Gay2022网站 <新程序_随机数>天前
      西施因为欠债无法偿还而
    • 修修漫漫画官方在线阅读页面免费漫画入口秋蝉 <新程序_随机数>天前
      青娱乐娱乐
    • 人人操影视 <新程序_随机数>天前
      老师的大白兔又软又大好好吃
    • 西施因为欠债无法偿还而 <新程序_随机数>天前
      三上悠亚在线播放
    • 免费久久97精品国产自在现线 <新程序_随机数>天前
      桃红色界下载
    • 孟若羽 最新电影 <新程序_随机数>天前
      六月色婷婷
    • 少妇高潮ZZZZZZZy 2 <新程序_随机数>天前
      爽 好多水 快 深点在欧美
    • 少妇 精69XXXXXx白浆 <新程序_随机数>天前
      翘臀后入动态
    • 女主播玩弄乡下独居老人 <新程序_随机数>天前
      男生和女生一起差差得很痛的app下载
    • 欧美人与禽zozo性伦交的介绍 <新程序_随机数>天前
      裸女软件