英伟达GTC会议来袭!新一代Blackwell GPU架构面世

閱讀時間約 8 分鐘

当地时间周一(3月18日),备受瞩目的英伟达年度GTC会议在加州圣何塞拉开帷幕。

时隔五年,英伟达再次线下举办起了年度GTC会议,故外界对此次大会期待值很高。英伟达方面也没有让大家失望,一次性介绍了多个公司的最新成果。

新一代Blackwell GPU架构

在此次大会上,最引人瞩目的就是英伟达推出的新一代Blackwell GPU架构。

官方介绍称,Blackwell可使全球机构都能够在万亿参数的大语言模型(LLM)上构建和运行实时生成式AI,其成本和能耗较上一代产品降低多达25倍

Blackwell GPU

Blackwell GPU

官方表示,Blackwell GPU架构搭载六项变革性的加速计算技术:

●全球最强大的芯片:Blackwell架构GPU具有2,080亿个晶体管,采用台积电4纳米(nm)工艺制造,通过10TB/s的片间互联,将GPU裸片连接成一块统一的GPU。

●第二代Transformer引擎:得益于全新微张量缩放支持,以及集成于英伟达TensorRT™-LLM和NeMo Megatron框架中的英伟达先进动态范围管理算法,Blackwell将在新型4位浮点AI推理能力下实现算力和模型大小翻倍。

●第五代NVLink:为了提升万亿级参数模型和混合专家AI模型的性能,第五代NVLink为每块GPU提供突破性的1.8TB/s双向吞吐量,确保多达576块GPU之间的无缝高速通信,可以满足当今最复杂LLM的需求。

●RAS引擎:采用Blackwell架构的GPU包含一个用于保障可靠性、可用性和可维护性的专用引擎。此外,Blackwell架构还增加了多项芯片级功能,能够利用AI预防性维护来运行诊断并预测可靠性相关的问题。这将最大程度地延长系统正常运行时间,提高大规模AI部署的弹性,使其能够连续不间断运行数周乃至数月,同时降低运营成本。

●安全AI:先进的机密计算功能可以在不影响性能的情况下保护AI模型和客户数据,并且支持全新本地接口加密协议,这对于医疗、金融服务等高度重视隐私问题的行业至关重要。

●解压缩引擎:专用的解压缩引擎支持最新格式,通过加速数据库查询提供极其强大的数据分析和数据科学性能。未来几年,每年需要企业花费数百亿美元的数据处理将越来越多地由GPU加速。

凭借上述技术,Blackwell能够在拥有高达10万亿参数的模型上实现AI训练和实时LLM推理。英伟达表示,这些技术将助推数据处理、工程模拟、电子设计自动化、计算机辅助药物设计、量子计算和生成式AI等领域实现突破。

超大规模的超级芯片

英伟达还介绍了GB200 Grace Blackwell超级芯片

官方称,该超级芯片是通过900GB/s超低功耗的片间互联,将两个英伟达B200 Tensor Core GPU与Grace CPU相连。

GB200是英伟达GB200 NVL72的关键组件。GB200 NVL72是一套多节点液冷机架级扩展系统,适用于高度计算密集型的工作负载。它将36个GraceBlackwell超级芯片组合在一起,其中包含通过第五代NVLink相互连接的72个Blackwell GPU和36个Grace CPU。

GB200 NVL72规格

GB200 NVL72规格

此外,GB200 NVL72还内置BlueField®-3数据处理器,可在超大规模AI云中实现云网络加速、组合式存储、零信任安全和GPU计算弹性。对于LLM推理工作负载,相较于同样数量的H100,GB200 NVL72最高可提供30倍的性能提升以及多达25倍的成本和能耗降低。

值得一提的是,该平台可作为一个单GPU,具有1.4 exaflops的AI性能和30TB的快速内存,是组成最新一代DGX SuperPOD的基础模块。

已有多家企业“属意”Blackwell架构

英伟达方面透露,其合作伙伴将从今年晚些时候开始供应采用Blackwell架构的产品。

其中,亚马逊的AWS、谷歌云、微软的Azure、甲骨文云基础设施将成为首批提供 Blackwell 驱动实例的云服务提供商

Indosat Ooredoo Hutchinson、Nebius、Nexgen Cloud、Oracle EU Sovereign Cloud、Oracle美国/英国/澳大利亚政府云、新加坡电信等主权AI云也将提供基于Blackwell架构的云服务和基础设施。

GB200 还将通过 NVIDIA DGX™ Cloud 提供,NVIDIA DGX™ Cloud 是一个与领先的云服务提供商共同设计的 AI 平台,可为企业开发人员提供专门的基础设施和软件访问权限,使他们能够构建并部署先进的生成式 AI 模型。AWS、谷歌云和甲骨文云基础设施计划在今年晚些时候托管采用Grace Blackwell的新实例。

此外,思科、戴尔、联想和超微预计将提供基于Blackwell产品打造的各种服务器。永擎电子、华硕、Foxconn、技嘉、和硕等多家企业也将提供基于Blackwell的服务器。

此外,越来越多的软件制造商网络,包括工程仿真领域的全球领导者 Ansys、Cadence 和 Synopsys,将使用基于Blackwell的处理器来加速其用于设计和仿真电气、机械和制造系统及零件的软件。他们的客户可以更低成本、更高能效地使用生成式 AI 和加速计算,来加速产品上市。

生成式AI微服务

在GTC大会期间,英伟达推出数十项企业级生成式AI微服务,企业可以利用这些微服务在自己的平台上创建和部署定制应用,同时保留对知识产权的完整所有权和控制权。

包括Adobe、Cadence、CrowdStrike、Getty Images和SAP在内的诸多领先应用、数据和网络安全平台提供商已经率先使用了英伟达AI Enterprise 5.0中提供的这些全新生成式AI微服务。

英伟达创始人兼首席执行官黄仁勋表示:“成熟的企业平台坐拥数据金矿,这些数据可以转化为生成式AI助手。我们与合作伙伴生态系统一起创建的这些容器化AI微服务,是各行业企业成为AI公司的基石。”

生成式AI微服务

生成式AI微服务

NIM微服务提供基于英伟达推理软件的预构建容器,可以使开发者能够将部署时间从几周缩短至几分钟。它们为语言、语音和药物发现等领域提供行业标准API,使开发者能够使用安全托管在自己的基础设施中的专有数据,来快速构建AI应用。

NIM微服务将为谷歌、Meta、微软等多家企业的开放模型提供了快速且性能出色的生产级AI容器。

此外,为了加快AI采用,企业还可以使用CUDA-X微服务,包括用于定制语音和翻译AI的Riva、用于路由优化的cuOpt™,以及用于高分辨率气候和天气模拟的Earth-2。

英伟达表示,更多用于定制模型开发的NVIDIA NeMo™ 微服务即将陆续发布,其中包括构建用于训练和检索的简洁数据集的NeMo Curator、用于利用特定领域数据微调LLM的NeMo Customizer、用于分析 AI 模型性能的NeMo Evaluator 以及用于LLM的NeMo Guardrails。

人形机器人通用基础模型——Project GR00T

在GTC上,英伟达发布了人形机器人通用基础模型Project GR00T,为大家展示了其在机器人和具身智能方面的突破。

据官方介绍,GR00T驱动的机器人将能够理解自然语言,并通过观察人类行为来模仿动作——快速学习协调、灵活性和其它技能,以便导航、适应现实世界并与之互动。

Project GR00T

Project GR00T

英伟达还发布了一款基于Thor系统级芯片(SoC)的新型人形机器人计算机Jetson Thor

该SoC包括一个带有transformer engine的下一代GPU,其采用Blackwell架构,可提供每秒800万亿次8位浮点运算AI性能,以运行GR00T等多模态生成 AI模型。凭借集成的功能安全处理器、高性能CPU集群和100GB以太网带宽,大大简化了设计和集成工作。

英伟达透露,其正在为领先的人形机器人公司开发一个综合的AI平台,如1X Technologies、Agility Robotics、波士顿动力公司、Figure AI、宇树科技等。

此外,英伟达对Isaac机器人平台也进行了重大升级。GR00T使用的Isaac工具还能够为在任何环境中的任何机器人创建新的基础模型。这些工具包括用于强化学习的Isaac Lab和用于计算编排服务的 OSMO。不过,新的Isaac平台功能要到下个季度才会推出。

#英伟达##英伟达芯片##人工智能##AI#

    avatar-img
    1會員
    197內容數
    留言0
    查看全部
    avatar-img
    發表第一個留言支持創作者!
    TommyChueng的沙龍 的其他內容
    当地时间3月16日,谷歌DeepMind宣布推出“可扩展、可指导、多世界”的全新AI系统SIMA(Scalable Instructable Multiworld Agent),号称其是首个可以在广泛的3D虚拟环境和视频游戏中遵循自然语言指令的通用AI智能体。 据介绍,SIMA是一款训练、学习游戏
    当地时间周三(3月13日),特斯拉股价下跌4.54%,至169.48美元,触及2024年新低,也是2023年5月以来的低点。
    3月13日,据媒体透露,有消费者反映,自己在元旦前选购的极氪007车型,在过完春节后却遇到了无法交付的问题。并且,该消费者所支付的5,000元定金也被极氪工作人员明确表示“不予退还”。
    3月12日,千呼万唤始出来,雷军在微博宣布,“3月28日,小米SU7正式发布,这是我们的三年之约。”小米汽车官方微博则称,上市即交付,交付即上量。
    当地时间3月7日,新加坡国会通过了《金融机构(杂项修正案)法案》(FIMA法案),赋予新加坡金管局(MAS)对金融业更为广泛的调查和监管权力。
    3月11日,日本内阁府公布了2023年第四季度实际GDP年化季环比终值,该数据录得0.4%,大幅低于预期的1.1%,但较初期公布的-0.4%大幅上修。日本也凭借该数据,暂时摆脱了技术性衰退。
    当地时间3月16日,谷歌DeepMind宣布推出“可扩展、可指导、多世界”的全新AI系统SIMA(Scalable Instructable Multiworld Agent),号称其是首个可以在广泛的3D虚拟环境和视频游戏中遵循自然语言指令的通用AI智能体。 据介绍,SIMA是一款训练、学习游戏
    当地时间周三(3月13日),特斯拉股价下跌4.54%,至169.48美元,触及2024年新低,也是2023年5月以来的低点。
    3月13日,据媒体透露,有消费者反映,自己在元旦前选购的极氪007车型,在过完春节后却遇到了无法交付的问题。并且,该消费者所支付的5,000元定金也被极氪工作人员明确表示“不予退还”。
    3月12日,千呼万唤始出来,雷军在微博宣布,“3月28日,小米SU7正式发布,这是我们的三年之约。”小米汽车官方微博则称,上市即交付,交付即上量。
    当地时间3月7日,新加坡国会通过了《金融机构(杂项修正案)法案》(FIMA法案),赋予新加坡金管局(MAS)对金融业更为广泛的调查和监管权力。
    3月11日,日本内阁府公布了2023年第四季度实际GDP年化季环比终值,该数据录得0.4%,大幅低于预期的1.1%,但较初期公布的-0.4%大幅上修。日本也凭借该数据,暂时摆脱了技术性衰退。
    你可能也想看
    Google News 追蹤
    8月6日,英伟达(NVDA)股价反弹3.8%,收于104.25美元,之前因Blackwell AI芯片延迟传闻与经济衰退担忧,导致股价在前一日大跌。截至发稿,英伟达股价今年已上涨103%,超过标普500指数和纳斯达克指数。 公司方面称,Blackwell芯片已开始取样,生产进度如期,预计将在下半年
    【0730盤前重點新聞】 *超級財報+超級央行週 四大指數漲跌互現 *Blackwell問世在即 輝達大砍高端GPU產能50% *半導體需求旺景氣大噴發 睽違兩年半6月亮紅燈 *台積電埃米製程拚台美連線 A16預定2026年量產
    Nvidia收123.54美元上揚4.76%,根據路透社22日獨家報導Nvidia正在開發新一代「Blackwell」AI晶片的中國版本,目前暫時定名為「B20」,將完全符合美國目前的出口管制規定,在利多消息刺激下Nvidia止跌上漲,帶動科技類股反攻,SOX大漲4%...
    Thumbnail
    NVIDIA的新目標是成為支援企業開發AI應用程式的「AI晶圓代工」,提供技術、專業知識和基礎設施,幫助實現AI應用。具體而言,NVIDIA將提供GPU、自主CPU「Grace」、超級計算機及其硬體,還有軟體和工具,以滿足客戶需求。
    Thumbnail
    隨著人工智慧技術的快速發展,生成式AI(Generative AI)時代已經來臨。在台北國際電腦展(Computex)上,NVIDIA創辦人暨執行長黃仁勳正式發布了新一代Blackwell GPU架構,標誌著這個新紀元的到來。
    在今年的COMPUTEX展前演講中,Nvidia的首席執行官黃仁勳宣布了一個令人震驚的消息:Nvidia將從2025年開始每年更新其AI芯片。這一舉動無疑預示著一場新的工業革命正式拉開了序幕。
    Thumbnail
    NVIDIA在人工智慧處理專用GPU領域的地位牢固,但面臨著來自英特爾和超微半導體等競爭對手的反擊。新興企業也加入競爭,使得競爭更加激烈。未來,合作關係將變得至關重要,NVIDIA和其他競爭對手在激烈的競爭中脫穎而出的關鍵。
    Thumbnail
    2024 年3月19日至22日,由Nvidia 黃仁勳主導的GTC 技術大會在美國聖荷西舉行。這次大會以「加速未來」為主題,展示了人工智慧、深度學習、自動駕駛汽車和全新 Blackwell 架構的最新突破。本次發表會揭示了多項創新,對教育科技領域帶來了前所未有的機會和挑戰。
    Thumbnail
    NVIDIA的Blackwell計算平台代表著實時生成式AI應用的重大進步,旨在滿足跨行業挑戰。此平台提升了計算效能,促進了AI在實體世界的應用,並對從自動駕駛到醫療診斷等多個領域產生了深遠影響。NVIDIA 黃仁勳的願景是將AI技術從虛擬世界帶入現實,為創新開闢新道路,一個更加智慧和互聯的未來。
    Thumbnail
    NVIDIA 18日於美股盤後舉行的「GPU Technology Conference」發表旗艦型AI晶片「Blackwell B200」,但19日早盤其股價卻下挫將近4%,收盤上漲1.7%,由於新的晶片具有更高效能,更低的耗能,其對手AMD股價受到衝擊下挫4.86%...
    8月6日,英伟达(NVDA)股价反弹3.8%,收于104.25美元,之前因Blackwell AI芯片延迟传闻与经济衰退担忧,导致股价在前一日大跌。截至发稿,英伟达股价今年已上涨103%,超过标普500指数和纳斯达克指数。 公司方面称,Blackwell芯片已开始取样,生产进度如期,预计将在下半年
    【0730盤前重點新聞】 *超級財報+超級央行週 四大指數漲跌互現 *Blackwell問世在即 輝達大砍高端GPU產能50% *半導體需求旺景氣大噴發 睽違兩年半6月亮紅燈 *台積電埃米製程拚台美連線 A16預定2026年量產
    Nvidia收123.54美元上揚4.76%,根據路透社22日獨家報導Nvidia正在開發新一代「Blackwell」AI晶片的中國版本,目前暫時定名為「B20」,將完全符合美國目前的出口管制規定,在利多消息刺激下Nvidia止跌上漲,帶動科技類股反攻,SOX大漲4%...
    Thumbnail
    NVIDIA的新目標是成為支援企業開發AI應用程式的「AI晶圓代工」,提供技術、專業知識和基礎設施,幫助實現AI應用。具體而言,NVIDIA將提供GPU、自主CPU「Grace」、超級計算機及其硬體,還有軟體和工具,以滿足客戶需求。
    Thumbnail
    隨著人工智慧技術的快速發展,生成式AI(Generative AI)時代已經來臨。在台北國際電腦展(Computex)上,NVIDIA創辦人暨執行長黃仁勳正式發布了新一代Blackwell GPU架構,標誌著這個新紀元的到來。
    在今年的COMPUTEX展前演講中,Nvidia的首席執行官黃仁勳宣布了一個令人震驚的消息:Nvidia將從2025年開始每年更新其AI芯片。這一舉動無疑預示著一場新的工業革命正式拉開了序幕。
    Thumbnail
    NVIDIA在人工智慧處理專用GPU領域的地位牢固,但面臨著來自英特爾和超微半導體等競爭對手的反擊。新興企業也加入競爭,使得競爭更加激烈。未來,合作關係將變得至關重要,NVIDIA和其他競爭對手在激烈的競爭中脫穎而出的關鍵。
    Thumbnail
    2024 年3月19日至22日,由Nvidia 黃仁勳主導的GTC 技術大會在美國聖荷西舉行。這次大會以「加速未來」為主題,展示了人工智慧、深度學習、自動駕駛汽車和全新 Blackwell 架構的最新突破。本次發表會揭示了多項創新,對教育科技領域帶來了前所未有的機會和挑戰。
    Thumbnail
    NVIDIA的Blackwell計算平台代表著實時生成式AI應用的重大進步,旨在滿足跨行業挑戰。此平台提升了計算效能,促進了AI在實體世界的應用,並對從自動駕駛到醫療診斷等多個領域產生了深遠影響。NVIDIA 黃仁勳的願景是將AI技術從虛擬世界帶入現實,為創新開闢新道路,一個更加智慧和互聯的未來。
    Thumbnail
    NVIDIA 18日於美股盤後舉行的「GPU Technology Conference」發表旗艦型AI晶片「Blackwell B200」,但19日早盤其股價卻下挫將近4%,收盤上漲1.7%,由於新的晶片具有更高效能,更低的耗能,其對手AMD股價受到衝擊下挫4.86%...