【AI推論】超越地表最強超級電腦 24倍,Google Ironwood宣告AI推論革命來臨!

更新於 發佈於 閱讀時間約 3 分鐘
raw-image

Google Pathways 架構擴展數十萬晶片,AI 雲端競爭進入新局

撰文/科技產業評論組


AI晶片戰場再添強兵。Google在美國拉斯維加斯舉辦的Cloud Next 25大會上,正式發表第七代 TPU(Tensor Processing Unit)Ironwood。不同於過去以訓練為導向的設計,Ironwood是 Google首款專為AI推論(Inference)打造的處理器,其性能不僅遠超過前代,更是全球最強超級電腦 El Capitan的24倍,象徵AI應用邁入推論主導的下一階段。


AI 運算焦點轉向推論,Ironwood搶占制高點

自2018年推出第一代 Cloud TPU 以來,Google 致力於優化大模型(LLM)的訓練能力。但隨著生成式AI滲透各行各業,推論(Inference),即讓模型在實際應用中快速、精準地作出回應,成為新一波競爭焦點。


Ironwood正是為此時代轉變而生。單顆晶片提供高達4,614 TFLOPS的浮點運算能力,支援日益複雜的推理任務,例如邏輯分析、數學解題,甚至初具「思考能力」的推理模型。Google副總裁 Amin Vahdat明言:「如今AI推論的重要性,已經超越訓練。」


效能、節能雙突破,為雲端大規模部署而生

除了純效能,Ironwood最令人矚目的,是其能效比與可擴展性。相較前一代Trillium,Ironwood 每瓦運算效能提升兩倍,並採用先進液冷技術,有效控制熱能,維持高效輸出。對日益面臨能源壓力的資料中心來說,這項升級無異於雪中送炭。


記憶體也大幅進化。192GB的高頻寬記憶體(HBM),搭配7.2Tbps的資料傳輸速度,幾乎為前代的6倍與4.5倍,讓模型運行更流暢,減少資料瓶頸。而晶片間的雙向傳輸頻寬也提升至 1.2Tbps,支撐起大規模分散式訓練與推論所需的即時協作。


支援超大規模模型,打造雲端推論「超級引擎」

Ironwood提供256顆與9,216顆兩種規模配置。當擴展至最大規模,每個Pod可達42.5 exaFLOPS,不僅超越所有現有超級電腦,也使 Google Cloud成為能支撐下一代LLM、混和專家模型(MoE)與推理模型的理想平台。

更重要的是,Google DeepMind開發的 Pathways架構,讓多個Ironwood Pod串聯運作,可擴充至數十萬顆TPU組合運作,突破單一晶片組限制,為企業與研究機構開啟規模化AI應用的大門。


競爭態勢升溫,雲端巨頭各擁武器

Ironwood橫空出世之際,AI晶片市場早已群雄逐鹿。NVIDIA憑藉 H100/H200 系列持續主導市場,AWS有自研Trainium / Inferentia晶片,Microsoft則投入Azure Maia / Cobalt晶片開發。Ironwood的推出,不僅是技術升級,更是 Google Cloud在雲端AI基礎建設戰場的再一次布局。

raw-image

在DeepSeek等推理型AI模型快速崛起之後,AI 生態系正快速由「生成」走向「理解」與「推理」。Ironwood 不只是新一代晶片,更是 Google 對 AI 演進方向的回應與押注。


專注於國際趨勢、科技產業和投資心法的文章評論及分析
留言
avatar-img
留言分享你的想法!
2024 年,AI伺服器需求爆發,資料中心運算能耗飆升,散熱技術成為產業決勝點! 在這場戰爭中,台灣散熱大廠 雙鴻(Auras) 究竟如何搶佔市場?從最新的2024年地區別營收與非流動資產數據來看,雙鴻的全球布局正展開一場擴張戰! 中國市場穩居龍頭,美國市場狂飆 5 倍成長! 從2024年(
隨著人工智慧(AI)運算需求大增,全球伺服器市場迎來新一輪的成長浪潮,帶動高階散熱技術成為不可或缺的核心環節。 台灣的奇鋐科技(AVC)與子公司富世達(Fositek)作為全球散熱供應鏈的重要成員,正透過積極的產能擴張與市場佈局,在這場變革中搶占先機。 從最新的財報數據來看,奇鋐與富世達不僅營收
King Slide(川湖,2059)2024年營收突破百億新台幣,年增 75.7%,其中美國市場營收翻倍成長至47.03億新台幣,成為最大貢獻區域,而台灣與中國市場同步增長,顯示全球伺服器需求帶動全面擴張。 美國市場躍升龍頭,營收翻倍增長
2024 年,AI伺服器需求爆發,資料中心運算能耗飆升,散熱技術成為產業決勝點! 在這場戰爭中,台灣散熱大廠 雙鴻(Auras) 究竟如何搶佔市場?從最新的2024年地區別營收與非流動資產數據來看,雙鴻的全球布局正展開一場擴張戰! 中國市場穩居龍頭,美國市場狂飆 5 倍成長! 從2024年(
隨著人工智慧(AI)運算需求大增,全球伺服器市場迎來新一輪的成長浪潮,帶動高階散熱技術成為不可或缺的核心環節。 台灣的奇鋐科技(AVC)與子公司富世達(Fositek)作為全球散熱供應鏈的重要成員,正透過積極的產能擴張與市場佈局,在這場變革中搶占先機。 從最新的財報數據來看,奇鋐與富世達不僅營收
King Slide(川湖,2059)2024年營收突破百億新台幣,年增 75.7%,其中美國市場營收翻倍成長至47.03億新台幣,成為最大貢獻區域,而台灣與中國市場同步增長,顯示全球伺服器需求帶動全面擴張。 美國市場躍升龍頭,營收翻倍增長
你可能也想看
Google News 追蹤
Thumbnail
【vocus 精選投資理財/金融類沙龍,輸入 "moneyback" 年訂閱 9 折】 市場動盪時,加碼永遠值得的投資標的——「自己」 川普政府再度拋出關稅震撼彈,全球市場應聲重挫,從散戶到專業投資人,都急著找尋買進殺出的訊號,就是現在,輪到知識進場!把握時機讓自己升級,別放過反彈的機會!
Thumbnail
就能get 同款 韓系質感包👜 而且獨家下殺 299元up 讓它成為你的 必備單品吧! - momo優惠折扣碼 領取超簡單❤️ 點擊右下角 會員中心 - 折價券 輸入 FLOWERMOMO 點擊歸戶 就能領取 商店優惠券 啦! - https://momo.dm/RaFNzR
Thumbnail
momo店+ S999純銀四葉草項鍊,精緻細膩,代表愛情、希望、信念與幸運,是送給自己或別人的完美禮物。限時下殺299元起,超取免運!
Thumbnail
時間快轉至2030年,或許城市還無懸浮飛車,但AI先會像電力存在每一個角落。百工百業運用智慧算力,就像打開水龍頭一樣容易。這描述並非Cyberpunk科幻場景,正逐漸在世界各地悄然成形。
Thumbnail
科技巨擘聯手推進生成式AI發展 開創人工智慧新時代 在生成式人工智慧(Generative AI)的浪潮中,雲端運算龍頭AWS和晶片巨擘NVIDIA攜手合作,推出一系列革命性的基礎設施、軟體和服務。
Thumbnail
在科技發展的浪潮中,生成式AI無疑是引領未來的關鍵力量。透過深度學習技術,AI系統能夠從大量資料中發掘規律,並創造出全新的內容,無論是文字、圖像、音頻還是視頻,都可以在AI的加持下重新定義。
Thumbnail
根據高盛最近的研究報告,未來的個人電腦和移動設備將搭載更多由AI增強後的應用程式,如AI增強、安全性提升和運算能力強化。 消費性電子股票組合<GSXUPCAI>也顯示出潛力,並列出了成分股以及其權重。
Thumbnail
NVIDIA 黃仁勳 - AI人工智慧時代如何帶動全球新產業革命(個人紀錄用) 🇺🇸Omniverse 就是未來集大成,而加速運算、人工智慧就是兩個最重要的技術核心 🇺🇸CPU效能的擴充速度正在大幅降低,提出「運算通膨」概念
Thumbnail
AI PC 硬體 + AI OS + AI PC 摘要
Thumbnail
筆記-股癌-24.05.22 *認養狗可以聯絡Liza的IG。 *微軟AI PC: - 售價1000歐元起的AI PC,6/18推出,晶片NPU算力在40 TOPS以上, - 裝置有連動GPT-4o,這部分的功能還是要連上網;Copilot功能下放到邊緣端。 - recall功能,可以把螢
Thumbnail
電電公會:拚AI 要解決供電問題 Google論文搜尋引擎|論文深造的影響力 2024 GenAI不斷的刺激各種層面的應用,有發現生活中有什麼實質現況正……腦力激盪……
Thumbnail
【vocus 精選投資理財/金融類沙龍,輸入 "moneyback" 年訂閱 9 折】 市場動盪時,加碼永遠值得的投資標的——「自己」 川普政府再度拋出關稅震撼彈,全球市場應聲重挫,從散戶到專業投資人,都急著找尋買進殺出的訊號,就是現在,輪到知識進場!把握時機讓自己升級,別放過反彈的機會!
Thumbnail
就能get 同款 韓系質感包👜 而且獨家下殺 299元up 讓它成為你的 必備單品吧! - momo優惠折扣碼 領取超簡單❤️ 點擊右下角 會員中心 - 折價券 輸入 FLOWERMOMO 點擊歸戶 就能領取 商店優惠券 啦! - https://momo.dm/RaFNzR
Thumbnail
momo店+ S999純銀四葉草項鍊,精緻細膩,代表愛情、希望、信念與幸運,是送給自己或別人的完美禮物。限時下殺299元起,超取免運!
Thumbnail
時間快轉至2030年,或許城市還無懸浮飛車,但AI先會像電力存在每一個角落。百工百業運用智慧算力,就像打開水龍頭一樣容易。這描述並非Cyberpunk科幻場景,正逐漸在世界各地悄然成形。
Thumbnail
科技巨擘聯手推進生成式AI發展 開創人工智慧新時代 在生成式人工智慧(Generative AI)的浪潮中,雲端運算龍頭AWS和晶片巨擘NVIDIA攜手合作,推出一系列革命性的基礎設施、軟體和服務。
Thumbnail
在科技發展的浪潮中,生成式AI無疑是引領未來的關鍵力量。透過深度學習技術,AI系統能夠從大量資料中發掘規律,並創造出全新的內容,無論是文字、圖像、音頻還是視頻,都可以在AI的加持下重新定義。
Thumbnail
根據高盛最近的研究報告,未來的個人電腦和移動設備將搭載更多由AI增強後的應用程式,如AI增強、安全性提升和運算能力強化。 消費性電子股票組合<GSXUPCAI>也顯示出潛力,並列出了成分股以及其權重。
Thumbnail
NVIDIA 黃仁勳 - AI人工智慧時代如何帶動全球新產業革命(個人紀錄用) 🇺🇸Omniverse 就是未來集大成,而加速運算、人工智慧就是兩個最重要的技術核心 🇺🇸CPU效能的擴充速度正在大幅降低,提出「運算通膨」概念
Thumbnail
AI PC 硬體 + AI OS + AI PC 摘要
Thumbnail
筆記-股癌-24.05.22 *認養狗可以聯絡Liza的IG。 *微軟AI PC: - 售價1000歐元起的AI PC,6/18推出,晶片NPU算力在40 TOPS以上, - 裝置有連動GPT-4o,這部分的功能還是要連上網;Copilot功能下放到邊緣端。 - recall功能,可以把螢
Thumbnail
電電公會:拚AI 要解決供電問題 Google論文搜尋引擎|論文深造的影響力 2024 GenAI不斷的刺激各種層面的應用,有發現生活中有什麼實質現況正……腦力激盪……