Nvidia計劃明年推出更強大的AI超級晶片,以滿足大型AI模型需求

隨著對運行大型AI模型的需求持續增加,目前已經是高端AI處理器市場領導者的Nvidia,宣布了其GH200 Grace Hopper  超級晶片將計畫在明年推出,該晶片旨在滿足運行大型AI模型所需的龐大計算需求,他們計劃透過GH200超級晶片在AI領域有更進一步的影響力。

Nvidia計劃明年推出更強大的AI超級晶片,以滿足大型AI模型需求

GH200 Grace Hopper超級晶片

隨著對運行大型AI模型的需求持續增加,目前已經是高端AI處理器市場領導者的Nvidia,宣布其GH200 Grace Hopper  超級晶片將計畫在明年推出,該晶片旨在滿足運行大型AI模型所需的龐大計算需求,他們計劃透過GH200超級晶片在AI領域有更進一步的影響力,Nvidia宣稱該晶片能夠處理最複雜的生成式AI工作負載,包括大型語言模型、推薦系統和向量數據庫。

(image: Nvidia)

該晶片提供多種不同的配置,其中包括雙配置,其內存容量較前一代產品提高3.5倍,帶寬也增加了3倍。其中一個單一服務器搭載了144個Arm Neoverse核心,提供了高達8千億次的AI性能,同時搭載最新的282GB HBM3e內存技術。

NVIDIA創始人兼首席執行官黃仁勳表示:“為了滿足生成式AI的不斷增長需求,數據中心需要專為此需求設計。”他指出:“全新的GH200 Grace Hopper Superchip通過卓越的內存技術和帶寬提升,提高了吞吐量,實現了將GPU聯接在一起以合併性能,並且採用了易於在整個數據中心部署的服務器設計。”

Grace Hopper Superchip可以通過NVIDIA NVLink™技術與其他Superchip連接,使它們能夠共同運行,以支持部署生成式AI所需的大型模型。這種高速和協同作業的技術使GPU能夠完全訪問CPU內存。在雙配置模式下,這一技術能夠提供總計1.2TB的快速內存。

而HBM3e內存速度比當前的HBM3提升了50%,總計提供10TB/秒的綜合帶寬。這使得新平台能夠運行比上一代大3.5倍的模型,並通過3倍更快的內存帶寬實現更高的性能。

NVIDIA的Grace Hopper Superchip得到了廣泛的應用,一些領先的製造商已經推出了Grace Hopper Superchip的系統。為了推動技術的廣泛應用,搭載HBM3e的下一代Grace Hopper 超級晶片與早些時候在COMPUTEX上發布的NVIDIA MGX™服務器規格完全兼容。通過MGX,任何系統製造商都可以迅速且具有成本效益地將Grace Hopper添加到超過100種不同的服務器變體中。

GH200將採用與H100相同的GPU,H100是Nvidia當前最強大且最受歡迎的AI產品。不過,GH200將具備三倍的內存容量。據Nvidia透露,搭載GH200的系統將在2024年第二季度開始上市。儘管Nvidia並未透露GH200的具體價格,但目前H100系列的售價約為40,000美元。

AI晶片龍頭的競爭

Nvidia正面臨來自競爭對手AMD的不斷增強的競爭壓力,隨著AMD計劃在今年第四季度擴大自家AI GPU的生產,AI硬件技術領域將進一步受到推動和創新。儘管Nvidia在市場中享有明顯的領先地位,但AMD的強大競爭力不容忽視。AMD不僅推出了具有優越記憶體和浮點運算能力的MI300企業級GPU系列,還在AMD資料中心與AI首映會上宣布了AMD Instinct平台,提供客戶快速部署需求。與此同時,Nvidia則展示了其創新能力,通過Grace Hopper Superchip的推出,結合了Grace架構CPU和Hopper架構的H100 GPU,提供高效的算力和節能特性。隨著兩家公司的競爭不斷升級,AI硬件技術將迎來更多的發展和突破。

Read more

Meta Connect 2025:六大重磅發布震撼科技界,智慧眼鏡革命正式開啟

Meta Connect 2025:六大重磅發布震撼科技界,智慧眼鏡革命正式開啟

Meta於2025年9月17-18日舉辦的年度開發者大會Meta Connect 2025,這場被譽為「智慧眼鏡元年」的科技盛會帶來了前所未有的創新突破。CEO馬克·祖克柏(Mark Zuckerberg)在活動中發布了六項重大產品更新,其中最受矚目的Meta Ray-Ban Display智慧眼鏡搭載革命性顯示技術和神經腕帶控制系統,標誌著穿戴式運算正式進入新紀元。這次發布會不僅展現了Meta在AI和穿戴科技領域的深厚實力,更為整個智慧眼鏡產業的未來發展指明了方向。

【AI 工具地圖】免費快速考取 Google Gemini Certified Educator 證照指南

【AI 工具地圖】免費快速考取 Google Gemini Certified Educator 證照指南

想在最短時間內獲得一張 Google 官方免費 AI 證照嗎?「Gemini Certified Educator」正是近期最熱門的選擇!這是一張專為教育者與學習者設計的 AI 能力認證,只要完成 37 題不限時的選擇題,就能立刻拿到有效期三年的電子證書,還能放到 LinkedIn 為履歷加分。考試重點涵蓋 Gemini 與 NotebookLM 的操作方法、Prompt 輸入技巧、AI 幻覺與偏見的判斷,即使你不是老師,也能透過這張證照展現專業的 AI 應用能力。本文將帶你完整解析:為什麼值得考?考什麼?如何準備?並附上報名流程,一篇搞懂,週末就能輕鬆拿到。

lock-1
全球第一位「AI 官員」上任,阿爾巴尼亞任命 AI 為內閣

全球第一位「AI 官員」上任,阿爾巴尼亞任命 AI 為內閣

從 AI 官員到語音翻譯,AI 這週正式「入職」現實世界。 阿爾巴尼亞任命全球首位 AI 部長,開啟政府決策新實驗;Google Meet 推出 2 秒內完成的即時語音翻譯,打破語言隔閡;Claude 則正式變身職場助理,能幫你轉檔寫簡報;而在內容世界,AI 播客工廠每週量產 3,000 集節目,一集成本不到 1 美元。 但這波 AI 熱潮是否過熱?OpenAI 董事長 Bret Taylor 坦言「泡沫存在,但這沒關係」,因為創造力會留下來──這週的新聞,也讓我們看見 AI 正從實驗室,跨出螢幕,成為真正的社會角色。

lock-1