RTX 4090、 RTX 5090、H200 等硬體對這些「浮點數格式」的支援程度?

更新 發佈閱讀 3 分鐘

以下是針對RTX 4090、 RTX 5090、H200這三張卡的支援程度詳細對比:

硬體支援度規格表

vocus|新世代的創作平台

🚀詳細分析

1. NVIDIA H200:AI 算力的天花板

H200 是專為數據中心設計的「怪獸」,它是第一款大規模推廣 FP8 訓練 的硬體。

  • 優勢:擁有極大的 HBM3e 記憶體頻寬,這使得它在處理 FP8 這種需要大量數據交換的格式時,不會遇到瓶頸。
  • 定位:用於訓練萬億級參數的 LLM(如 GPT-4 級別)。

2. RTX 5090:消費級的 AI 新王者

相較於 4090,5090 最強大的地方在於引入了 Blackwell 架構 的第五代 Tensor Core。

  • FP8 的進階:5090 搭載了「第二代 Transformer Engine」,這讓它在跑 FP8 時的效率比 4090 高出許多。
  • 新增 FP4 支援:這是 5090 的殺手鐧。FP4 允許模型在極低的記憶體占用下運行。例如:原本需要 24GB 顯存的模型,透過 FP4 量化後,可能只需要不到 10GB 就能跑,這對本地跑 AI 繪圖(如 Flux.1)或 LLM 非常有利。
  • 顯存升級:32GB 的 GDDR7 讓它能容納更大的 FP16/FP8 模型。

3. RTX 4090:依然強悍,但有時代隔閡

4090 雖然也支援 FP8,但它是 Ada Lovelace 架構的第一代嘗試。

  • 限制:在某些 AI 框架中,4090 的 FP8 效能並沒有比 FP16 快到兩倍(通常只有 1.2~1.5 倍),因為其硬體單元對於 FP8 的累積計算(Accumulation)仍有頻寬限制。
  • 現況:目前大多數開源 AI 專案(如 Stable Diffusion, Llama 3)在 4090 上仍以 BF16 為主。

🎯選擇建議

  • 如果要開發/精調大型模型:H200 是唯一首選,因為顯存容量(141GB)決定了模型的規模,這不是遊戲卡能比擬的。
  • 如果要在本地跑最強的推理(Inference):RTX 5090 的 FP4 支援將會是未來的標準,能讓您在電腦上跑動以前跑不動的巨型模型。
  • 如果預算有限且只做一般開發:RTX 4090 在 FP16/BF16 上的表現依然是目前(2025年以前)的業界標竿,CP 值仍然很高。



留言
avatar-img
sirius數字沙龍
16會員
405內容數
吃自助火鍋啦!不要客氣,想吃啥,請自行取用!
sirius數字沙龍的其他內容
2026/03/02
AI 在訓練時,**浮點數格式(Floating Point Format)**決定了: 權重(weights)如何儲存 梯度(gradients)如何計算 訓練速度 VRAM 需求 數值穩定性
Thumbnail
2026/03/02
AI 在訓練時,**浮點數格式(Floating Point Format)**決定了: 權重(weights)如何儲存 梯度(gradients)如何計算 訓練速度 VRAM 需求 數值穩定性
Thumbnail
2026/03/01
設計一套專門為武俠小說微調(LoRA)設計的資料格式, 比如: 唐玄宗開元年間 絲路 / 祆教 / 波斯密使 軋犖山(安祿山) 華山派、公孫嫣 宗教與權謀交織 我們目標不是普通小說生成,而是: 🎯 訓練出「懂世界觀、會寫武功、能操控角色」的武俠模型
Thumbnail
2026/03/01
設計一套專門為武俠小說微調(LoRA)設計的資料格式, 比如: 唐玄宗開元年間 絲路 / 祆教 / 波斯密使 軋犖山(安祿山) 華山派、公孫嫣 宗教與權謀交織 我們目標不是普通小說生成,而是: 🎯 訓練出「懂世界觀、會寫武功、能操控角色」的武俠模型
Thumbnail
2026/03/01
在家用 GPU(例如 RTX 3060 / 4070 / 4090) 是可以訓練「小型 LLM」的 —— 但要方法正確。 我給你一個完整可執行流程圖。 🎯 先講現實 ❌ 你做不到的 從零訓練 7B 模型 用幾 TB 數據做 pretraining
Thumbnail
2026/03/01
在家用 GPU(例如 RTX 3060 / 4070 / 4090) 是可以訓練「小型 LLM」的 —— 但要方法正確。 我給你一個完整可執行流程圖。 🎯 先講現實 ❌ 你做不到的 從零訓練 7B 模型 用幾 TB 數據做 pretraining
Thumbnail
看更多
你可能也想看
Thumbnail
5 月將於臺北表演藝術中心映演的「2026 北藝嚴選」《海妲・蓋柏樂》,由臺灣劇團「晃晃跨幅町」製作,本文將以從舞台符號、聲音與表演調度切入,討論海妲・蓋柏樂在父權社會結構下的困境,並結合榮格心理學與馮.法蘭茲對「阿尼姆斯」與「永恆少年」原型的分析,理解女人何以走向精神性的操控、毀滅與死亡。
Thumbnail
5 月將於臺北表演藝術中心映演的「2026 北藝嚴選」《海妲・蓋柏樂》,由臺灣劇團「晃晃跨幅町」製作,本文將以從舞台符號、聲音與表演調度切入,討論海妲・蓋柏樂在父權社會結構下的困境,並結合榮格心理學與馮.法蘭茲對「阿尼姆斯」與「永恆少年」原型的分析,理解女人何以走向精神性的操控、毀滅與死亡。
Thumbnail
最近市場開始流傳一個訊號—— 輝達(NVIDIA)H200 對中國的出口限制,可能出現「鬆動空間」。 更關鍵的是,傳出中國方面並非全面開放,而是「有條件」同意採購, 而第一時間被點名的,正是—— 阿里巴巴、騰訊合計搶訂約 40 萬顆晶片。 這個數字一出,市場立刻有反應。 因為大家都很清楚,
Thumbnail
最近市場開始流傳一個訊號—— 輝達(NVIDIA)H200 對中國的出口限制,可能出現「鬆動空間」。 更關鍵的是,傳出中國方面並非全面開放,而是「有條件」同意採購, 而第一時間被點名的,正是—— 阿里巴巴、騰訊合計搶訂約 40 萬顆晶片。 這個數字一出,市場立刻有反應。 因為大家都很清楚,
Thumbnail
在川普政府的特殊條件下,輝達(NVIDIA)獲得許可向中國出口高效能 AI 晶片 H200。此舉伴隨 25% 的出口附加費和嚴苛審查。文章探討此政策可能面臨的北京與美國國會的阻礙,並分析 NVIDIA 如何透過分流現有庫存、轉向預付款等方法來確保這筆高達 50 億美元的營收「安全落袋」。
Thumbnail
在川普政府的特殊條件下,輝達(NVIDIA)獲得許可向中國出口高效能 AI 晶片 H200。此舉伴隨 25% 的出口附加費和嚴苛審查。文章探討此政策可能面臨的北京與美國國會的阻礙,並分析 NVIDIA 如何透過分流現有庫存、轉向預付款等方法來確保這筆高達 50 億美元的營收「安全落袋」。
Thumbnail
美國突發「投毒」解禁 H200,中芯國際慘遭血洗!這不僅是科技戰變局,更是你財富重分配的機會。IMF 急發警告:房市雷區未除,但聰明錢正瘋狂搶籌「這家巨頭」。別再死守貶值資產,看懂這篇筆記的深度博弈,q提醒大家如何在經濟廢墟中挖出真黃金!
Thumbnail
美國突發「投毒」解禁 H200,中芯國際慘遭血洗!這不僅是科技戰變局,更是你財富重分配的機會。IMF 急發警告:房市雷區未除,但聰明錢正瘋狂搶籌「這家巨頭」。別再死守貶值資產,看懂這篇筆記的深度博弈,q提醒大家如何在經濟廢墟中挖出真黃金!
Thumbnail
本文分析導演巴里・柯斯基(Barrie Kosky)如何運用極簡的舞臺配置,將布萊希特(Bertolt Brecht)的「疏離效果」轉化為視覺奇觀與黑色幽默,探討《三便士歌劇》在當代劇場中的新詮釋,並藉由舞臺、燈光、服裝、音樂等多方面,分析該作如何在保留批判核心的同時,觸及觀眾的觀看位置與人性幽微。
Thumbnail
本文分析導演巴里・柯斯基(Barrie Kosky)如何運用極簡的舞臺配置,將布萊希特(Bertolt Brecht)的「疏離效果」轉化為視覺奇觀與黑色幽默,探討《三便士歌劇》在當代劇場中的新詮釋,並藉由舞臺、燈光、服裝、音樂等多方面,分析該作如何在保留批判核心的同時,觸及觀眾的觀看位置與人性幽微。
Thumbnail
美國政府近日同意 NVIDIA(輝達)向中國出口經調整後的 H200 AI 加速晶片,此消息震動全球 AI、生技與科技市場。由於 H200 被視為 H100 的升級款(更快、更省電、記憶體更大),其市場需求原本就強烈。此次政策鬆綁,意味著中國雲端與 AI 廠商又能重新接觸到高效能 GPU。 投資人
Thumbnail
美國政府近日同意 NVIDIA(輝達)向中國出口經調整後的 H200 AI 加速晶片,此消息震動全球 AI、生技與科技市場。由於 H200 被視為 H100 的升級款(更快、更省電、記憶體更大),其市場需求原本就強烈。此次政策鬆綁,意味著中國雲端與 AI 廠商又能重新接觸到高效能 GPU。 投資人
Thumbnail
美國允許 Nvidia 的 H200 晶片出口中國,引發國會強烈關切。眾議院中國問題特別委員會要求商務部說明放行依據與執行條件,焦點不只是一顆晶片,而是 AI「總算力」是否因此外流,以及出口管制政策的可信度。這起事件凸顯美國在國安、產業與 AI 競賽之間的拉鋸,也讓未來晶片管制走向更受關注。
Thumbnail
美國允許 Nvidia 的 H200 晶片出口中國,引發國會強烈關切。眾議院中國問題特別委員會要求商務部說明放行依據與執行條件,焦點不只是一顆晶片,而是 AI「總算力」是否因此外流,以及出口管制政策的可信度。這起事件凸顯美國在國安、產業與 AI 競賽之間的拉鋸,也讓未來晶片管制走向更受關注。
Thumbnail
背景:從冷門配角到市場主線,算力與電力被重新定價   小P從2008進入股市,每一個時期的投資亮點都不同,記得2009蘋果手機剛上市,當時蘋果只要在媒體上提到哪一間供應鏈,隔天股價就有驚人的表現,當時光學鏡頭非常熱門,因為手機第一次搭上鏡頭可以拍照,也造就傳統相機廠的殞落,如今手機已經全面普及,題
Thumbnail
背景:從冷門配角到市場主線,算力與電力被重新定價   小P從2008進入股市,每一個時期的投資亮點都不同,記得2009蘋果手機剛上市,當時蘋果只要在媒體上提到哪一間供應鏈,隔天股價就有驚人的表現,當時光學鏡頭非常熱門,因為手機第一次搭上鏡頭可以拍照,也造就傳統相機廠的殞落,如今手機已經全面普及,題
Thumbnail
美國允許 NVIDIA H200 對中國出口,象徵 AI 晶片管制從全面封鎖轉向世代差距管理。中國得以重回 NVIDIA 生態,但須接受慢一代的技術位置。這不只是商業恢復,而是全球 AI 競爭邏輯的重新校準。
Thumbnail
美國允許 NVIDIA H200 對中國出口,象徵 AI 晶片管制從全面封鎖轉向世代差距管理。中國得以重回 NVIDIA 生態,但須接受慢一代的技術位置。這不只是商業恢復,而是全球 AI 競爭邏輯的重新校準。
Thumbnail
亞洲科技:輝達(NVDA)獲准對中銷售 H200——關鍵影響 川普總統放行 H200 對中銷售;美國政府將抽取 25% 營收 川普總統宣布美國政府已批准輝達向中國銷售 H200 GPU,每售出一顆晶片,美國政府將收取 25% 的營收。雖然英特爾(Intel)和超微(AMD,我們認為是 MI300
Thumbnail
亞洲科技:輝達(NVDA)獲准對中銷售 H200——關鍵影響 川普總統放行 H200 對中銷售;美國政府將抽取 25% 營收 川普總統宣布美國政府已批准輝達向中國銷售 H200 GPU,每售出一顆晶片,美國政府將收取 25% 的營收。雖然英特爾(Intel)和超微(AMD,我們認為是 MI300
Thumbnail
這是一場修復文化與重建精神的儀式,觀眾不需要完全看懂《遊林驚夢:巧遇Hagay》,但你能感受心與土地團聚的渴望,也不急著在此處釐清或定義什麼,但你的在場感受,就是一條線索,關於如何找著自己的路徑、自己的聲音。
Thumbnail
這是一場修復文化與重建精神的儀式,觀眾不需要完全看懂《遊林驚夢:巧遇Hagay》,但你能感受心與土地團聚的渴望,也不急著在此處釐清或定義什麼,但你的在場感受,就是一條線索,關於如何找著自己的路徑、自己的聲音。
Thumbnail
Nvidia 目標在 2026 年 2 月中旬、農曆年前 向中國出貨 H200 GPU,但仍須通過美中雙方的許可與審批流程。初期供貨可能動用既有庫存,規模達數萬顆等級。此案反映高階 AI 算力供應、出口管制與政策審查,仍是全球 AI 產業的重要不確定因素。
Thumbnail
Nvidia 目標在 2026 年 2 月中旬、農曆年前 向中國出貨 H200 GPU,但仍須通過美中雙方的許可與審批流程。初期供貨可能動用既有庫存,規模達數萬顆等級。此案反映高階 AI 算力供應、出口管制與政策審查,仍是全球 AI 產業的重要不確定因素。
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News