← 所有節目科技浪

2026 · EP122 · NVIDIA 系列

Vera Rubin 三招與 Alpamayo 之爭

2026 年 1 月 12 日 · 62 分鐘

▶ 收聽這一集

原標題:EP122 - NVIDIA 發表的自駕車跟特斯拉不能比?下一代的 AI 晶片來了!提升效能的關鍵是什麽?

哈利拆解黃仁勳 CES 演講的兩件事:Vera Rubin 比 Blackwell 快 3 到 5 倍,靠的是哪三個做法;以及為什麼 Alpamayo 1 不能拿來跟特斯拉 FSD 比。

重點

Vera Rubin 的倍數不是晶片本身。NVIDIA 官方數字是推論比 Blackwell 強 5 倍、訓練強 3.5 倍,但電晶體數量只增加大概 60%。哈利說這中間靠的是三個 trick:NVFP4 的硬體優化、額外的 KV Cache 儲存、六張晶片一起設計。

NVFP4 是接近免費的午餐。把 DeepSeek R1 從 FP8 量化到 NVFP4,NVIDIA 自己的實驗是準確率掉不到 1%,記憶體省下差不多 1.8 倍。Rubin 把「判斷哪些 Tensor 可以降精度」燒進硬體電路,這部分是哈利根據黃仁勳的兩句描述做的推測。

記憶體才是新瓶頸。KV Cache 隨對話變長而變大,HBM 很容易被塞滿。Rubin 用 Bluefield 4 DPU 替每個 GPU 多接 16TB 記憶體放「溫資料」,同時能服務的使用者變多。

Alpamayo 1 只是 Reasoning Model。哈利把自駕拆成負責開車的 Driver Model(System 1)與從旁輔助的 Reasoning Model(System 2)。NVIDIA 這次只發表後者,所以拿它比 FSD 是拿橘子對蘋果。

車廠追不上特斯拉。Driver Model 沒有數據捷徑,合成資料贏不了真實路面資料。哈利認為馬斯克說 FSD 需要 100 億英里是有根據的,車廠短期內追不上,但 NVIDIA 不管誰贏都賣得到 GPU。

時間軸 點時碼從那一段開始

  1. CES 與樂高智慧積木哈利今年沒去成 CES,說去年逛兩天只逛了大概十分之一。今年他最有興趣的是會發光發聲的樂高智慧積木。
  2. 老黃的演講成了主場黃仁勳賣的是企業生意,卻成了 CES 焦點。哈利說他的講法很 marketing,技術細節常被帶過,所以今天先講 Vera Rubin 與 Alpamayo,再講馬斯克的訪談。
  3. Vera Rubin 與官方數字Vera 是 CPU、Rubin 是 GPU,這代兩個都更新。官方說推論強 5 倍、訓練強 3.5 倍,電晶體只多大概 60%。
  4. 第一招:NVFP4NVIDIA 自己開發的 4-bit 浮點數格式。照 NVIDIA 的實驗,DeepSeek R1 從 FP8 量化過去準確率下降不到 1%,記憶體省將近兩倍。Blackwell 去年就支援。
  5. 硬體加速的自適應壓縮Rubin 的差別是為 NVFP4 做最佳化。NVIDIA 沒公布細節,哈利推測是把「哪些 Tensor 能降精度」的判斷邏輯燒進 GPU 電路。
  6. 第二招:KV Cache 擴充記憶體被每位使用者的 KV Cache 塞滿。用 Bluefield 4 DPU 當額外記憶體,熱、溫、冷資料分三層放,GPU 可以多服務使用者。
  7. 第三招:Extreme co-designNVIDIA 賣的是整個機櫃的系統。六張晶片這一代從頭一起設計,不再各自開發再拼起來。
  8. 老黃還能炸幾次Blackwell 的 25 倍主要從 FP4 炸出來(H100 只到 FP8),這次降不到 FP2,只剩 3 到 5 倍。哈利認為再十倍沒問題,之後不要當成理所當然。
  9. Alpamayo 是什麼一整套自駕技術資源,包含基礎模型、simulation framework 與資料集。真正新的只有 Alpamayo 1 這個模型。
  10. Driver 與 Reasoning Model以 System 1、System 2 區分兩種模型。哈利說 FSD V13、V14.1 沒用 Reasoning Model,Alpamayo 1 不是 Driver Model,不能跟 FSD 比。
  11. Alpamayo 1 的架構VLA 模型,用阿里巴巴的 Qwen 3 多模態版本微調,輸出建議軌跡,再由類 diffusion 模型算出控制。哈利說這種架構跑不快,現階段當不了 Driver Model。
  12. NVIDIA 的安卓策略比照 Google 開源安卓拉高搜尋市占,NVIDIA 把自駕與機器人的模型與軟體全部開源,讓車廠上路後訓練、模擬、車上的 Jetson 都綁在 NVIDIA 生態系。
  13. 特斯拉有受到威脅嗎哈利說 Reasoning Model 不難做,Driver Model 才難訓練。特斯拉 V14.2 已經有 Reasoning Model,V14.3 會更多。
  14. 合成資料比不過真實資料沒有第三方路測,哈利猜 NVIDIA 沒有那麼強的 Driver Model。合成資料適合補 edge case,但贏不了真實路面資料。
  15. 馬斯克的 100 億英里馬斯克說 FSD 需要 100 億英里,已累積 70 億英里,今年七月底達成。特黑嗆他一直調高標準,哈利認為 scaling law 讓這個數字有根據。
  16. 車廠追不上特斯拉車廠要重建相機配置、資料與訓練 pipeline,成本也高。特斯拉現在重心在 AI5、AI6 晶片,哈利認為邊緣晶片 NVIDIA 比不上。
  17. 為什麼仍看好 NVIDIA不管車廠或特斯拉誰贏,都要買 NVIDIA 的 GPU。哈利認為華爾街低估 NVIDIA,馬斯克的訪談留到下一集。

值得記的話

  • 「這真的是全天下最接近免費的午餐的東西了」

    ▶ 12:07
  • 「大家不要把它當成理所當然我預測不了未來喔」

    ▶ 30:35
  • 「我覺得是不對等的,是拿橘子對蘋果」

    ▶ 33:48
  • 「你沒有捷徑你就真的需要用大量大量的數據去建立起一個這個模型」

    ▶ 47:12
  • 「這些合成資料無論如何都不可能會贏過真實路面收集的開車資料」

    ▶ 50:33

名詞與人物

Vera Rubin
NVIDIA 下一代運算平台,Vera 是 CPU、Rubin 是 GPU,這一代兩者同時更新。
NVFP4
NVIDIA 自己開發的 4-bit 浮點數格式,Blackwell 就已支援,Rubin 為它做硬體最佳化。
KV Cache
模型回答時暫存之前所有 token 資訊的地方,隨對話變長而變大,會塞爆 GPU 記憶體。
Bluefield 4 DPU
資料處理單元,Rubin 用它當 GPU 的額外記憶體來放溫資料。
Extreme co-design
黃仁勳反覆強調的說法:六張晶片全部一起設計,為同一個目標優化。
Alpamayo
NVIDIA 的自駕技術平台,包含模型、simulation framework 與資料集;其中新的模型是 Alpamayo 1。
Driver Model / Reasoning Model
前者負責開車(System 1),後者在特殊情況給建議或短暫接手(System 2);Driver Model 是哈利自己取的名字。
VLA
Vision Language Action Model,從多模態語言模型微調出能輸出動作的模型。
Hydra MDP
NVIDIA 去年推出的 Driver Model,先輸出 Trajectory 再翻成控制。
FSD
特斯拉的自動駕駛系統,哈利說它是完整的 Driver Model 搭配 Reasoning Model 輔助。
特黑
哈利對特斯拉黑粉的叫法,這集指嗆馬斯克一直調高里程標準的那群人。

延伸

  • 哈利原本還要談馬斯克上 Peter Diamandis 的 Moonshot podcast 訪談,這集沒講到,預告放在下一集。
  • 哈利說他對 Alpamayo 與特斯拉 FSD 的比較還有很多想法,這集先沒有展開。