← 所有節目科技浪

2024 · EP41 · OpenAI 系列

超級對齊解散與 AI PC 門檻

2024 年 5 月 27 日 · 62 分鐘

▶ 收聽這一集

原標題:EP41 - AI PC的革命來了嗎?深入瞭解微軟的Copilot+PC

哈利先聊 OpenAI 的聲音爭議、Super Alignment Team 解散與離職協議,再拆解微軟 Copilot+ PC 的 NPU 門檻、內建模型與 Recall。

重點

Sky 聲音撤下的原因。哈利指出 Sky 和 Scarlett Johansson 不是同一個人,只是神似。他認為 OpenAI 撤掉聲音,是因為模仿的意圖太明顯,加上奧特曼發表後只貼了一個字「Her」。

安全團隊解散是算力之爭。Ilya Sutskever 與 Jan Leike 在 GPT-4o 發表會後兩天辭職。哈利不同意「4o 安全沒準備好」的主流講法,認為是 Super Alignment Team 的運算資源一路被砍,GPT-4o 的上線又搶走更多算力。

兩邊都有道理。站在奧特曼的角度,後面有 Google、Anthropic、Meta 在追,不可能一直把 20% 算力給短期沒用的研究。但哈利也說,拉到 5 到 10 年,出現有威脅的 AI 的可能性很高,所以很多人的 P-Doom 該上升。

離職協議已取消。Vox 爆料離職員工要簽終身不得貶損的協議,講壞話就失去股權。哈利說奧特曼出面承認,並表示要取消。

Copilot+ PC 的門檻。升級版 Windows 11,加上 NPU 達 40 TOPS(以 INT8 計算)。Windows on ARM 終於做成是另一件大事,但跟 Copilot+ PC 的定義無關,Intel 的 Lunar Lake 也算。

重點在工具組。Windows 11 內建 40 個以上 AI 模型,加上 Windows Semantic Index 這個向量資料庫,Recall 就是靠後者做語意搜尋。哈利看好 AI PC 慢慢發酵,也提醒 Recall 可能成為資安破口。

時間軸 點時碼從那一段開始

  1. 本集兩個題目哈利說這幾週的話題多到講不完,挑了 OpenAI 的風波與微軟 Copilot+ PC;後者想談 AI PC 這個詞到底怎麼定義。
  2. Scarlett Johansson 來信GPT-4o 發表幾天後,OpenAI 收到她要告他們的信,理由是 Sky 聲線太像她,OpenAI 隨後撤下這個聲音。哈利說兩人聲音並不相同,只是神韻接近,也像 2013 年《雲端情人》裡的 AI。
  3. 奧特曼兩度找她授權照 Johansson 對媒體的說法,奧特曼 9 個月前問過授權被拒,發表前兩天又問一次,她還沒回覆 GPT-4o 就上線了。哈利認為這是要讓人聯想到《雲端情人》的行銷手法。
  4. 為什麼撤下 Sky奧特曼發的貼文只有「Her」一個字。哈利覺得 OpenAI 是自覺站不住腳才撤聲音;也有人質疑為什麼不公布配音演員的身分,OpenAI 的說法是要保持匿名。
  5. 回顧去年的宮鬥劇一般的認知是 Ilya Sutskever 主導開除奧特曼,因為覺得產品推得太快、太危險;奧特曼一走員工也要跟著走,Ilya 只好讓步。
  6. Ilya 與 Jan 辭職GPT-4o 發表會後兩天,共同帶領 Super Alignment Team 的 Ilya 與 Jan Leike 同時辭職。哈利解釋「對齊」是讓 AI 的價值與人類一致;Ilya 的離職文只有感謝。
  7. Jan 的貼文Jan 在 X 上寫到與領導層對優先順序的分歧已到臨界點,安全文化被光鮮亮麗的產品掩蓋(哈利用 GPT-4o 翻譯)。哈利的理解是奧特曼與 Greg Brockman 的產品團隊一直衝,安全團隊覺得不好卻沒人理。
  8. 外界的兩種解讀多數人說是 GPT-4o 的安全還沒準備好,或延續「What did Ilya see?」的梗。哈利說大部分人講的他都不同意。
  9. 這個團隊在做什麼哈利認為大家誤以為它只是產品的安全部門。它盯的是更接近 AGI 的超智慧 AI;團隊的想法是人類管不了比自己聰明的東西,所以要建一個 AI 來幫忙對齊。
  10. 20% 運算資源被砍團隊去年 7 月成立時公開說 OpenAI 的運算資源有 20% 會分給他們。哈利推測這個比例一路被砍,並引 Jan 貼文裡 compute 越來越難拿的那句,認為 GPT-4o 是導火線的原因是搶走算力,不是安全檢查沒做完。
  11. 站在奧特曼的角度後面有 Google、Anthropic、Meta 緊追,把 20% 算力給短期沒幫助的研究很難。哈利覺得連 Anthropic 也沒花到 20% 算力做安全研究。
  12. 商業與安全的拉扯從商業角度看這個結果是必然。哈利說現有的 AI 不用怕,但拉到 5 到 10 年就不一定;Anthropic 的可解釋性研究(Claude 的神經元對應 Golden Gate Bridge)規模比不上這個團隊,所以 P-Doom 該上升。
  13. 離職協議Vox 爆料離職員工要簽終身不得貶損的協議,否則失去所有股權;哈利記得 OpenAI 上次估值是 80 幾到 90 幾 Billion。奧特曼出面承認並說要取消。
  14. 微軟發表會Copilot+ PC 有兩個條件:升級版 Windows 11,以及晶片上夠強的 NPU。第一波用高通的 Snapdragon X Series。
  15. Windows on ARM 成功了ARM 省電、x86 更強。過去十年 Windows on ARM 輸在晶片不夠力與軟體不相容。微軟說使用者 86% 的時間用在原生 ARM 應用上,實測比 M3 MacBook Air 快 58%;哈利說這跟 AI PC 的定義無關。
  16. 40 TOPS 門檻微軟要求 NPU 達 40 TOPS,以 INT8 算。哈利比較蘋果:M3 的 Neural Engine 是 18 TOPS(FP16),M4 是 38 TOPS 但蘋果沒說精度,兩者都沒到 40。他猜微軟定 40 帶點心機,並推薦聽 EP32 了解精度。
  17. 內建模型與向量資料庫哈利不從應用層講,而是看開發者部落格的底層工具:40 個以上內建 AI 模型,加上 Windows Semantic Index。內建的畫圖、即時翻譯靠它們,第三方軟體也能用。
  18. 向量與語意搜尋用橘貓在陽台的圖片解釋:模型把圖與搜尋文字轉成同一個空間的向量,比對相似度就能找到,不用一張張翻圖庫。
  19. Recall 與第三方應用Recall 定時截下螢幕存進向量資料庫,之後可搜尋「橘黑色的球鞋」。哈利設想 LINE 有了語意搜尋,就能找「週年慶吃的鐵板燒」,也能即時生成貼圖。他看好 AI PC。
  20. Recall 的資安風險微軟說會開放 Recall database 的 API 給其他開發者。哈利設想惡意軟體能搜出帳號密碼畫面,再傳回自己的資料庫;他不確定微軟有沒有防範機制。
  21. 小結與 AI PC 是不是革命哈利重述三項特點。現有功能算是 good to have,不夠革命;但工具組先到位,之後軟體越用越多,有沒有 AI PC 就會差很多。
  22. AI PC 的 Killer App哈利認為是本地端的個人助理:和作業系統整合、能用向量資料庫,不只給建議還能幫你完成事情。
  23. NPU 與 GPU 的定位分析師朋友問 NVIDIA 一張 GPU 有幾百 TOPS,AI PC 是不是噱頭。哈利說兩者定位不同,用發財車與連結車比喻;輕量運算丟給 GPU 反而更耗電、更慢。
  24. 補充 GPT-4o 的記憶力回應留言:GPT-4o 的 demo 看似有記憶,但哈利認為仍是圖片不是影片,影響不大;影片的模態一兩年內就會成真。

值得記的話

  • 「他們意圖太明顯了他們就是要模仿 Scarlett Johansson 的聲音」

    ▶ 09:08
  • 「從 Business 角度來看這個就是把一個非常珍貴的運算資源直接丟水溝的概念」

    ▶ 24:29
  • 「是挺實用的一個功能但我覺得它蠻有可能成為一個資安破口的」

    ▶ 50:50
  • 「只是這個革命會慢慢的發生它不是 overnight 就會出現的」

    ▶ 54:26
  • 「它的定位是用非常低的能耗非常快速的進行小量的 AI 運算」

    ▶ 56:59

名詞與人物

Super Alignment Team
OpenAI 內部專注超智慧 AI 對齊的團隊,由 Ilya 與 Jan 共同帶領,這集說它隨兩人辭職而解散。
Ilya Sutskever
OpenAI 共同創辦人、AI 研究員,哈利說他是去年開除奧特曼風波的主導者,這次辭職。
Jan Leike
與 Ilya 共同帶領 Super Alignment Team,在 X 上寫了較詳細的辭職貼文。
P-Doom
網路用語,指 AI 毀滅人類的機率;Probability of Doom 的縮寫。
What did Ilya see?
去年宮鬥劇後流行的梗,起因是有人猜 Ilya 看到了可怕的 AI 技術。
Copilot+ PC
微軟定義的 AI PC:升級版 Windows 11 加上達 40 TOPS 的 NPU。
NPU / TOPS
NPU 是專門處理 AI 的處理器;TOPS 是每秒兆次運算,比較時要在同一個資料精度下。
Windows on ARM
讓 Windows 跑在 ARM 架構晶片上;哈利說這次因晶片夠力、軟體與 Emulator 改善才成功。
Windows Semantic Index
Windows 11 內建的向量資料庫,讓電腦裡的資料可以語意搜尋。
Recall
微軟新功能,定時截圖存進向量資料庫,之後用語意搜尋找回,哈利認為有資安疑慮。
語意搜尋
把查詢與資料都轉成向量再比相似度,不必完全比對字詞。

延伸

  • 哈利提到 NVIDIA B200 與資料精度下降的內容在 EP32,想比較不同晶片的 TOPS 可以先看那集。
  • 這集只聊了微軟發表會裡的 Copilot+ PC,哈利說沒有涵蓋整場 Build。