哈利先聊 OpenAI 的聲音爭議、Super Alignment Team 解散與離職協議,再拆解微軟 Copilot+ PC 的 NPU 門檻、內建模型與 Recall。
重點
Sky 聲音撤下的原因。哈利指出 Sky 和 Scarlett Johansson 不是同一個人,只是神似。他認為 OpenAI 撤掉聲音,是因為模仿的意圖太明顯,加上奧特曼發表後只貼了一個字「Her」。
安全團隊解散是算力之爭。Ilya Sutskever 與 Jan Leike 在 GPT-4o 發表會後兩天辭職。哈利不同意「4o 安全沒準備好」的主流講法,認為是 Super Alignment Team 的運算資源一路被砍,GPT-4o 的上線又搶走更多算力。
兩邊都有道理。站在奧特曼的角度,後面有 Google、Anthropic、Meta 在追,不可能一直把 20% 算力給短期沒用的研究。但哈利也說,拉到 5 到 10 年,出現有威脅的 AI 的可能性很高,所以很多人的 P-Doom 該上升。
離職協議已取消。Vox 爆料離職員工要簽終身不得貶損的協議,講壞話就失去股權。哈利說奧特曼出面承認,並表示要取消。
Copilot+ PC 的門檻。升級版 Windows 11,加上 NPU 達 40 TOPS(以 INT8 計算)。Windows on ARM 終於做成是另一件大事,但跟 Copilot+ PC 的定義無關,Intel 的 Lunar Lake 也算。
重點在工具組。Windows 11 內建 40 個以上 AI 模型,加上 Windows Semantic Index 這個向量資料庫,Recall 就是靠後者做語意搜尋。哈利看好 AI PC 慢慢發酵,也提醒 Recall 可能成為資安破口。
時間軸 點時碼從那一段開始
- 本集兩個題目哈利說這幾週的話題多到講不完,挑了 OpenAI 的風波與微軟 Copilot+ PC;後者想談 AI PC 這個詞到底怎麼定義。
- Scarlett Johansson 來信GPT-4o 發表幾天後,OpenAI 收到她要告他們的信,理由是 Sky 聲線太像她,OpenAI 隨後撤下這個聲音。哈利說兩人聲音並不相同,只是神韻接近,也像 2013 年《雲端情人》裡的 AI。
- 奧特曼兩度找她授權照 Johansson 對媒體的說法,奧特曼 9 個月前問過授權被拒,發表前兩天又問一次,她還沒回覆 GPT-4o 就上線了。哈利認為這是要讓人聯想到《雲端情人》的行銷手法。
- 為什麼撤下 Sky奧特曼發的貼文只有「Her」一個字。哈利覺得 OpenAI 是自覺站不住腳才撤聲音;也有人質疑為什麼不公布配音演員的身分,OpenAI 的說法是要保持匿名。
- 回顧去年的宮鬥劇一般的認知是 Ilya Sutskever 主導開除奧特曼,因為覺得產品推得太快、太危險;奧特曼一走員工也要跟著走,Ilya 只好讓步。
- Ilya 與 Jan 辭職GPT-4o 發表會後兩天,共同帶領 Super Alignment Team 的 Ilya 與 Jan Leike 同時辭職。哈利解釋「對齊」是讓 AI 的價值與人類一致;Ilya 的離職文只有感謝。
- Jan 的貼文Jan 在 X 上寫到與領導層對優先順序的分歧已到臨界點,安全文化被光鮮亮麗的產品掩蓋(哈利用 GPT-4o 翻譯)。哈利的理解是奧特曼與 Greg Brockman 的產品團隊一直衝,安全團隊覺得不好卻沒人理。
- 外界的兩種解讀多數人說是 GPT-4o 的安全還沒準備好,或延續「What did Ilya see?」的梗。哈利說大部分人講的他都不同意。
- 這個團隊在做什麼哈利認為大家誤以為它只是產品的安全部門。它盯的是更接近 AGI 的超智慧 AI;團隊的想法是人類管不了比自己聰明的東西,所以要建一個 AI 來幫忙對齊。
- 20% 運算資源被砍團隊去年 7 月成立時公開說 OpenAI 的運算資源有 20% 會分給他們。哈利推測這個比例一路被砍,並引 Jan 貼文裡 compute 越來越難拿的那句,認為 GPT-4o 是導火線的原因是搶走算力,不是安全檢查沒做完。
- 站在奧特曼的角度後面有 Google、Anthropic、Meta 緊追,把 20% 算力給短期沒幫助的研究很難。哈利覺得連 Anthropic 也沒花到 20% 算力做安全研究。
- 商業與安全的拉扯從商業角度看這個結果是必然。哈利說現有的 AI 不用怕,但拉到 5 到 10 年就不一定;Anthropic 的可解釋性研究(Claude 的神經元對應 Golden Gate Bridge)規模比不上這個團隊,所以 P-Doom 該上升。
- 離職協議Vox 爆料離職員工要簽終身不得貶損的協議,否則失去所有股權;哈利記得 OpenAI 上次估值是 80 幾到 90 幾 Billion。奧特曼出面承認並說要取消。
- 微軟發表會Copilot+ PC 有兩個條件:升級版 Windows 11,以及晶片上夠強的 NPU。第一波用高通的 Snapdragon X Series。
- Windows on ARM 成功了ARM 省電、x86 更強。過去十年 Windows on ARM 輸在晶片不夠力與軟體不相容。微軟說使用者 86% 的時間用在原生 ARM 應用上,實測比 M3 MacBook Air 快 58%;哈利說這跟 AI PC 的定義無關。
- 40 TOPS 門檻微軟要求 NPU 達 40 TOPS,以 INT8 算。哈利比較蘋果:M3 的 Neural Engine 是 18 TOPS(FP16),M4 是 38 TOPS 但蘋果沒說精度,兩者都沒到 40。他猜微軟定 40 帶點心機,並推薦聽 EP32 了解精度。
- 內建模型與向量資料庫哈利不從應用層講,而是看開發者部落格的底層工具:40 個以上內建 AI 模型,加上 Windows Semantic Index。內建的畫圖、即時翻譯靠它們,第三方軟體也能用。
- 向量與語意搜尋用橘貓在陽台的圖片解釋:模型把圖與搜尋文字轉成同一個空間的向量,比對相似度就能找到,不用一張張翻圖庫。
- Recall 與第三方應用Recall 定時截下螢幕存進向量資料庫,之後可搜尋「橘黑色的球鞋」。哈利設想 LINE 有了語意搜尋,就能找「週年慶吃的鐵板燒」,也能即時生成貼圖。他看好 AI PC。
- Recall 的資安風險微軟說會開放 Recall database 的 API 給其他開發者。哈利設想惡意軟體能搜出帳號密碼畫面,再傳回自己的資料庫;他不確定微軟有沒有防範機制。
- 小結與 AI PC 是不是革命哈利重述三項特點。現有功能算是 good to have,不夠革命;但工具組先到位,之後軟體越用越多,有沒有 AI PC 就會差很多。
- AI PC 的 Killer App哈利認為是本地端的個人助理:和作業系統整合、能用向量資料庫,不只給建議還能幫你完成事情。
- NPU 與 GPU 的定位分析師朋友問 NVIDIA 一張 GPU 有幾百 TOPS,AI PC 是不是噱頭。哈利說兩者定位不同,用發財車與連結車比喻;輕量運算丟給 GPU 反而更耗電、更慢。
- 補充 GPT-4o 的記憶力回應留言:GPT-4o 的 demo 看似有記憶,但哈利認為仍是圖片不是影片,影響不大;影片的模態一兩年內就會成真。
值得記的話
▶ 09:08「他們意圖太明顯了他們就是要模仿 Scarlett Johansson 的聲音」
▶ 24:29「從 Business 角度來看這個就是把一個非常珍貴的運算資源直接丟水溝的概念」
▶ 50:50「是挺實用的一個功能但我覺得它蠻有可能成為一個資安破口的」
▶ 54:26「只是這個革命會慢慢的發生它不是 overnight 就會出現的」
▶ 56:59「它的定位是用非常低的能耗非常快速的進行小量的 AI 運算」
名詞與人物
- Super Alignment Team
- OpenAI 內部專注超智慧 AI 對齊的團隊,由 Ilya 與 Jan 共同帶領,這集說它隨兩人辭職而解散。
- Ilya Sutskever
- OpenAI 共同創辦人、AI 研究員,哈利說他是去年開除奧特曼風波的主導者,這次辭職。
- Jan Leike
- 與 Ilya 共同帶領 Super Alignment Team,在 X 上寫了較詳細的辭職貼文。
- P-Doom
- 網路用語,指 AI 毀滅人類的機率;Probability of Doom 的縮寫。
- What did Ilya see?
- 去年宮鬥劇後流行的梗,起因是有人猜 Ilya 看到了可怕的 AI 技術。
- Copilot+ PC
- 微軟定義的 AI PC:升級版 Windows 11 加上達 40 TOPS 的 NPU。
- NPU / TOPS
- NPU 是專門處理 AI 的處理器;TOPS 是每秒兆次運算,比較時要在同一個資料精度下。
- Windows on ARM
- 讓 Windows 跑在 ARM 架構晶片上;哈利說這次因晶片夠力、軟體與 Emulator 改善才成功。
- Windows Semantic Index
- Windows 11 內建的向量資料庫,讓電腦裡的資料可以語意搜尋。
- Recall
- 微軟新功能,定時截圖存進向量資料庫,之後用語意搜尋找回,哈利認為有資安疑慮。
- 語意搜尋
- 把查詢與資料都轉成向量再比相似度,不必完全比對字詞。
延伸
- 哈利提到 NVIDIA B200 與資料精度下降的內容在 EP32,想比較不同晶片的 TOPS 可以先看那集。
- 這集只聊了微軟發表會裡的 Copilot+ PC,哈利說沒有涵蓋整場 Build。