AI 帝國的神話與代價
AI Whistleblower: We Are Being Gaslit By AI Companies, They’re Hiding The Truth! - Karen Hao
Karen Hao 用「帝國」的框架看 OpenAI 與其他 AI 公司:AGI 怎麼被一再改定義、董事會為何開除 Altman、末日預言如何替自己募資,再談裁員、資料標註工和資料中心的代價。
重點摘要
- AGI 沒有終點線Hao 說沒有人能定義人類智慧,所以 AGI 可以看場合改口。Altman 對國會講的是治癒癌症,對消費者講的是最棒的數位助理,跟 Microsoft 的合約裡則是創造 $100 billion 營收的系統。
- 帝國的四個特徵搶資料與創作者的智慧財產、剝削大量勞力、壟斷知識生產,再加上「我們是好帝國,不然壞帝國會先做出來」的說法。她舉 Timnit Gebru 被 Google 開除,說明不利的研究怎麼被壓下去。
- 開除 Altman 的來龍去脈Hao 說 Sutskever 和 Murati 先向獨立董事反映,Altman 讓團隊互相對立、說法前後不一。董事會決定快動手,事前沒跟利害關係人溝通,Microsoft 只在行動前接到一通電話,幾天後 Altman 就回任。
- 末日預言也是話術她認為「可能毀滅人類」與「能治好癌症」是同一個神話的兩面,用來證明只有這幾家公司能掌控技術。她也說,這些領導人講久了可能自己也信了。
- 就業衝擊是真的,但原因不只是模型她認為裁員有一部分是主管決定的,不全是模型已經能取代人。被裁掉的人轉去做資料標註,等於訓練取代自己職位的模型,職涯階梯也少了好幾階。
- 要拆的是帝國,不是技術她用火箭與腳踏車比喻,主張多做 AlphaFold 這類小而專的系統。她舉資料中心抗議、創作者提告、80% 美國人支持管制,說明民眾有能施壓的地方。
時間軸
值得記的話
Why is it that we are building a technology that is ultimately designed to replace and automate people away?
為什麼要打造一個設計目的就是取代人的技術?
24:35So if most of the climate scientists in the world were bankrolled by fossil fuel companies, do you think we would get an accurate picture of the climate crisis?
她拿氣候科學類比 AI 研究多半由業界出資
27:09We should understand this as an act of speech to persuade other people into believing that they should cede more power, more resources to these individuals.
她說領導人的末日預言是話術,目的是讓人交出權力與資源
59:26The goal is that these companies need to stop being empires.
目標是讓這些公司不再當帝國
1:59:49let's not make it go flawlessly if we don't agree with what they are doing.
她對觀眾說,不認同就別讓它一路順利
2:03:52
名詞與人物
- Empire of AI
- Hao 的書,副標是 Dreams and Nightmares in Sam Altman's OpenAI,以 OpenAI 第一個十年為主線。
- AGI
- artificial general intelligence;Hao 的重點是它沒有一致的定義,公司看對象換說法。
- Ilya Sutskever
- OpenAI 共同創辦人與前首席科學家,Hao 說他是開除 Altman 的關鍵人物,後來創辦 Safe Superintelligence。
- Dario Amodei
- 前 OpenAI 主管,Anthropic 執行長;2017 年說過災難機率介於 10% 到 25%。
- Helen Toner
- OpenAI 當年的獨立董事,Sutskever 最先找上的對象。
- Mira Murati
- 前 OpenAI 高階主管,離開後創辦 Thinking Machines Lab。
- Timnit Gebru
- 前 Google AI 倫理團隊共同主管,Hao 以她的研究被壓下、本人被開除為例。
- data annotation
- 資料標註,用人工標記範例教模型怎麼回應;Hao 說這是 ChatGPT 能對話的前提,也是被裁員工的落腳處。
- jagged frontier
- 模型能力參差:有些項目很強,有些很弱,因為公司只針對賺錢的領域下功夫。
- Stargate
- 川普第二任期初宣布的 $500 billion AI 運算基礎建設計畫,OpenAI 在 Abilene 有大型據點。
- Colossus
- 馬斯克在 Memphis 為訓練 Grok 蓋的超級電腦,Steven 說有 100,000 顆 GPU。
- Klarna
- 瑞典金融科技公司,節目中以員工數下降的實例,討論 AI 與裁員的關係。
延伸
- Hao 提到有一篇 New York Magazine 的報導,寫被裁的高學歷者轉去做資料標註,說明為何她認為職涯階梯被抽掉。
- Steven 在中段提到,他之後會邀請 Boston Dynamics 等公司把機器人帶到節目現場。
同港的其他集 · AI 與科技島 ⚓ 科技與平台港
- 525生成式 AI 的帳為什麼算不攏Ed Zitron
- 501數學家談 AI、人的價值與信仰No.1 Christianity Expert
- 489大腦怎麼改,夢為何而來Stanford Neuroscientist
- 470短影音怎麼吃掉注意力Brain Rot Emergency
- 419別把思考全外包給 ChatGPTBrain Experts WARNING
- 399Wood 談 AI 與比特幣布局Cathie Wood
- 396AI 時代更要練人的功夫Simon Sinek
- 323AI 是外星智慧,問題在演算法Yuval Noah Harari
- 318變化太快,人類跟不上Dr Bret Weinstein
- 060專注力被偷走,怎麼拿回來Johann Hari