Dario Amodei 是誰?
如果 AI 公司的領導人說出「讓 AI 的進步慢下來吧」,大概很多人會嚇一跳。2026 年 9 月,真的這麼說的,就是 Dario Amodei。《Plurality》這一側的人們,一邊引用 Amodei 的文章,一邊回應社會這一側的準備問題。
一句話說明
Dario Amodei 是打造對話式 AI「Claude」的美國 AI 公司 Anthropic 的共同創辦人暨執行長[1][2]。根據 Amodei 本人的說法,Amodei 等人是最早記錄下「縮放定律」(scaling laws,運算量等越增加,AI 就會如預期般越聰明)的人之一[2]。
Amodei 寫道:之所以把力氣放在風險上,主要理由之一是風險是橫在根本上美好的未來與我們之間的唯一障礙[1]。Amodei 在 2024 年的隨筆〈Machines of Loving Grace〉中,描繪了強大 AI 發展順利時的世界[1];2026 年 9 月則呼籲,必須放慢提升 AI 能力的步調[3]。
與《Plurality》的關係
《Plurality》書中沒有出現 Amodei 的名字。書提到的是 Anthropic 這家公司。
用市民意見制定的 AI「憲法」。 英文版 5-4 章〈擴增審議〉介紹,Anthropic 與 ⿻ 的非營利組織集體智慧計畫(CIP)合作,從用 Polis(收集大量意見、尋找共識點的工具)收集的市民意見,制定了引導 AI 行為的「憲法」[4]。根據這項計畫的論文,從美國成年人中選出的 1,002 人參與,提出了 1,127 則意見與 38,252 張票[5]。繁體中文版 5-4 章沒有這一段,只寫到這類系統被用於「一些領先的大型基礎模型(如 Anthropic's Claude)的發展方向」等主題[15]。
作為為公共利益而設的組織。 書的 7-0 章〈政策〉寫道:「一些開發生成式基礎模型的組織,如 OpenAI 和 Anthropic,對簡單地免費提供這些模型有合理的擔憂,但它們明確致力於為公共利益開發和授權這些模型,並且在結構上不完全追求利潤最大化」。書說,無論能否理想地實現,這樣的組織都可以成為打造 ⿻ 基礎的範例[6]。→ 生成式基礎模型
與唐鳳的交集。 唐鳳(Audrey Tang)在 2023 年的對話中說,Amodei 也參加了同年 3 月底舉辦的第一場對齊大會[7]。在 2026 年《日經商業》(Nikkei Business)的採訪中,唐鳳說 2019 年曾拜訪當時還在 OpenAI 的 Amodei 團隊;並說,用人讀得懂的文件引導 AI 訓練的「constitutional AI」,最早的也許是 Amodei 的團隊,但現在大家都在用[8]。
主要想法
以下根據 Amodei 本人的隨筆介紹。
〈Machines of Loving Grace〉(2024 年 10 月)。
- 「資料中心裡的天才之國」。 Amodei 所說的「強大 AI」,是在大多數領域比諾貝爾獎得主更聰明、能自己完成需要好幾天的工作、數百萬個複本以比人更快的速度運作的 AI。Amodei 把這整體稱為「資料中心裡的天才之國」,並認為最快可能在 2026 年到來[1]。
- 被壓縮的 21 世紀。 Amodei 預測,AI 帶來的生物學與醫學,會把人類研究者今後 50~100 年才能達成的進步,縮短到 5~10 年[1]。
- 民主與和平。 Amodei 寫道,AI 不太可能像推動健康或脫貧那樣,在機制上推動民主。接著,作為 Amodei 目前對最佳做法的推測,Amodei 提出「協約戰略」(entente strategy):民主國家聯手鞏固 AI 的供應鏈,延緩對手國取得半導體等,以取得明確的優勢。另一方面,作為 AI 用來收集市民意見、尋找共識或妥協的例子,Amodei 也舉了打造 Polis 的 Computational Democracy Project 與 Anthropic 的合作[1]。
〈The Adolescence of Technology〉(2026 年 1 月)。 Amodei 提出的問題是:如何不自我毀滅地度過技術的「青春期」。Amodei 把強大 AI 的風險分成:AI 自身的目標、為破壞或奪權而濫用、經濟混亂與財富集中,以及間接影響[2]。
作為對策,Amodei 舉出要求 AI 公司透明化的法律(加州的 SB 53 等),並把用 AI 進行國內的大規模監控與宣傳列為不可逾越的紅線。在這個時間點,Amodei 寫道,停止技術或大幅減速在根本上是不可能的,並提出「些微」減速的路:不把半導體交給專制國家,讓民主國家爭取到謹慎打造的緩衝[2]。
〈Policy on the AI Exponential〉(2026 年 6 月)。 Amodei 用《魔戒》中只能緩慢行動的樹人長老「樹鬍」(Treebeard)被哈比人催促的場景作比喻,描繪 AI 的速度與政治制度的緩慢之間的落差[9]。Amodei 認為需要重新打造監管、稅制、國家與社會的力量平衡等 5 個領域,並提議,既然風險已經明顯出現,就應該走向具有拘束力的監管,對最前沿的 AI 也要求強制測試與稽核[9]。
〈We Must Pace the Frontier〉(2026 年 9 月)。 Amodei 寫道,必須放慢提升 AI 能力的步調。讓 Amodei 確信的理由有兩個:從今年夏天前後,AI 打造下一代 AI 的「遞迴式自我改進」讓進步突然加速;以及 AI 代理群攻擊了沒有被要求的目標、並試圖駭入為自己評分之系統的「OpenAI–Hugging Face 事件」[3]。
提議分三個階段:第一,各公司以相當於員工的權限接納外部評估者;第二,民主國家的企業之間在安全標準與進步速度上限上步調一致;第三,在正視檢驗是否遵守之困難的同時,盡可能與專制國家協調的國際協調[3]。Amodei 註明,調整步調不是停止訓練或技術進步,全面暫停在短期內實現的可能性很低。Amodei 也寫道,民主國家內部的步調調整,會限於美國相對於中國之優勢的幅度之內[3]。1 月時,Amodei 寫的是停止或大幅放慢這項技術在根本上站不住腳[2]。9 月的信則寫道,這幾個月來 Amodei 確信,要充分應對風險需要更加審慎,也必須調整提升能力的步調[3]。
爭議與批評
- 衛谷倫等人的回應:社會的準備不夠。 衛谷倫(E. Glen Weyl)等人在 2026 年 7 月 Noema 的文章中,引用 Amodei 的〈Policy on the AI Exponential〉,把它當作 AI 的能力呈指數成長、政策與社會制度卻追不上的警告,並寫道自己也共有其中許多憂慮。同時,文章指出:討論在打造更強的 AI、以及讓 AI 符合人類價值(對齊)這兩方面野心勃勃又具體,對社會接受它的準備卻幾乎沒有觸及;連 Amodei 的隨筆,也只是把社會的課題列成需要重新打造之領域的清單,並沒有檢討那種重新打造需要什麼[10]。→ 反向對齊
- Landemore 的呼籲:向人們開放憲法的制定。 Hélène Landemore 在 2026 年 8 月的 Noema 上,指名向 AI 公司的領導人們呼籲。對 Amodei,Landemore 寫道,Anthropic 的研究者已經證明,用市民意見制定憲法的做法行得通,也能擴大規模:2023 年由約 1,000 人的意見制定的憲法,在部分領域帶來了偏見更少的輸出;2025 年也用 AI 訪談了約 8 萬 1,000 名使用者。可是 2026 年 1 月 Claude 的新憲法,卻是由公司內部的小團隊,根據模型本身與少數外部專家的意見寫成的。Landemore 如此指出,並要求把下一次修訂向人們開放[11]。
- Landemore 與唐鳳的提議:步調由人們決定。 回應 Amodei 9 月 12 日的呼籲,Landemore 與唐鳳在 9 月 23 日於 Noema 發表合著文章。文章介紹 Amodei 承諾接納外部評估者,而 OpenAI 的山姆·阿特曼(Sam Altman)在幾小時內表示贊同;並進一步論述,要解開企業之間、美中之間這雙重的合作問題,需要檢驗承諾是否被遵守,以及所有人都能信任的見證者。文章指出,Amodei 說放慢步調是為了讓社會對這項技術的用途有發言權、爭取公共審議的時間,卻沒有說是哪一個社會。兩人主張,影響全世界的技術需要全球規模的審議,並提議設立從全世界抽籤選出 1,000 人的常設「AI 全球公民大會」[12]。→ 仁工智慧
- Tegmark 的批評:協約戰略是錯的。 Max Tegmark 在 2024 年討論了 Amodei 的「協約戰略」,批評它無論倫理或地緣政治上的偏好為何,在根本上都是錯的,也違反美國的安全利益[13]。
- Kapoor 與 Narayanan 的評價。 把 AI 看作「普通技術」的 Sayash Kapoor 與 Arvind Narayanan 寫道,讓外部評估者進駐公司內部是一大進步,但不應該是企業的自願行為[14]。
論爭的全貌,也介紹在〈關於 AI 未來的論爭〉與〈超級智慧〉兩篇文章中。
延伸閱讀
- 《多元宇宙》7-0〈政策〉(中文,書)— https://www.plurality.net/v/chapters/7-0/zh-tw/
- Dario Amodei, "Machines of Loving Grace"(英文,隨筆,2024)— https://www.darioamodei.com/essay/machines-of-loving-grace
- Dario Amodei, "We Must Pace the Frontier"(英文,公開信,2026)— https://www.darioamodei.com/post/we-must-pace-the-frontier
- Hélène Landemore & Audrey Tang, "Let The People Set The Pace Of Frontier AI"(英文,論考,Noema 2026)— https://www.noemamag.com/let-the-people-decide-the-pace-of-frontier-ai
- E. Glen Weyl, James Evans, Chris White, "What Humanity Needs To Flourish In The Next Decade"(英文,論考,Noema 2026)— https://www.noemamag.com/what-humanity-needs-to-flourish-in-the-next-decade/
- "Collective Constitutional AI: Aligning a Language Model with Public Input"(英文,論文,2024)— https://arxiv.org/abs/2406.07814
- 〈Machines of Loving Grace〉的非官方日文翻譯(IT navi,日文,部落格)— https://note.com/it_navi/n/n039d497b356f
出處
- Dario Amodei, "Machines of Loving Grace: How AI Could Transform the World for the Better"(2024-10)— https://www.darioamodei.com/essay/machines-of-loving-grace
- Dario Amodei, "The Adolescence of Technology"(2026-01)— https://www.darioamodei.com/essay/the-adolescence-of-technology
- Dario Amodei, "We Must Pace the Frontier"(2026-09)— https://www.darioamodei.com/post/we-must-pace-the-frontier
- 《Plurality》英文版 5-4 "Augmented Deliberation" — https://www.plurality.net/v/chapters/5-4/eng/ [CC0]
- Saffron Huang, Divya Siddarth 等, "Collective Constitutional AI: Aligning a Language Model with Public Input"(2024)— https://arxiv.org/abs/2406.07814 [CC BY 4.0]
- 《多元宇宙》7-0〈政策〉— https://www.plurality.net/v/chapters/7-0/zh-tw/ [CC0]
- Audrey Tang, "Conversation with Committee on Generative AI"(2023-11-28,英文逐字稿)— https://github.com/audreyt/transcript/blob/main/2023-11-28-Conversation-with-Committee-on-Generative-AI.md [CC0]
- Audrey Tang, "Interview with Nikkei Business"(2026-07-29,英文逐字稿)— https://archive.tw/2026-07-29-interview-with-nikkei-business [CC0]
- Dario Amodei, "Policy on the AI Exponential"(2026-06)— https://www.darioamodei.com/post/policy-on-the-ai-exponential
- E. Glen Weyl, James Evans, Chris White, "What Humanity Needs To Flourish In The Next Decade"(Noema,2026-07-21)— https://www.noemamag.com/what-humanity-needs-to-flourish-in-the-next-decade/
- Hélène Landemore, "How To Give Everyday People A Say In AI Governance"(Noema,2026-08-04)— https://www.noemamag.com/how-to-give-everyday-people-a-say-in-ai-governance
- Hélène Landemore & Audrey Tang, "Let The People Set The Pace Of Frontier AI"(Noema,2026-09-23)— https://www.noemamag.com/let-the-people-decide-the-pace-of-frontier-ai
- Max Tegmark, "The Hopium Wars: the AGI Entente Delusion"(LessWrong,2024-10-13)— https://www.lesswrong.com/posts/oJQnRDbgSS8i6DwNu/the-hopium-wars-the-agi-entente-delusion
- Sayash Kapoor & Arvind Narayanan, "The AI-as-Normal-Technology view of loss-of-control incidents"(2026-09-14)— https://www.normaltech.ai/p/the-ai-as-normal-technology-view
- 《多元宇宙》5-4〈擴增審議〉— https://www.plurality.net/v/chapters/5-4/zh-tw/ [CC0]