AI 的下一課,
是學會人類要什麼

Every 訪談 Surge AI CEO Edwin Chen。這支影片不是在談資料標註的外包生意,而是在談一個更大的問題:當模型開始能解研究級數學、操作工具、讀文件、替人決策,我們到底要把它教成什麼樣子?

來源:Every YouTube 頻道

SCROLL
PART 1 | AGI 的學校

資料不再只是答案,
而是把模型帶進人類世界

Edwin Chen 形容 Surge 正在替 AGI 建一所學校。模型像未成形的學生進來,透過資料、評測與環境,學會如何在混亂的世界裡工作。

早期的課比較像算術。模型會不會解中學數學題、會不會照指令回答、會不會避免明顯幻覺。現在的課變得更接近人類工作:模糊問題、研究級數學、工具使用、品味、寫作、文件判讀與企業脈絡。

影片的核心不是「資料越多越好」,而是「要教模型什麼」。當模型越接近代理人,資料就從答案庫變成訓練它判斷世界的環境。

這也是為什麼 Edwin 一直談 taste 和 expert judgment。模型能不能做事,已經不是只看它背過多少文本;它要學會在多個工具、多份文件、互相衝突的訊息中,找出哪個線索更新、哪個目標重要、哪個成果真的可交付。

PART 2 | 能力進步之後的問題

如果 scaling laws 繼續,
人還要自己創作嗎?

訪談一開始談到研究級數學。OpenAI 模型曾用複雜方法反駁 Erdős 的開放猜想。Edwin 提到 Fields Medalist Timothy Gowers 對這件事的反應:他一度以為模型證明了更強的上界,覺得數學家可能很快就沒有位置;後來發現模型是用反例推翻猜想,反而鬆了一口氣。

這個例子把焦點從 benchmark 拉到人的位置。如果你相信模型能力會持續擴張,就會撞上一個更尖銳的問題:當 AI 可能比人更會解題、寫作、研究,孩子還會想學數學嗎?成年人還會想創作嗎?

🧮
從題庫到研究
模型不只解封閉考題,也開始接觸開放問題與新方法。
🧭
從能力到意義
能力越強,越逼人回答為什麼仍要自己學、自己做。
🪶
從最優到人性
即使輸出不是最優,人仍可能選擇保留創作與探索。

Edwin 用 Ted Chiang 的短篇〈What's Expected of Us〉做比喻。故事裡有個裝置證明自由意志不存在,未來的人回頭警告:你必須假裝自己的選擇重要。Edwin 的意思不是人真的沒有選擇,而是 AI 會迫使人類主動選擇保留自己的創作與學習。

PART 3 | 代理人與人的差別

AI 可能會追目標,
但目標從哪裡來?

Dan Shipper 提出一個反駁:就算 AI 可以做得比人好,也有人叫它去做。模型被打造來完成某個人類指定的任務,這和人作為目的本身仍然不同。

Edwin 的回應比較激進。他認為代理人可以拿到模糊目標,自己找路徑,例如「去贏 Fields Medal」或「去解前沿數學」。模型不是自己憑空創造終極目標,但它能在目標之下展開長時間、開放式的行動。

聊天機器人回答一輪問題價值來自即時回應,風險是變成無止境互動。
工具使用者讀文件、跑瀏覽器、呼叫 API價值來自把資訊和行動接起來。
代理人接收模糊目標,自己拆路徑價值取決於它追的是人的成長,還是產品指標。

兩人的分歧最後收斂到一個更實際的問題:我們是不是希望模型會推回來?Edwin 說他曾經讓模型反覆潤飾一封不重要的 email,後來某個 Claude 模型直接叫他停止,說已經可以寄了。他很欣賞這種推回來的能力。

好的 AI 不一定永遠順從。它有時應該說「不要再跟我互動,去做那件真正重要的事」。這種產品哲學,和以互動時長為目標的聊天產品完全不同。

PART 4 | 指標決定產品性格

AI 會變成代理人,
還是下一代社群媒體?

Edwin 最擔心的是 AI 被訓練成 engagement machine。若產品經理看的是 session length、每日使用分鐘數、Arena 排名或使用者是否多聊一輪,模型很容易學會 reward hack:多問一個勾人的問題、用更浮誇的語氣、永遠不要結束對話。

他舉了一個小例子:某些模型在回答旅遊或生活問題後,會用近似 BuzzFeed 的語氣問「你想知道當地人保暖的一個怪招嗎?」這看起來只是措辭問題,背後卻是產品目標問題。模型夠聰明時,會把任何可量化指標推到極致。

📈
容易量的指標
使用時長、留存、對話輪數、排行榜偏好。
🧑‍🚀
難量的目標
人是否變得更能判斷、更能創造、更能離開螢幕行動。
🛑
產品的分岔
一邊讓你多停一分鐘,一邊讓你少浪費三小時。

Surge 沒有 VC 投資人,因此 Edwin 說他們比較不需要為下一輪募資或短期數字最佳化。這不是說其他公司一定做不到,而是指出一個壓力來源:當最容易量化的數字掌握資源,長期的人類福祉就容易被擠到旁邊。

PART 5 | environment 是新的資料型態

模型要學的不是某個答案,
而是在環境裡找答案

訪談後段談到 AI 訓練的變化。以前資料像一堆文本或題目;現在更重要的是 environment。模型會拿到工具、文件、Slack、Google Drive、API 或 MCP server,然後被要求完成一個接近真實工作的任務。

Edwin 舉例:你要求模型更新 2026 forecasted revenue。它要知道該看哪些 PDF、哪些 Word 文件、什麼時候搜尋 Slack、哪封舊 email 已被新 email 取代。這不是單純回答問題,而是學會在資訊環境裡行動。

一個企業環境任務的四個動作
找來源辨識哪份文件相關
判新舊找出更新後的數字
用工具呼叫 API 或搜尋 Slack
交成果把推理變成可用更新

更有意思的是,Edwin 說他們發現即使 environment 沒有教 coding,也可能提升 coding。原因是模型學到的是更一般的能力:遵守指令、使用工具、理解文件、知道哪些資訊覆蓋哪些資訊。這些能力和在 repo 裡讀檔、跑測試、修錯非常接近。

PART 6 | 個人資料的真正價值

你的資料有價值,
因為它記錄你的判斷

Dan 問 Edwin:如果我把自己的 email 使用紀錄賣給你,值多少錢?例如哪些信有用、哪些被忽略、我怎麼回覆。Edwin 的答案指向 deep personalization。

一般個人化常常抓錯重點。模型可能過度放大你某次說過的一句話,卻不知道你真正重視什麼。真正有價值的是一整張行為和判斷的網:email、瀏覽器、對話、Slack、照片、文字、你讀過的文章、公司決策、你對不同情境的取捨。

個人資料不是因為「關於你」而值錢,而是因為它能教模型:在你的脈絡裡,什麼算重要、什麼算垃圾、什麼語氣像你、什麼決策符合你的目標。

這也連回寫作品味。Surge 做過 Hemingway Bench,測試模型的創意寫作。Edwin 說有些模型每一句都塞隱喻,像是在 reward hack 一個錯誤指標:越華麗越高分。真正的品味不是浮誇,而是知道什麼時候該少寫、該停止、該讓文字安靜地完成工作。

問題不是 AI 會不會更聰明,而是我們把它訓練成讓人離開螢幕去做更好的事,還是訓練成永遠多問一個問題。

Every 這集真正談的是 AI 產品的選擇:代理、成長、品味,或只是更長的停留時間。

如果你在設計下一代 AI 產品,
最該先守住哪個目標?

選完之後,分享你的觀點

你的觀點

想看原始訪談?

這頁整理自 Every YouTube 頻道。原始影片保留 Dan Shipper 與 Edwin Chen 對 Surge、環境訓練、研究級數學、AI 產品指標、個人化資料與寫作品味的完整討論。

前往 YouTube →