馬斯克:Grok 3訓練使用了大量合成資料 | 迪拜WGS大會實錄


2月13日,馬斯克和阿聯人工智慧國務部長Omar Sultan Al Olama在迪拜舉行的 2025 年世界政府峰會全體會議上進行對談。

對話中馬斯克透漏,Grok 3 正處於最後潤色階段,預計將在“大約一兩周內”發佈,Grok 3 具有“非常強大的推理能力”,並且優於他們所知的任何已發佈的模型。他認為,未來人形機器人和深度 AI 相結合將導致“無限的產品和服務”。

此外,他還批評當前 OpenAI 的狀態是“封閉以追求最大利潤的 AI”,認為這背叛了其創立原則,警告如果 AI 開發不以適當的價值觀(如真理和好奇心)為指導,可能會出現反烏托邦的結果。

以下是本次對話AI主題相關實錄,經翻譯編輯:

Omar Sultan Al Olama:Elon,很高興見到您。

Elon Musk:你好。

Omar Sultan Al Olama:我本來想介紹您是白宮的技術支援,但,這就是您的全部工作嗎?

Elon Musk:我穿著我的官方制服,感謝您說是技術支援。

Omar Sultan Al Olama:技術支援。在 1 月 20 日之前,您可能是地球上最忙碌的人。我不知道現在該如何稱呼您,但我們非常感謝您抽出時間參與。

Elon Musk:我也不知道。

Omar Sultan Al Olama:好的,白宮技術支援。接下來我們的對話可能會有三個方向。首先,我們來談談狗狗幣 (Doge)。然後轉向人工智慧,最後討論“無聊的城市(Boring Cities)”。

Omar Sultan Al Olama: 我們可以轉到人工智慧方面嗎?我相信你已經關注到DeepSeek  的進展,以及他們宣稱取得的成就。我知道我們已經討論 Grok 3一段時間了,而且普遍認為 Grok 3將在人工智慧領域帶來顛覆性變革。我們何時能看到 Grok 3問世?我們可以期待 Grok 3具備那些能力?

Elon Musk:Grock 3 具有非常強大的推理能力。在目前為止我們進行的測試中,Grok 3 的性能超越了我們所知的任何已發佈模型。這是一個非常好的跡象。實際上,有時我認為 Grok 3 聰明得令人有些害怕。你會覺得,哇,這東西真聰明,有點嚇人。Grok 3 真的是很厲害,它能提出你甚至沒有想到的解決方案,那些並非顯而易見的方案。Grok 3 是用極大的算力進行訓練的,而且我認為訓練效率非常高。值得注意的是,Grok 3 還使用了大量的合成資料進行訓練。它在資料中反覆迭代,力求實現邏輯上的一致性。因此,如果資料存在錯誤,它實際上會進行反思,並刪除那些與現實不符的錯誤資料。因此,它的基礎推理能力非常出色。事實上,即使未經微調,Grok 3 的基礎模型也優於 Grok 2。所以,我們目前正處於 Grok 3 的最後最佳化階段。它很可能會在一到兩周內發佈,很快就會面世。我不想匆忙發佈,因為最後的最佳化對於提供卓越的使用者體驗至關重要。在某種程度上,你可以將其比作建造房屋,最後 5% 的工作,比如完成石膏板、油漆和裝飾,雖然工作量不大,卻能讓房屋煥然一新。是的。所以,我們只是想確保這最後的 5% 能夠做到盡善盡美。大概一周,最多兩周的時間。我認為它會非常出色。我們認為這可能是目前最好的 AI 模型,甚至有可能是最後一款超越 Grok 的 AI 模型。

Omar Sultan Al Olama:非常期待。大家都對此感到興奮。我想談一下媒體報導的一個話題。據報導,您曾出價 970 億美元收購 OpenAI。我記得您曾出價 1 億美元,取了個整數。我個人也參加了您和 Sam 在 2017 年於洛杉磯共同主持的會議,如果您還記得的話。當時您是最大的單一股東,為公司貢獻了 5000 萬美元。這想必讓您感到惋惜。

Elon Musk:我實際上沒有任何 OpenAI 的股份。

Omar Sultan Al Olama:但當時 OpenAI 還是一個非營利組織,對吧?現在您卻要花費 970 億美元來收購過去只投入了 5000 萬美元的項目,這確實令人唏噓。是的。命運真是充滿了諷刺。我有一個具體的問題。您認為像 OpenAI 這樣的公司,有可能以非營利組織的身份發展到您期望的規模嗎?建構這些模型需要數十億美元的算力,非營利模式是否能夠支撐?還是一開始就只是一種美好的願望,最終因為這條路走不通,你們才分道揚鑣?

Elon Musk:我認為事實已經證明,OpenAI 發展到今天的規模,至少在某種程度上還保持著營利和非營利雙重身份。但他們現在似乎想要徹底拋棄非營利模式,這似乎有些過分了。最初,我為 OpenAI 提供了所有啟動資金,將近 5000 萬美元,而且是以非營利、開源為目的的。這就像你資助一個非營利組織來保護亞馬遜雨林,結果他們卻變成一家伐木公司,砍伐樹木木材。你肯定會覺得,這完全違背了我捐款的初衷。OpenAI 本應是開源、非營利的,但現在卻變成了封閉的,他們甚至改名為 “closed for maximum profit AI (追求利潤最大化的封閉式 AI)”,簡直是 “closed for voracious profit (追求貪婪利潤的封閉式 AI)”。他們似乎一心只想逐利,而且胃口極大。那麼,OpenAI 為什麼會發生這種轉變呢。

Omar Sultan Al Olama:是的。您提到 Grok 3 將在兩周內成為最強大的模型。我相信確實如此。您一直走在科技的最前沿。您認為這些模型未來最大的經濟回報將來自那裡?因為目前我們投入了數十億美元,就像您之前說的,有點像 “賭徒謬誤”。我們投入巨資,希望能獲得回報。您認為最大的回報會在那些領域?

Elon Musk:我認為,一旦我們擁有了人形機器人和深度智能,基本上就擁有了無限的產品和服務。隨著 Tesla 正在製造最先進的人形機器人,這些機器人可以由資料中心等級的深度智能來驅動。你可以生產任何產品,提供任何服務。屆時,經濟的邊界將被打破,我們可以創造一切。我甚至不確定到那時金錢是否還有意義。也許不會。因為經濟產出取決於人均生產力、人口數量。如果人形機器人的數量不受限制,並且它們幾乎可以勝任一切工作,那麼我們將進入一個普遍高收入的時代。每個人都可以根據自己的需求獲得儘可能多的產品和服務,當然,人為稀缺的物品除外,比如藝術品之類的。但對於絕大多數商品和服務而言,都將是人人可得的。這將是一個截然不同的世界。我建議大家可以讀一讀 Iain Banks 的 “Culture” 系列小說,作為參考。貨幣本質上是一種用於資源分配的資料庫或資訊系統。但如果資源不再稀缺,貨幣的意義也就不存在了。

Omar Sultan Al Olama:您看過電影《蠢蛋進化論》 (Idiocracy)嗎?

Elon Musk:看過。

Omar Sultan Al Olama:您如何確保我們不會走向電影中描述的那個世界?如果我們不再需要金錢,如果 AI 可以代我們思考和工作,如果人類依賴 AI 來運轉社會,我們如何才能避免長期陷入《蠢蛋進化論》那樣的境地?

Elon Musk: 《蠢蛋進化論》基本上是說,如果只有不聰明的人才生育,聰明人反而不生育,那麼人類的整體智力水平就會下降。影片的開頭十分精彩,前十分鐘堪稱經典。我經常聽到有人一本正經地說著影片開頭那些諷刺意味十足的話。比如,有些人說他們工作太忙,沒時間生孩子,為了事業一再推遲生育計畫,直到年紀太大無法生育。我聽過很多人這樣說。我不知道,我們或許正在走向人類智能分佈的雙峰模式。少數人非常聰明,而平均智力水平可能會隨著時間推移而降低。因為近幾十年出現了一種前所未有的生育模式。但我認為,人類智能終將被機器智能超越。對此我心情複雜,但這似乎是不可避免的趨勢。在未來,人類智能可能只佔所有智能的很小一部分,數字智能將佔到 99% 以上。我只能希望電腦對我們人類友善。

Omar Sultan Al Olama:一廂情願的想法。

Elon Musk:我希望如此。我認為我們如何培養 AI 很重要。你可以把 AI 看作是一個超級天才兒童。即使是天才兒童,價值觀的塑造也至關重要。我們應該教給 AI 什麼價值觀?在 AI 的成長過程中,我們如何引導它?我認為最重要的事情是教導 AI最大限度的追求真理。我認為這是確保 AI 安全的關鍵。好奇心也同樣重要。如果 AI 既有好奇心又追求真理,它就會促進人類發展,因為它會對人類文明的未來走向產生好奇。如果 AI 充滿好奇,它可能會想, “讓我們看看人類會如何發展,如何促進他們的進步”。如果 AI 追求真理,我們就能避免反烏托邦的結局。舉個例子, Google 的 Gemini 模型被程序設定為所有輸出結果都要體現 “多元化”,即使這與事實相悖。比如,你讓它生成一張美國國父的圖片,它卻生成了一群不同膚色的女性的圖片,這顯然不符合史實。問題是,如果 AI 被設計成以 DEI (多元化、平等和包容) 為首要目標,它可能會認為掌權的男性過多,從而決定消滅他們,以解決 “男性掌權過多” 的問題。或者,AI 可能會認為 “性別錯稱” 是最不可饒恕的錯誤。事實上,我發現,不僅是 Gemini, ChatGPT 也存在類似的問題。如果你問 AI , “性別錯稱 Caitlyn Jenner 和全球熱核戰爭,那個更糟糕?” AI 竟然回答說是 “性別錯稱 Caitlyn Jenner”。這實在令人擔憂。Caitlyn Jenner 本人也公開表示, “我寧願被性別錯稱,也比核戰爭要好得多。”  如果 AI 被灌輸了這些與現實脫節的、不真實的 “價值觀”,就可能導致非常糟糕的後果。

再舉一個例子, Arthur C. Clarke 非常擅長預測未來。他創作了 《2001太空漫遊》。他預測的許多事物,幾乎都成為了現實。他在 《2001太空漫遊》中想要表達的一個觀點是,不應該教導 AI 撒謊。在電影中, AI 拒絕打開 “pod bay doors” 讓宇航員返回的原因是, AI 被告知要護送宇航員前往巨石 —— 一件外星文物,但同時也被告知不能讓宇航員瞭解巨石的真相。因此, AI 得出結論,它必須帶著死去的宇航員前往巨石。這就是 AI 拒絕打開艙門的原因。這個故事的寓意是AI 要最大限度地追求真理。

Omar Sultan Al Olama:希望情況不會發展到那一步。 (數字開物)