熱門資訊> 正文
2025-07-03 08:45
夢晨 發自 凹非寺
量子位 | 公眾號 QbitAI
馬斯克旗下xAI的重磅炸彈Grok 4提前泄露了!
有開發者在xAI控制檯的源代碼中意外發現了兩個全新模型Grok 4和Grok 4 Code。
與此同時,xAI剛剛完成了一輪100億美元(約716億人民幣)的鉅額融資。
更有意思的是,xAI選擇跳過原計劃5月上線的Grok 3.5版本,直接推出Grok 4。
團隊內部把這種做法叫「極限迭代」——要麼不更新,要更新就來個大的。
這很符合馬斯克一貫的風格,就像當年特斯拉直接跳過傳統汽車廠商的漸進式改良,一步到位搞純電車一樣。
馬斯克要「重寫人類知識庫」
Grok 4被定位為」最新、最強大的旗艦模型」,官方宣稱它在自然語言、數學和推理方面提供無與倫比的性能,堪稱萬能的完美之選。
Grok 4目前支持文本模態,視覺、圖像生成和其他功能即將推出,將包含函數調用、結構化輸出和深度思考功能。
Grok 4的上下文窗口為13萬個token,比許多前沿模型要小,這可能表明xAI正在優化推理速度和實時可用性,而非長文本。
另一處文本指出它在提取數據、代碼、文本總結等企業應用中性能出色,並且擁有金融、醫療、法律和科學知識。
Grok 4 Code是專為編程打造的垂直模型,可以直接嵌入到Cursor等代碼編輯器中使用。
從中可以看出,xAI爭奪開發者市場的意圖明顯。
但馬斯克的野心遠不止於此,他提出了一個聽起來就很「馬斯克」的宏大目標:
利用Grok 4的推理能力重寫整個人類知識庫,補充缺失的內容,糾正錯誤的知識,然后基於這個「純淨版」知識庫重新訓練AI。
只不過這個缺失是他認為的缺失,錯誤是他認為的錯誤。
事實上馬斯克已經小範圍這樣試驗過了,5月份,Grok在回答各種不相關的問題時都會隨機提到「南非發生白人種族滅絕」的説法,並且承認自己被指示接受這個非真實發生的事件。
馬斯克在南非出生長大,他一直認為南非發生了「白人種族滅絕」。
幾天后,xAI表示凌晨發生的一次「未經授權的修改」迫使AI聊天機器人「對某些話題做出具體迴應」,這違反了xAI的政策。
對於這個事件,Cohere聯合創始人Nick Frosst就擔心Grok 4會不會變成「馬斯克觀點的放大器」。
也有網友表示自己會通過收藏紙質書籍來保存人類知識的原貌,對抗AI的「修正」。
退一萬步説,即使技術角度馬斯克的構想也存在一些問題。
谷歌DeepMind研究VP Oriol Vinyals指出,如果從訓練數據中刪掉所有錯誤,模型也許會失去檢測和修復新錯誤的能力。
百億美金撐腰,算力拉爆電力
無論對錯,馬斯克要乾的都是一件大事,沒有真金白銀可不行。
xAI再次融資100億美元,距離60億美元C輪融資、估值500億美元僅過去六個多月。
目前尚不清楚本輪融資后xAI的具體估值,此前xAI與X合併后估值高達1130億美元。
此次融資的參與者包括Valor Equity Partners 、Vy Capital 、 Andreessen Horowitz 、紅杉資本 、富達管理與研究公司、Kingdom Holding Co.等,採用了」股+債」的組合,股權和債務各佔50億美元。
有了這筆錢,馬斯克可以放心大膽地燒算力了。
説到算力,xAI在田納西州孟菲斯建成的超級計算中心」Colossus」已經部署了20萬塊GPU。
但這還不夠,他們還計劃再建一個擁有100萬塊GPU的新設施。
SemiAnalysis分析指出,這種千兆瓦級耗電量的數據中心給電網帶來了前所未有的壓力。
AI訓練工作負載不僅規模巨大,而且負載曲線也非常獨特, 會在幾分之一秒內從滿負荷突然變成幾乎空閒。
傳統的電網設計從未考慮過這種情況,最糟糕的情況下會導致大面積停電。
Meta在Llama 3技術報告中提到了電力波動的帶來訓練出錯的挑戰,而當時只是用到了24000塊H100。
目前的解決辦法是用虛擬工作負載,讓系統空轉來平滑功耗,但這樣做的缺點是每年的浪費的能源高達數千萬美元。
對於這個問題,馬斯克也有考慮,他引入了特斯拉的Megapack儲能系統來與超算中心配合。
並且特斯拉正在積極與各大電力公司和公共事業運營商合作,力求使其解決方案成為行業標準。
參考鏈接:
[1]https://www.testingcatalog.com/xai-prepares-grok-4-and-grok-4-code-for-upcoming-launch/
[2]https://semianalysis.com/2025/06/25/ai-training-load-fluctuations-at-gigawatt-scale-risk-of-power-grid-blackout/
(聲明:本文僅代表作者觀點,不代表新浪網立場。)