谷歌最近在緊鑼密鼓地準備推出他們的最新語言模型 Gemini2.0,預計將在12月份與大家見面。根據來自《The Verge》的消息來源,儘管 Gemini2.0可能不會帶來我們期待的重大性能提升,但還是會推出一些有趣的新功能。與此同時,有消息稱一些商業客戶已經提前獲得了這個新模型的使用權限。
在 AI 領域,其他公司也在積極推進自的項目。比如,埃隆・馬斯克的 xAI 利用在其孟菲斯超級計算中心的100,000個 Nvidia H100芯片來訓練 Grok3,而 Meta 則在用更多的計算資源訓練 Llama4。
谷歌在其旗艦語言模型上的進展不盡如人意,這或許是他們近期以高達25億美元收購 Character.ai 的原因,主要是爲了引進著名的 AI 研究員諾亞・沙澤爾及其團隊。沙澤爾曾在2017年共同開發了 Transformer 架構,現在他據說正在谷歌研究一種新的推理模型,以此來與 OpenAI 的 o1進行競爭。
當前的研究者們希望,通過在推理階段(即 AI 處理信息的過程)使用更多的資源,而不是主要依賴於大數據集的預訓練,能夠實現更好的效果,並開闢出一個新的擴展視野。
過去兩年裏,AI 語言模型雖然變得更高效,但能力的提升卻並不明顯,這讓人們開始擔心當前方法可能面臨瓶頸。比爾・蓋茨也表示,從 GPT-4到 GPT-5的進步,可能會比以往的升級小得多。
此外,最近不同模型的性能趨於相似,這使得語言模型可能變成一種沒有明顯差異的商品,儘管開發和運營成本依舊高昂。當前語言模型的表現正在接近一個共同水平,而早期模型之間的差異正在縮小,這也表明現有模型架構可能已經達到性能平臺期。
與此同時,OpenAI 最近確認,內部被視爲潛在繼任者的 GPT-4新模型將不會在今年發佈,儘管谷歌 Gemini2.0即將面臨激烈的競爭。同樣,Anthropic 也傳出消息,旗下旗艦 Opus 模型的版本3.5因缺乏顯著進展而被擱置,轉而專注於更優版本的 Sonnet3.5。
劃重點:
🔍 谷歌 Gemini2.0預計將在12月份發佈,可能不會帶來大幅性能提升,但會有新功能。
🤖 其他科技公司如 xAI 和 Meta 也在積極推進各自的 AI 項目,競爭加劇。
📉 AI 語言模型的性能趨於一致,行業面臨增長乏力的挑戰,或進入平臺期。