科技媒體 The Decoder 昨日（9 月 19 日）發(fā)布博文，報道稱在聊天機器人競技場（Chatbot Arena）上，OpenAI 的新人工智能模型 o1-preview 和 o1-mini 問鼎榜首。
聊天機器人競技場簡介
聊天機器人競技場是一個比較人工智能模型的平臺，它利用 6000 多個社區(qū)評分對新的 OpenAI 系統(tǒng)進行了評估。
結(jié)果
結(jié)果顯示，o1-preview 和 o1-mini 尤其在數(shù)學(xué)任務(wù)、復(fù)雜提示和編程方面表現(xiàn)出色。
Lmsys 提供的數(shù)學(xué)模型優(yōu)勢圖表清楚地顯示，o1-preview 和 o1-mini 的得分超過 1360 分，遠高于其他模型的表現(xiàn)。IT之家附上相關(guān)截圖如下：
O1 的目標是為人工智能推理設(shè)定一個通用新標準，即在回答前“思考”" 更長時間。
然而，O1 模型并非在所有方面都優(yōu)于 GPT-4o。許多任務(wù)并不需要復(fù)雜的邏輯推理，有時 GPT-4o 的反應(yīng)更快。
注意事項
o1-preview 和 o1-mini 的票數(shù)遠低于 GPT-4o 或 Anthropic's Claude 3.5 等成熟模型，每個模型都只有不到 3000 條評論，這樣小的樣本量可能無法準確代表實際結(jié)果，限制結(jié)果的意義。 
