【儀表網(wǎng) 產(chǎn)業(yè)報道】近日，美國開放人工智能研究中心(OpenAI)介紹了其最新的人工智能(AI)推理模型——o3及其輕量版o3-mini。
o3能夠進(jìn)行復(fù)雜任務(wù)的推理，在科學(xué)、編碼、數(shù)學(xué)等領(lǐng)域的表現(xiàn)要優(yōu)于前一代o1模型，同時花費(fèi)的處理時間也會更長。以一項評估AI高級數(shù)學(xué)推理能力的測試EpochAI Frontier Math為例，以往所有模型都未達(dá)到2%的準(zhǔn)確率，而o3準(zhǔn)確率達(dá)到了創(chuàng)紀(jì)錄的25%。
在2024年美國數(shù)學(xué)邀請賽中，o3模型的準(zhǔn)確率高達(dá)96.7%，僅答錯了一個問題。而在OpenAI研究人員認(rèn)為最嚴(yán)格的基準(zhǔn)測試之一——Frontier Math中，o3也解決了25.2%的問題。盡管這一得分看似不高，但此前其他大型語言模型曾在此“集體翻車”，正確率均未超過2%。
在對科學(xué)知識的掌握方面，o3的表現(xiàn)也超出一般博士水平。在GPQA Diamond(衡量模型在博士級科學(xué)問題上的表現(xiàn)，涵蓋化學(xué)、物理和生物學(xué)方面的專業(yè)知識)基準(zhǔn)測試中，o3的準(zhǔn)確率達(dá)到87.7%，超過了人類博士的70%，也比之前o1表現(xiàn)高近10%。
此外，o3的編碼能力也比之前的o1系列更勝一籌。在 SWE-bench Verified(衡量AI模型解決現(xiàn)實世界軟件問題的能力)基準(zhǔn)上，o3的準(zhǔn)確率約為71.7%，比o1高20%以上。在Codeforces編碼競賽平臺中，o3的得分為2727，相當(dāng)于榜單上第175名人類編程員的水平，而o1得分僅為1891。
o3模型讓OpenAI在通往AGI的道路上又邁前了一步。在相關(guān)基準(zhǔn)測試ARC-AGI中，高配版o3得分為87.5%，低計算設(shè)置下o3得分為75.7%，是o1模型的三倍。但高計算模式需要花費(fèi)極其昂貴的成本，每個任務(wù)高達(dá)數(shù)千美元，低計算模式則需要20美元左右。
所有評論僅代表網(wǎng)友意見，與本站立場無關(guān)。