Llama 3.1開源的同一天，OpenAI也open了一回。

圖片

GPT-4o mini可以免費(fèi)微調(diào)了，每天暢用200萬訓(xùn)練token，限時(shí)2個(gè)月（截止9月23日）。

圖片

收到郵件的開發(fā)者們激動地奔走相告，這么大的羊毛一定要趕快薅。

圖片

另一邊，GPT-4o mini在大模型競技場LMSYS排名也出來了。

總榜單中，GPT-4o mini與GPT-4o并列第一。

圖片

Altman本尊激動地表示，我從未對任何一次評估如此興奮過，GPT-4o mini與GPT-4o性能如此接近，而價(jià)格僅有其1/20！

圖片

同時(shí)，他表示，GPT-4o mini的微調(diào)現(xiàn)在上線了。

圖片

OpenAI能把如此強(qiáng)大的模型，放出來讓大家免費(fèi)用，實(shí)在是出人意料。

網(wǎng)友一度以為，這可能是最高級的釣魚郵件。

圖片

每天200萬token，GPT-4o mini免費(fèi)微調(diào)

郵件中，OpenAI宣布現(xiàn)正式推出GPT-4o mini微調(diào)功能，為的是讓最新小模型在特定用例上，表現(xiàn)更加出色。

7月23日-9月23日期間，開發(fā)者們每天可以免費(fèi)使用200萬訓(xùn)練token。

圖片

超過的部分，將會按3美元百萬token收費(fèi)。

到了2個(gè)月免費(fèi)使用截止后，微調(diào)訓(xùn)練也將按照3美元百萬token收費(fèi)。

圖片

此外，OpenAI在郵件中給出了，每個(gè)人值得從GPT-3.5 Turbo切換到GPT-4o mini的原因：

- 更實(shí)惠：GPT-4o mini的輸入Token費(fèi)用比GPT-3.5 Turbo低90%，輸出Tokens費(fèi)用低80%。即使在免費(fèi)期結(jié)束后，GPT-4o mini的訓(xùn)練成本也比GPT-3.5 Turbo低一半。

圖片

- 更長的上下文：GPT-4o mini的訓(xùn)練上下文長度為65k Token，是GPT-3.5 Turbo的4倍，推理上下文長度為128k Token，是GPT-3.5 Turbo的8倍。

- 更聰明且更有能力：GPT-4o mini比GPT-3.5 Turbo更聰明，并且支持視覺功能（盡管目前微調(diào)僅限于文本）。

圖片

最后，郵件中還提到，GPT-4o mini微調(diào)功能將向企業(yè)客戶，以及Tier 4和Tier 5開發(fā)者開放，未來將逐漸擴(kuò)大訪問權(quán)限，擴(kuò)展至所有級別的用戶。

圖片

想要動手操作的小伙伴們，OpenAI已經(jīng)放出了微調(diào)指南，可參見：

https://platform.openai.com/docs/guides/fine-tuning/fine-tuning-examples

圖片

一部分網(wǎng)友對此并不看好，他們正在保存我們的數(shù)據(jù)，來訓(xùn)練和改進(jìn)AI模型。

圖片

「又名，把你的私人數(shù)據(jù)給我，我會收你很少的錢」。

圖片

網(wǎng)友用例

拿到資格的網(wǎng)友，已經(jīng)迫不及待上手測試了。

開發(fā)者使用《經(jīng)濟(jì)學(xué)人》風(fēng)格的頭條數(shù)據(jù)集，對gpt-4o mini進(jìn)行了微調(diào)。

圖片

圖片

然后，他比較了gpt-4o、gpt-4o min原始模型和微調(diào)后的模型在生成頭條方面的表現(xiàn)。

圖片

小模型霸榜，堪比GPT-4o

GPT-4o mini發(fā)布一周后，在大模型排行榜中的成績終于出來了。

共收到了4K+用戶投票，GPT-4o mini小模型直接攀升至榜首，與GPT-4o并列第一。

最最重要的是，便宜20倍！

圖片

這對于眾多開發(fā)者來說，是個(gè)好消息，能夠以更低的成本，搭建更強(qiáng)大的應(yīng)用。

圖片

在數(shù)學(xué)細(xì)分領(lǐng)域中，GPT-4o mini的性能有所下降，排在第9。

圖片

此外，在hard prompt評測中，GPT-4o mini依舊保持了穩(wěn)健的性能，實(shí)力僅次于GPT-4o、Claude 3.5 Sonnet。

圖片

在編碼領(lǐng)域，GPT-4o mini同樣展現(xiàn)出強(qiáng)大的能力。

圖片

關(guān)于GPT-4o mini在Arena中排名如此高的原因，很多人提出了疑問。

圖片

官方對此解釋是：

- Chatbot Arena根據(jù)不同領(lǐng)域的人類偏好進(jìn)行評估。鼓勵大家不僅關(guān)注總排行榜，還要查看各個(gè)類別的排名（如數(shù)學(xué)、編碼等）。

- Arena評估是實(shí)時(shí)進(jìn)行的。鼓勵大家在Arena中親自對比模型，實(shí)時(shí)驗(yàn)證自己的假設(shè)。

- 透明性是我們的核心價(jià)值；所有代碼和分析都是開源的（http://github.com/lm-sys/FastChat）。我們定期發(fā)布20%的數(shù)據(jù)，保留其余數(shù)據(jù)以避免過擬合，維護(hù)基準(zhǔn)測試的完整性。

- 我們將根據(jù)政策發(fā)布隨機(jī)的20% GPT-4o mini對戰(zhàn)數(shù)據(jù)，大家可以親自查看答案。

不過，另有網(wǎng)友認(rèn)為，gpt-4o-mini的勝利是一個(gè)實(shí)質(zhì)性的證據(jù)，證明了普通人并不那么聰明。

而且，這是歷史上首次，AI變得足夠聰明可以愚弄我們。有點(diǎn)瘋狂，也有點(diǎn)具有歷史意義。

圖片

圖片

參考資料：

https://x.com/moyix/status/1815840634013639086

https://x.com/HamelHusain/status/1815848198927434019

https://x.com/sama/status/1815877987696533897

https://x.com/0xSMW/status/1815869241205350641