GPT-4真的被反超了！

大模型競(jìng)技場(chǎng)上，Claude 3大杯Opus新王登基，Elo分?jǐn)?shù)來(lái)到榜首。

連小杯Haiku也躋身第二梯隊(duì)，超過了GPT-4-0613這個(gè)型號(hào)，把GPT-3.5-turbo遠(yuǎn)遠(yuǎn)甩在身后。

Haiku的輸入token價(jià)格，可是比GPT-3.5-turbo還便宜了一半，輸出方面，每100萬(wàn)token也比GPT-3.5-turbo便宜近2塊錢。

跟GPT-4相比，價(jià)格更是只有1/20。并且Haiku同樣支持200k上下文。

難怪有開發(fā)者直言：

GPT-3.5在Claude Haiku面前不堪一擊。

不僅僅是價(jià)格更便宜，Haiku還更上一層樓了。

而在Claude 3加入競(jìng)技之前，GPT-4家族已經(jīng)霸榜快一年了。

給新來(lái)的朋友補(bǔ)充一下背景知識(shí)：大模型競(jìng)技場(chǎng)榜單（LMSYS Chatbot Arena Leaderboard）的評(píng)分標(biāo)準(zhǔn)是人類打分，同一個(gè)問題同時(shí)拋給A、B兩個(gè)模型，人類裁判覺得哪個(gè)回答得好就給哪個(gè)投票。

小杯Haiku成開發(fā)者新寵

值得一提的是，在競(jìng)技場(chǎng)官方賀電中，Haiku這個(gè)型號(hào)也被專門高亮了出來(lái)：

根據(jù)我們的用戶偏好，Claude 3 Haiku達(dá)到了GPT-4級(jí)別。

其速度、功能和上下文長(zhǎng)度在目前的市場(chǎng)上是獨(dú)一份的。

具體有多快，已經(jīng)有網(wǎng)友做了個(gè)直觀的對(duì)比：

博爾特還沒跑完100米，Haiku已經(jīng)讀完100k token的文檔了……

事實(shí)上，憑借其超高的性價(jià)比，在開發(fā)者社群中，Claude 3小杯Haiku確已成新寵。

已經(jīng)有人第一時(shí)間大開腦洞，搞出了能讓Haiku效果“超頻”到大杯Opus水準(zhǔn)的開源項(xiàng)目，吸引不少關(guān)注。

簡(jiǎn)單來(lái)說，就是讓Opus給Haiku當(dāng)老師：

先用Opus生成執(zhí)行任務(wù)的范例，再用這些教學(xué)案例來(lái)提高Haiku的姿勢(shì)水平。

劃重點(diǎn)：Haiku的價(jià)格僅為Opus的1/60，而響應(yīng)速度則是Opus的10倍。

這個(gè)名為gpt-prompt-engineer的項(xiàng)目目前在GitHub上累計(jì)攬下7.3k標(biāo)星。

還是這位馬特老哥，還用Opus和Haiku搞了個(gè)“AI股票分析師”，直接火上了GitHub熱榜。

不少應(yīng)用產(chǎn)品也在第一時(shí)間接入了Haiku。比如能依據(jù)Prompt自動(dòng)生成網(wǎng)站UI的Vercel。

△就說快不快吧

不過，就在一片給Claude 3新王點(diǎn)贊的聲音中，也有網(wǎng)友認(rèn)為：

GPT-3.5作為一個(gè)“老”模型，至今仍在與最新的模型競(jìng)爭(zhēng)，這件事本身就很瘋狂了。

但最讓開發(fā)者們期待的當(dāng)然還是：

OpenAI，快起來(lái)卷（doge）。