微軟Copilot進化完全體,代碼解釋器、DALL·E 3,ChatGPT有的它都有
Copilot發(fā)布一周年之際,將迎來一系列重磅更新!
聊天將支持128k上下文,ChatGPT的代碼解釋器也將被引入……
可以說,微軟這次是把GPT有的功能幾乎全搬進了Copilot。
不僅功能完備,Copilot的入口更加豐富多樣,響應(yīng)速度也更快捷,關(guān)鍵是還免費。
就在宣布更新幾天前,Copilot剛剛結(jié)束近一年的預(yù)覽階段,轉(zhuǎn)而成為正式版本。
同時微軟還宣布,Copilot在這一年中已經(jīng)產(chǎn)生了數(shù)十億次聊天。
那么,此次Copilot都更新了什么內(nèi)容呢?
新增代碼解釋器
首先來看從GPT中搬來的功能,包括新功能的引入和既有功能的強化。
模型層面,微軟計劃在Copilot中使用GPT4-Turbo模型進行響應(yīng),這意味著將支持128k長度的上下文窗口。
微軟執(zhí)行副總裁Yusuf Medhi說,GPT-4 Turbo將在未來幾周內(nèi)廣泛集成到 Copilot 中。
而ChatGPT中最好用的高級數(shù)據(jù)分析(原代碼解釋器)功能也確定將在Copilot中被復(fù)刻。
與ChatGPT相似,Copliot中的代碼解釋器將支持在沙盒環(huán)境中運行Python代碼。
沙盒中預(yù)裝了許多流行的數(shù)據(jù)科學(xué)工具和庫,例如numpy、matplotlib等,以解決復(fù)雜的問題。
同時,Copilot還可將用戶上傳文件和網(wǎng)絡(luò)搜索結(jié)果與代碼解釋器結(jié)合,得到交互式輸出。
目前這項功能正在進行小范圍測試,并將很快向公眾提供。
除了新功能之外,Copilot中已經(jīng)集成的DALL·E 3繪圖功能也將迎來升級。
和原版相比,搭載新版DALL·E 3的新Copilot在細(xì)節(jié)的處理上更為細(xì)膩。
微軟在通告中具體展示了一組對比:
photorealistic stegosaurus having its bony plates attended to by a nail salon
而關(guān)于Bing的老本行——搜索,此次也有兩項更新。
首先是搜索與多模態(tài)的結(jié)合,Copilot將可以通過視覺模型識別到的內(nèi)容,自動搜索關(guān)聯(lián)信息,生成更為準(zhǔn)確詳細(xì)的回答。
微軟展示的案例中,用戶上傳了一張火箭發(fā)射的照片,并提問發(fā)射時間,Copilot在識別火箭型號后再網(wǎng)絡(luò)中對答案進行了搜索。
另一項則是深度搜索,在GPT-4的加持下,Copilot可以更好地理解用戶意圖,在有歧義時還會進一步詢問,以消除歧義。
比如我們問及了關(guān)于“subway”的問題,它既可以指地鐵,也可以指一家快餐店,這時Copilot就會確認(rèn)意圖,使結(jié)果更有針對性。
GPT-4還會根據(jù)搜索結(jié)果與綜合描述的匹配程度對它們進行排名,讓答案變得更好。
還有Edge專屬功能
此外,此次更新中還推出了一些Edge瀏覽器中的限定功能,目前已經(jīng)可以體驗。(如果沒有,可以嘗試使用Dev版本)
此前Edge側(cè)邊欄中的Copilot已經(jīng)可以對網(wǎng)頁內(nèi)容進行總,現(xiàn)在這項功能也已經(jīng)升級,可以對YouTube中的視頻進行理解。
比如下面這段OpenAI開發(fā)者日的開場視頻,Copilot不僅總結(jié)出了整體內(nèi)容,還提煉出了關(guān)鍵時間點,就連奧特曼登場的時間都能標(biāo)記出來。
同樣在側(cè)邊欄中,文本生成功能也迎來一項改進——Copilot中生成的文本,可以一鍵填寫到網(wǎng)頁輸入框中。
比如我們想給馬斯克寫郵件訂購一輛Cybertruck,只要在側(cè)邊欄的生成菜單中輸入需求并選擇風(fēng)格和長度,生成只要點擊“Add to site”就可以放到輸入框中,省去了選中再復(fù)制粘貼的過程。
你期待Copilot這波更新嗎?