GPT-4o新版本突然上線,更強(qiáng)更便宜。
能力全方位提升,ZeroEval基準(zhǔn)測(cè)試直接躍居第一。
輸入和輸出分別節(jié)省50%、33%。
四舍五入就是API降價(jià)啊。
token輸出擴(kuò)展到16k,此前支持4k。
9.11和9.9誰(shuí)大這個(gè)問(wèn)題,也能絲滑解決。
這是因?yàn)镺penAI給API中引入了結(jié)構(gòu)化輸出。
通過(guò)JSON 模式確保模型輸出符合開(kāi)發(fā)者定義的結(jié)構(gòu),能讓模型變得更可靠安全。
新版模型“GPT-4o-2024-08-06”在JSON模式評(píng)估中,得分100%。
相比之下,去年6月的版本得分還低于40%。
在代碼編輯方面,新版本的基準(zhǔn)得分和此前版本相同,但是現(xiàn)在成本只有原來(lái)的一半。
還有人發(fā)現(xiàn),這個(gè)新版本是OpenAI在圖像輸入上便宜的型號(hào)。
API支持結(jié)構(gòu)化輸出
去年OpenAI DevDay上,官方正式給GPT-4引入了JSON模式,可以幫助開(kāi)發(fā)者構(gòu)建應(yīng)用程序。
盡管JSON模式能提高模型可靠性,但是它并不能保證模型生成結(jié)果符合特定模式。
因此在這次更新中,OpenAI在API中引入結(jié)構(gòu)化輸出,可以確保模型生成內(nèi)容和開(kāi)發(fā)者提供的JSON模式完全匹配。
主要形式有兩種:
1、函數(shù)調(diào)用:通過(guò)在函數(shù)定義中設(shè)置strict:true來(lái)調(diào)用結(jié)構(gòu)化輸出。
此功能適用于所有模型型號(hào),包括gpt-4-0613和gpt-3.5-turbo-0613等。當(dāng)結(jié)構(gòu)化輸出被啟用時(shí),模型輸出將匹配提供的工具定義。
2、response_format參數(shù)新選項(xiàng)。
開(kāi)發(fā)者可以通過(guò)json_schema (response_format參數(shù)的新選項(xiàng))提供JSON模式。
當(dāng)模型不是調(diào)用工具,而是以結(jié)構(gòu)化的方式響應(yīng)用戶時(shí),這是有用的。該功能適用于gpt-4o-2024-08-06和gpt- 4o-mini-2024-07-18。當(dāng)response_format使用strict: true提供時(shí),模型輸出將與提供的模式匹配。
OpenAI更新了Python和Node SDK,支持本地的結(jié)構(gòu)化輸出功能。
此外,還強(qiáng)調(diào)了安全輸出。新模式將遵循現(xiàn)有的安全規(guī)則,并引入了refusal字符串值來(lái)幫助開(kāi)發(fā)者識(shí)別模型拒絕 unsafe 請(qǐng)求的情況。
結(jié)構(gòu)化輸出還可以用于動(dòng)態(tài)生成用戶界面、分離終答案與推理過(guò)程、從非結(jié)構(gòu)化數(shù)據(jù)中提取結(jié)構(gòu)化數(shù)據(jù)等多種用例。
后在價(jià)格方面,輸入價(jià)格為2.5美元/100萬(wàn)token,輸出價(jià)格為10美元/100萬(wàn)token。
由于新模型在輸入和輸出上能更節(jié)省,四舍五入也是降價(jià)了。
有人發(fā)現(xiàn),這個(gè)新模型的輸出沒(méi)有上一版本那么冗長(zhǎng),成本上更可控。
參考鏈接:https://openai.com/index/introducing-structured-outputs-in-the-api/
本文鏈接:http://www.zh1234.com/news41430.htmlGPT-4o新版本突然上線:絲滑解決9.11和9.9誰(shuí)大