OpenAI的客戶現(xiàn)在可以將自定義數(shù)據(jù)帶到GPT-3.5的輕量級(jí)版本,GPT-3.5 Turbo中,使其更容易提高文本生成AI模型的可靠性,同時(shí)建立特定行為。
OpenAI聲稱,經(jīng)過(guò)微調(diào)的GPT-3.5版本可以在“某些狹窄任務(wù)”上與GPT-4(該公司的旗艦?zāi)P停┑幕A(chǔ)能力相匹配甚至超越。
“自從發(fā)布了GPT-3.5 Turbo以來(lái),開(kāi)發(fā)人員和企業(yè)一直要求能夠定制模型,為他們的用戶創(chuàng)建獨(dú)特且有區(qū)別的體驗(yàn),”該公司在今天下午發(fā)布的博客文章中寫(xiě)道。 “此更新使開(kāi)發(fā)人員能夠定制更適合其用例并且可以大規(guī)模運(yùn)行這些定制模型?!?/p>
通過(guò)微調(diào),使用OpenAI API通過(guò)GPT-3.5 Turbo的公司可以使模型更好地遵循指令,例如使其始終以給定語(yǔ)言響應(yīng)?;蛘咚麄兛梢愿纳颇P鸵恢赂袷交憫?yīng)的能力(例如完成代碼片段),并且磨練模型輸出的“感覺(jué)”,例如其語(yǔ)調(diào),以便更好地適應(yīng)品牌或聲音。
此外,微調(diào)使OpenAI客戶能夠縮短文本提示以加快API調(diào)用并降低成本。 “早期測(cè)試人員通過(guò)將指令微調(diào)到模型本身中將提示大小減少了多達(dá)90%,”O(jiān)penAI在博客文章中聲稱。
微調(diào)目前需要準(zhǔn)備數(shù)據(jù),上傳必要文件并通過(guò)OpenAI API創(chuàng)建微調(diào)作業(yè)。所有微調(diào)數(shù)據(jù)都必須通過(guò)“審核”API和由GPT-4支持的審核系統(tǒng)進(jìn)行審核,以查看是否與OpenAI的安全標(biāo)準(zhǔn)沖突,該公司說(shuō)。但是OpenAI計(jì)劃未來(lái)推出一個(gè)微調(diào)UI,并帶有一個(gè)用于檢查正在進(jìn)行的微調(diào)工作負(fù)載狀態(tài)的儀表板。
微調(diào)費(fèi)用如下:
培訓(xùn):$0.008 / 1K tokens
使用輸入:$0.012 / 1K tokens
使用輸出:$0.016 / 1K tokens
“Tokens”表示原始文本-例如,“fan”,“tas”和“tic”表示單詞“fantastic”。具有100,000個(gè)令牌(約75,000個(gè)單詞)的訓(xùn)練文件的GPT-3.5-turbo微調(diào)作業(yè)將花費(fèi)約$2.40,OpenAI說(shuō)。
另外,在其他新聞中,OpenAI今天提供了兩個(gè)更新后的GPT-3基礎(chǔ)模型(babbage-002和davinci-002),它們也可以進(jìn)行微調(diào),并支持分頁(yè)和“更多可擴(kuò)展性”。如先前宣布的那樣,OpenAI計(jì)劃于2024年1月4日退役原始GPT-3基礎(chǔ)模型。
OpenAI表示,對(duì)GPT-4(與GPT-3.5不同,它除了文本外還能理解圖像)的微調(diào)支持將在今年秋天晚些時(shí)候到來(lái),但沒(méi)有提供具體細(xì)節(jié)。
原創(chuàng)文章,作者:AI,如若轉(zhuǎn)載,請(qǐng)注明出處:http://rponds.cn/article/577089.html