OpenAI推出了新的功能：微調(diào)！我們把要點(diǎn)劃出來了！

# 簡介

GPT-3.5 Turbo支持自定義微調(diào)功能

- 開發(fā)者可以上傳自己的數(shù)據(jù)進(jìn)行定制大模型

- 微調(diào)后的模型在某些任務(wù)中甚至可以超越GPT-4

# 定價(jià)計(jì)劃

微調(diào)費(fèi)用

- 初始訓(xùn)練費(fèi)用和使用費(fèi)用

- 10萬tokens訓(xùn)練數(shù)據(jù)集的微調(diào)工作成本大概在2.40美元

- 微調(diào)成本被吐槽太高，是基礎(chǔ)模型的8倍

# 自定義微調(diào)的應(yīng)用

改進(jìn)模型性能

-可操縱性的改進(jìn)，模型能夠更好地遵循指令

- 輸出簡潔回答或始終以給定的語言響應(yīng)

- 一致的格式化響應(yīng)，將用戶提示轉(zhuǎn)換為高質(zhì)量JSON代碼片段

定制語氣和品牌聲音

- 微調(diào)可以更好磨煉模型輸出的質(zhì)感，比如語氣

- 適合企業(yè)品牌聲音

#微調(diào)限制

tokens限制

- 目前僅支持處理4000 tokens

- 16k tokens微調(diào)將在今年秋季推出

微調(diào)成本高

- 價(jià)格比基礎(chǔ)模型高很多

- 需要按照他們所說“將提示大小減小90%”才能從中獲取效益

# 微調(diào)步驟

- 準(zhǔn)備數(shù)據(jù)

- 上傳文件創(chuàng)建微調(diào)作業(yè)

- 使用微調(diào)模型

- 未來將推出微調(diào)UI

參考鏈接：

[1]https://openai.com/blog/gpt-3-5-turbo-fine-tuning-and-api-updates

[2]https://news.ycombinator.com/item?id=37227139

技術(shù)支持 ↓ 

加入社群領(lǐng)取資料包 ↓