大語(yǔ)言模型問(wèn)答任務(wù)準(zhǔn)確性評(píng)價(jià)方法及基于微調(diào)的垂直領(lǐng)域優(yōu)化研究
所屬分類(lèi)：技術(shù)論文
上傳者：wwei
文檔大小：5136 K
標(biāo)簽： 大語(yǔ)言模型 問(wèn)答任務(wù) 語(yǔ)料庫(kù)
所需積分：0分積分不夠怎么辦？
文檔介紹：隨著自然語(yǔ)言處理技術(shù)的進(jìn)步，大語(yǔ)言模型展現(xiàn)了強(qiáng)大的語(yǔ)義理解和生成能力，但在實(shí)際應(yīng)用中，其問(wèn)答準(zhǔn)確性仍面臨諸多挑戰(zhàn)，特別是垂直領(lǐng)域應(yīng)用。首先梳理了通用大語(yǔ)言模型問(wèn)答生成能力常見(jiàn)的評(píng)價(jià)指標(biāo)，其次，從基于詞匯的自動(dòng)評(píng)價(jià)方法、人工評(píng)價(jià)方法和基于大語(yǔ)言模型的評(píng)價(jià)方法三方面，闡述通用大語(yǔ)言模型問(wèn)答任務(wù)準(zhǔn)確性評(píng)價(jià)方法，而后，針對(duì)通用大語(yǔ)言模型垂直領(lǐng)域問(wèn)答準(zhǔn)確性較低的問(wèn)題，以ChatGLM36B和國(guó)防動(dòng)員領(lǐng)域?yàn)槔岢隽藰?gòu)建垂直領(lǐng)域語(yǔ)料庫(kù)、精細(xì)化處理數(shù)據(jù)、定制化微調(diào)的“三步走”優(yōu)化方法，通過(guò)人工評(píng)價(jià)和基于詞匯的自動(dòng)評(píng)價(jià)的方式進(jìn)行3輪測(cè)試評(píng)估，解決了通用大語(yǔ)言模型垂直領(lǐng)域問(wèn)答精度較低的問(wèn)題，顯著提升問(wèn)答準(zhǔn)確性。相關(guān)成果有望為其他通用大語(yǔ)言模型和垂直領(lǐng)域應(yīng)用提供參考。
現(xiàn)在下載
VIP會(huì)員，AET專(zhuān)家下載不扣分；重復(fù)下載不扣分，本人上傳資源不扣分。