大模型角色扮演也有偏好?男性角色效果優(yōu)于女性角色?
AIGC動(dòng)態(tài)歡迎閱讀
原標(biāo)題:大模型角色扮演也有偏好?男性角色效果優(yōu)于女性角色?
文章來源:夕小瑤科技說
內(nèi)容字?jǐn)?shù):7923字
內(nèi)容摘要:夕小瑤科技說 原創(chuàng)作者 | 謝年年、python我們?cè)谠O(shè)計(jì)prompt時(shí),為了激發(fā)大模型的能力,總是讓它扮演不同的角色:你是一個(gè)出色的助手、翻譯家、廚師、計(jì)算機(jī)科學(xué)家…當(dāng)然使用最多的還是“您是一個(gè)有益的助手”,即“You are a helpful assistant”,這也是ChatGPT的默認(rèn)系統(tǒng)提示的一部分。那么讓大模型扮演哪個(gè)角色更有利于正確輸出呢?先來看看一個(gè)有趣的實(shí)驗(yàn)結(jié)論,如下圖所示,展示了不同角色在flan-t5和llama-2兩大模型上的排名,效果最好的角色用紅色高亮標(biāo)出。就FLAN-T5-XXL和LLAMA2-7B-Chat而言,“mentor“和“partner”都獲得了靠前的排名。mentor誠(chéng)不欺我。而我們最常用的“helpful assistant”排在二三十名開外,是時(shí)候替換掉這個(gè)角色了。當(dāng)然最佳角色也因模型而異,在FLAN-T5-XXL中表現(xiàn)最好的“pol…
原文鏈接:點(diǎn)此閱讀原文:大模型角色扮演也有偏好?男性角色效果優(yōu)于女性角色?
聯(lián)系作者
文章來源:夕小瑤科技說
作者微信:xixiaoyaoQAQ
作者簡(jiǎn)介:更快的AI前沿,更深的行業(yè)洞見。聚集25萬AI應(yīng)用開發(fā)者、算法工程師和研究人員。一線作者均來自清北、國(guó)外頂級(jí)AI實(shí)驗(yàn)室和互聯(lián)網(wǎng)大廠,兼?zhèn)涿襟wsense與技術(shù)深度。