一個提示,讓Llama 2準確率飆至80.3%?Meta提出全新注意力機制S2A,大幅降低模型幻覺
AIGC動態(tài)歡迎閱讀
原標題:一個提示,讓Llama 2準確率飆至80.3%?Meta提出全新注意力機制S2A,大幅降低模型幻覺
文章來源:新智元
內(nèi)容字數(shù):7039字
內(nèi)容摘要:新智元報道編輯:alan【新智元導(dǎo)讀】大語言模型「拍馬屁」的問題到底要怎么解決?最近,LeCun轉(zhuǎn)發(fā)了Meta發(fā)布的一篇論文,研究人員提出了新的方法,有效提升了LLM回答問題的事實性和客觀性。我們一起來看一下吧。2023的科技界,可以說是被大模型搶盡了風頭(虛假的室溫超導(dǎo)除外)。我們經(jīng)歷了和LLM對話,見證了它們逐漸進入各個領(lǐng)域,甚至開始感受到威脅。這一切,僅僅發(fā)生在一年之內(nèi)。當然了,基于大語言模型的原理,它誕生之時就有的一些毛病到現(xiàn)在也沒有完全改正。比如偏見(或包含不良信息)、幻覺(編造不存在的事情)、推理能力仍然比較弱(盡管有了step by step),還有一個問題是LLM傾向于迎合使用者的觀點(阿諛奉承)。第一個問題比較嚴重,因為它違背了大眾的價值觀。作為一個早于ChatGPT發(fā)布,又具有強大能力的產(chǎn)品,確實有點可惜。不過人與人的境遇都千差萬別,模型也要接受現(xiàn)實。對于最后一個問題,…
原文鏈接:點此閱讀原文:一個提示,讓Llama 2準確率飆至80.3%?Meta提出全新注意力機制S2A,大幅降低模型幻覺
聯(lián)系作者
文章來源:新智元
作者微信:AI_era
作者簡介:智能+中國主平臺,致力于推動中國從互聯(lián)網(wǎng)+邁向智能+新紀元。重點關(guān)注人工智能、機器人等前沿領(lǐng)域發(fā)展,關(guān)注人機融合、人工智能和機器人對人類社會與文明進化的影響,領(lǐng)航中國新智能時代。