解決多模態(tài)大模型幻覺問題的秘密武器：“啄木鳥”免重訓(xùn)方法！哪里出問題啄哪里！

AIGC動(dòng)態(tài)歡迎閱讀

原標(biāo)題：解決多模態(tài)大模型幻覺問題的秘密武器：“啄木鳥”免重訓(xùn)方法！哪里出問題啄哪里！

關(guān)鍵字：幻覺,模型,問題,啄木鳥,對(duì)象

文章來源：夕小瑤科技說

內(nèi)容字?jǐn)?shù)：6279字

內(nèi)容摘要：夕小瑤科技說 原創(chuàng)作者 | 付奶茶、王二狗最近多模態(tài)大模型的研究取得了巨大的進(jìn)展。然而，這些模型在生成時(shí)存在著文本與圖像不一致的問題，這個(gè)問題就是一直困擾研究者們的“幻覺難題”。▲給定一幅圖像，MLLM會(huì)輸出的回應(yīng)，包括了物體層面和屬性層面的幻覺。為了緩解這個(gè)問題，中科大開發(fā)了一種名為Woodpecker（啄木鳥）的新方法。這個(gè)方法可以從生成的文本中挑選出幻覺并進(jìn)行糾正。具體來說，直接從模型給出的…

原文鏈接：點(diǎn)此閱讀原文：解決多模態(tài)大模型幻覺問題的秘密武器：“啄木鳥”免重訓(xùn)方法！哪里出問題啄哪里！

聯(lián)系作者

文章來源：夕小瑤科技說

作者微信：xixiaoyaoQAQ

作者簡介：更快的AI前沿，更深的行業(yè)洞見。聚集25萬AI應(yīng)用開發(fā)者、算法工程師和研究人員。一線作者均來自清北、國外頂級(jí)AI實(shí)驗(yàn)室和互聯(lián)網(wǎng)大廠，兼?zhèn)涿襟wsense與技術(shù)深度。