KAG – 螞蟻集團(tuán)推出的專業(yè)領(lǐng)域知識服務(wù)框架

KAG（Knowledge Augmented Generation）是螞蟻集團(tuán)推出的一種專業(yè)知識服務(wù)框架，旨在通過知識增強(qiáng)技術(shù)提高大型語言模型（LLMs）在特定領(lǐng)域的問答能力。它為垂直領(lǐng)域的知識庫提供邏輯推理與問答解決方案，基于知識與文本塊的互索引結(jié)構(gòu)，整合非結(jié)構(gòu)化數(shù)據(jù)、結(jié)構(gòu)化信息及業(yè)務(wù)專家經(jīng)驗(yàn)，從而構(gòu)建統(tǒng)一的業(yè)務(wù)知識圖譜。

KAG是什么

KAG（Knowledge Augmented Generation）是螞蟻集團(tuán)開發(fā)的一種專業(yè)領(lǐng)域知識服務(wù)框架，致力于通過知識增強(qiáng)來提升大型語言模型（LLMs）在特定領(lǐng)域的問答能力。KAG為垂直領(lǐng)域的知識庫提供了邏輯推理與問答解決方案。其基礎(chǔ)是知識與文本塊之間的互索引結(jié)構(gòu)，能夠整合非結(jié)構(gòu)化數(shù)據(jù)、結(jié)構(gòu)化信息以及業(yè)務(wù)專家的經(jīng)驗(yàn)，形成一個統(tǒng)一的業(yè)務(wù)知識圖譜。KAG還推出了邏輯引導(dǎo)的混合推理引擎，將自然語言問題轉(zhuǎn)化為融合語言與符號的解決過程，支持邏輯推理和多跳事實(shí)問答等功能，有效克服了傳統(tǒng)RAG向量相似性計(jì)算的模糊性和OpenIE帶來的噪聲問題，從而顯著提升了推理和問答的準(zhǔn)確性與效率。

KAG的主要功能

• 專業(yè)領(lǐng)域問答增強(qiáng)：結(jié)合知識圖譜和向量檢索，提升大型語言模型在特定領(lǐng)域的問答能力，生成更精確、專業(yè)且邏輯嚴(yán)謹(jǐn)?shù)拇鸢浮?/li>
• 知識表示與檢索優(yōu)化：采用LLM友好的知識表示框架，實(shí)現(xiàn)知識圖譜與原始文本塊的雙向索引，優(yōu)化知識的表示、推理和檢索過程，提高檢索結(jié)果的準(zhǔn)確性和相關(guān)性。
• 混合推理與問題解決：基于邏輯引導(dǎo)的混合推理引擎，將自然語言問題轉(zhuǎn)化為結(jié)合語言與符號的問題解決過程，集成檢索、知識圖譜推理、語言推理和數(shù)值計(jì)算，有效處理復(fù)雜問題。
• 知識對齊與語義增強(qiáng)：利用語義推理進(jìn)行知識對齊，定義領(lǐng)域知識的多種語義關(guān)系，提高知識的標(biāo)準(zhǔn)化與連通性，增強(qiáng)知識表示的準(zhǔn)確性與一致性。

KAG的技術(shù)原理

• 知識圖譜與向量檢索結(jié)合：基于知識圖譜的結(jié)構(gòu)化語義信息與向量檢索的高效性，知識圖譜組織并表示領(lǐng)域知識，通過向量檢索快速獲取與問題相關(guān)的知識片段。
• LLM友好的知識表示：設(shè)計(jì)LLMFriSPG框架，使知識圖譜的數(shù)據(jù)、信息和知識層次結(jié)構(gòu)與大型語言模型的輸入輸出格式相適配，實(shí)現(xiàn)知識的統(tǒng)一表示和有效傳遞。
• 互索引機(jī)制：建立知識圖譜結(jié)構(gòu)與原始文本塊之間的互索引關(guān)系，增強(qiáng)圖結(jié)構(gòu)中的實(shí)體、關(guān)系等與文本塊內(nèi)容的關(guān)聯(lián)，提升知識的語義連通性和檢索精準(zhǔn)度。
• 邏輯形式引導(dǎo)推理：采用邏輯形式語言將復(fù)雜問題分解為多個子問題，通過規(guī)劃、推理和檢索等操作符進(jìn)行解答，實(shí)現(xiàn)問題解決過程的符號化與結(jié)構(gòu)化，提高推理的嚴(yán)謹(jǐn)性與可解釋性。
• 語義推理與知識對齊：在知識圖譜的構(gòu)建與檢索過程中，采用語義推理技術(shù)對知識進(jìn)行對齊與整合，識別和建立知識之間的語義關(guān)系，提升知識的準(zhǔn)確性與一致性。

KAG的項(xiàng)目地址

• GitHub倉庫：https://github.com/OpenSPG/KAG
• arXiv技術(shù)論文：https://arxiv.org/pdf/2409.13731

KAG的應(yīng)用場景

• 金融風(fēng)控：整合金融數(shù)據(jù)與知識圖譜，識別并預(yù)警信貸違約、欺詐等風(fēng)險，輔助金融機(jī)構(gòu)制定有效的風(fēng)控策略。
• 醫(yī)療健康：構(gòu)建醫(yī)療知識圖譜，幫助醫(yī)生進(jìn)行疾病診斷、治療方案推薦與藥物研發(fā)，提高醫(yī)療服務(wù)的質(zhì)量與效率。
• 智能客服：作為智能客服的核心引擎，實(shí)現(xiàn)對復(fù)雜用戶需求的精準(zhǔn)理解與快速回應(yīng)，提升用戶滿意度和企業(yè)服務(wù)效率。
• 知識管理和決策支持：幫助企業(yè)構(gòu)建企業(yè)級知識圖譜，提供決策支持，輔助企業(yè)在戰(zhàn)略規(guī)劃、市場分析與產(chǎn)品創(chuàng)新等方面進(jìn)行重要決策。
• 教育與科研：整合教育與科研資源，輔助教師進(jìn)行教學(xué)設(shè)計(jì)與科研人員的研究分析，促進(jìn)知識的傳播與創(chuàng)新。