女人自慰AV免费观看内涵网,日韩国产剧情在线观看网址,神马电影网特片网,最新一级电影欧美,在线观看亚洲欧美日韩,黄色视频在线播放免费观看,ABO涨奶期羡澄,第一导航fulione,美女主播操b

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

復雜知識庫問答任務的典型挑戰和解決方案

深度學習自然語言處理 ? 來源:專知 ? 作者:專知 ? 2021-06-13 09:49 ? 次閱讀

知識庫問答旨在通過知識庫回答自然語言問題。近來,大量的研究集中在語義或句法上復雜的問題上。在本文中,我們精心總結了復雜知識庫問答任務的典型挑戰和解決方案,介紹了復雜知識庫問答的兩種主流方法,即基于語義解析(基于SP)的方法和基于信息檢索(基于IR)的方法。首先,我們形式化地定義了知識庫問答任務并介紹了該任務下相關的數據集。然后,我們從兩個類別的角度全面回顧了前沿方法,說明他們針對典型挑戰的解決方案。最后,我們總結并討論了一些仍具有挑戰的未來研究方向。

知識庫(KB)是一個結構化的數據庫,它以(主題、關系、對象)的形式包含一系列事實。大型KBs,如Freebase [Bollacker et al., 2008], DBPedia [Lehmann et al., 2015]和Wikidata [Tanon et al., 2016],已經構建服務于許多下游任務。知識庫問答(KBQA)是一種基于知識庫的自然語言問答任務。KBQA的早期工作[Bordes et al., 2015; Dong et al., 2015; Hu et al., 2018a; Lan et al., 2019b; Lan et al., 2019a]專注于回答一個簡單的問題,其中只涉及一個單一的事實。例如,“j·k·羅琳出生在哪里?”“是一個可以用事實來回答的簡單問題”(J.K.羅琳)羅琳,出生地,英國)。

最近,研究人員開始更多地關注于回答復雜問題,即復雜的KBQA任務[Hu et al., 2018b; Luo et al., 2018]。復雜問題通常包含多個主題,表達復合關系,并包含數值運算。以圖1中的問題為例。這個例題的開頭是“the Jeff Probst Show”。這個問題不是問一個單一的事實,而是要求由兩個關系組成,即“被提名人”和“配偶”。該查詢還與一個實體類型約束“(Jeff Probst,是一個電視制作人)”相關聯。最后的答案應該通過選擇有最早結婚日期的可能候選人來進一步匯總。一般來說,復雜問題是涉及多跳推理、約束關系、數值運算或上述幾種組合的問題。

回到簡單KBQA的解決方案,已經提出了兩種主流方法的一些研究。這兩種方法首先識別問題中的主題,并將其鏈接到知識庫中的實體(稱為主題實體)。然后,通過執行已解析的邏輯形式或在從知識庫中提取的特定于問題的圖中進行推理,在主題實體的鄰近區域內獲得答案。這兩類方法在以往的工作中通常被稱為基于語義解析的方法(基于SP的方法)和基于信息檢索的方法(基于IR的方法)[Bordes et al., 2015; Dong et al., 2015; Hu et al., 2018a; Gu et al., 2020]。它們包括解決KBQA任務的不同工作機制。前一種方法用符號邏輯形式表示問題,然后對知識庫執行它,獲得最終答案。后一種方法構造一個特定于問題的圖,給出與問題相關的全面信息,并根據其與問題的相關性對抽取的圖中的所有實體進行排序。

然而,當將這兩種主流方法應用于復雜的KBQA任務時,復雜的問題會給這兩種方法的不同部分帶來挑戰。我們認為主要挑戰如下:

現有基于SP的方法中使用的解析器難以覆蓋各種復雜的查詢(例如,多跳推理、約束關系和數值運算)。類似地,以前的基于ir的方法可能無法回答復雜的查詢,因為它們的排序是在沒有可追溯推理的情況下對小范圍實體執行的。

在復雜問題中,更多的關系和主題意味著更大的潛在邏輯形式的搜索空間,這將顯著增加計算成本。同時,更多的關系和被試會阻礙基于IR的方法檢索所有相關實體進行排序。

兩種方法都把理解問題作為首要步驟。當問題在語義和句法方面都變得復雜時,就要求模型具有較強的自然語言理解和泛化能力。

對于復雜問題,為答案標記ground truth路徑是非常昂貴的。通常,只提供問答對。這表明基于SP的方法和基于IR的方法需要分別在沒有正確邏輯形式和推理路徑標注的情況下進行訓練。這種微弱的監管信號給兩種方式都帶來了困難。

關于相關綜述,我們觀察到Wu等人[2019]和Chakraborty等人[2019]回顧了關于簡單KBQA的現有工作。此外,Fu等人[2020]研究了復雜KBQA的當前進展。他們只從技術的角度提供了高級方法的一般觀點,而更多地關注于電子商務領域的應用場景。與這些綜述不同的是,我們的工作試圖識別在以往的研究中遇到的挑戰,并以全面和有序的方式廣泛討論現有的解決方案。具體來說,我們將復雜KBQA的方法根據其工作機制分為兩種主流方法。我們將這兩種方法的整個過程分解為一系列模塊,并分析每個模塊中的挑戰。我們相信這種方式特別有助于讀者理解挑戰,以及如何在現有的復雜KBQA解決方案中解決這些挑戰。此外,我們還對復雜KBQA的幾個有前途的研究方向進行了展望。

原文標題:IJCAI2021最新「復雜知識庫問答研究」綜述論文,闡述KBQA方法、挑戰與對策

文章出處:【微信公眾號:深度學習自然語言處理】歡迎添加關注!文章轉載請注明出處。

責任編輯:haq

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 數據庫
    +關注

    關注

    7

    文章

    3900

    瀏覽量

    65771
  • 自然語言
    +關注

    關注

    1

    文章

    291

    瀏覽量

    13604

原文標題:IJCAI2021最新「復雜知識庫問答研究」綜述論文,闡述KBQA方法、挑戰與對策

文章出處:【微信號:zenRRan,微信公眾號:深度學習自然語言處理】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    AI知識庫的搭建與應用:企業數字化轉型的關鍵步驟

    隨著數字化轉型的加速,AI技術已經成為提升企業運營效率、優化客戶體驗、推動業務創新的重要工具。而AI知識庫作為企業智能化的基礎,發揮著至關重要的作用。通過構建高質量的知識庫,企業能夠更好地組織、管理
    的頭像 發表于 03-27 15:18 ?322次閱讀

    《AI Agent 應用與項目實戰》閱讀心得3——RAG架構與部署本地知識庫

    技術不僅解決了LLM的知識更新問題,更為構建專業領域的智能問答系統提供了完整的技術方案。通過與向量數據的深度集成,RAG實現了知識的動態擴
    發表于 03-07 19:49

    技術融合實戰!Ollama攜手Deepseek搭建知識庫,Continue入駐VScode

    Ollama、Deepseek-R1、AnythingLLM 搭建強大的本地個人知識庫,并詳細介紹 Continue 在 VScode 中的本地集成,帶你解鎖全新的技術應用體驗,開啟高效知識管理與開發
    的頭像 發表于 03-04 14:47 ?494次閱讀
    技術融合實戰!Ollama攜手Deepseek搭建<b class='flag-5'>知識庫</b>,Continue入駐VScode

    如何從零開始搭建企業AI知識庫

    在數字化轉型的浪潮中,企業逐漸意識到數據不僅是資源,更是驅動業務增長的“燃料”。然而,分散在郵件、文檔系統、本地硬盤甚至員工腦海中的知識,往往如同孤島般難以串聯。AI知識庫的出現,正試圖將這些碎片化
    的頭像 發表于 02-28 14:35 ?685次閱讀

    用騰訊ima和Deepseek建立個人微信知識庫

    ---基于騰訊混元大模型或Deepseek-r推理模型的個人知識庫。大模型是通才,知識庫是專家大模型的訓練數據無法實時更新,而你的知識庫可以動態補充最新信息。大模型對細分領
    的頭像 發表于 02-25 17:33 ?1242次閱讀
    用騰訊ima和Deepseek建立個人微信<b class='flag-5'>知識庫</b>

    DeepSeek從入門到精通(2):0成本用DeepSeek(滿血版)搭建本地知識庫

    我們身處數字化浪潮中,知識管理和利用的重要性與日俱增。擁有一個專屬的本地知識庫,能極大提升工作效率,滿足個性化需求。但對于技術小白來說,搭建這樣的知識庫不僅存在技術門檻,同時也意味著需要一定的成本投入。
    的頭像 發表于 02-23 15:34 ?529次閱讀
    DeepSeek從入門到精通(2):0成本用DeepSeek(滿血版)搭建本地<b class='flag-5'>知識庫</b>

    基于華為云 Flexus 云服務器 X 搭建部署——AI 知識庫問答系統(使用 1panel 面板安裝)

    Flexus 云服務器 X 攜手開源力量,為您打造全方位、高性能的知識庫問答系統!無論您是構建企業內部的知識寶庫,還是優化客戶服務體驗,亦或深耕學術研究與教育領域,這一創新解決方案
    的頭像 發表于 01-17 09:45 ?1557次閱讀
    基于華為云 Flexus 云服務器 X 搭建部署——AI <b class='flag-5'>知識庫</b><b class='flag-5'>問答</b>系統(使用 1panel 面板安裝)

    華為云 Flexus 云服務器 X 實例之 openEuler 系統下搭建 MaxKB 開源知識庫問答系統

    及個人開發者快速構建高效、靈活的應用環境。本文將詳細介紹如何利用華為云 Flexus 云服務器 X 實例搭建基于 openEuler 系統的 MaxKB 開源知識庫問答系統,為企業內部的知識管理和信息檢索注入新的活力。 一、Fl
    的頭像 發表于 01-17 09:44 ?1235次閱讀
    華為云 Flexus 云服務器 X 實例之 openEuler 系統下搭建 MaxKB 開源<b class='flag-5'>知識庫</b><b class='flag-5'>問答</b>系統

    騰訊ima升級知識庫功能,上線小程序實現共享與便捷問答

    近日,騰訊旗下的AI智能工作臺ima.copilot(簡稱ima)迎來了知識庫功能的重大升級。此次升級不僅增加了“共享知識庫”的新能力,還正式上線了“ima知識庫”小程序,為用戶帶來了更加便捷和高效
    的頭像 發表于 12-31 15:32 ?1709次閱讀

    大算力芯片面臨的技術挑戰和解決策略

    在灣芯展SEMiBAY2024《HBM與存儲器技術與應用論壇》上,億鑄科技創始人、董事長兼CEO熊大鵬發表了題為《超越極限:大算力芯片面臨的技術挑戰和解決策略》的演講。
    的頭像 發表于 10-23 14:50 ?978次閱讀

    【實操文檔】在智能硬件的大模型語音交互流程中接入RAG知識庫

    非常明顯的短板。盡管這些模型在理解和生成自然語言方面有極高的性能,但它們在處理專業領域的問答時,卻往往不能給出明確或者準確的回答。 這時就需要接一個專有知識庫來滿足產品專有和專業知識的回復需求,理論
    發表于 09-29 17:12

    MCT8316A-設計挑戰和解決方案應用說明

    電子發燒友網站提供《MCT8316A-設計挑戰和解決方案應用說明.pdf》資料免費下載
    發表于 09-13 09:52 ?0次下載
    MCT8316A-設計<b class='flag-5'>挑戰和解決方案</b>應用說明

    MCF8316A-設計挑戰和解決方案應用說明

    電子發燒友網站提供《MCF8316A-設計挑戰和解決方案應用說明.pdf》資料免費下載
    發表于 09-13 09:51 ?4次下載
    MCF8316A-設計<b class='flag-5'>挑戰和解決方案</b>應用說明

    FPGA設計面臨的挑戰和解決方案

    設計可靠的可編程邏輯門陣列(FPGA)對于不容故障的系統來說是一項具有挑戰性的任務。本文介紹FPGA設計的復雜性,重點關注如何在提高可靠性的同時管理隨之帶來的功耗增加、設計復雜性和潛在
    的頭像 發表于 08-06 11:33 ?860次閱讀

    如何手擼一個自有知識庫的RAG系統

    用于自然語言處理任務,如文本生成、問答系統等。 我們通過一下幾個步驟來完成一個基于京東云官網文檔的RAG系統 數據收集 建立知識庫 向量檢索 提示詞與模型 數據收集 數據的收集再整個RAG實施過程中無疑是最耗人工的,涉及到收集、
    的頭像 發表于 06-17 14:59 ?919次閱讀