亞信科技申請應用於垂直領域多模態RAG知識問答專利，提高了召回率

金融界2024年12月21日消息，國家知識產權局信息顯示，亞信科技（南京）有限公司申請一項名爲“一種應用於垂直領域的多模態RAG知識問答方法及裝置”的專利，公開號 CN 119150998 A，申請日期爲2024年11月。

專利摘要顯示，本發明提供一種應用於垂直領域的多模態RAG知識問答方法及裝置，涉及人工智能技術領域，本發明支持多模態輸入待解答文本，包括文本、圖片、音頻和視頻，充分利用多模態數據的語義信息。利用多個預設檢索模型檢索待解答文本對應的知識片段，得到多種檢索結果。通過RRF算法融合多種檢索結果，並用目標重排序模型計算得分進行重排，從而提高了召回率。基於檢索內容及預設知識頻率信息進步微調排序使其更加精準，符合用戶期望。結合大語言模型的自然語言理解能力和目標獎勵模型，以及RAG召回的相關信息，生成最優解答數據，同時利用目標打分模型和領域專家知識，提供更專業且符合實際需求的高質量解答數據。

本文源自：金融界

作者：情報員