傳統智能客服 vs. RAG:誰能給你更好的答案?

更新於 2024/11/13閱讀時間約 6 分鐘

在生成式 AI 的應用中,RAG(Retrieval-Augmented Generation)技術因其先檢索相關資料、再生成答案的特性,常被認為能提高回答的準確性。這是因為它能將生成的答案範圍限制在特定的資料集內。然而,一般的生成式 AI(如 GPT)在回答問題時,同樣是根據輸入內容生成最適合的回應。因此,關鍵問題在於

究竟是什麼因素讓 RAG 能在特定應用場景下比純生成模型更準確?

以智能客服為例,這是一個廣泛應用且需求多樣的場景,能很好地說明 RAG 在提升回答準確性和靈活性方面的優勢

raw-image

首先,我們來看傳統智能客服系統的運作方式,並探討其存在的局限性。接著,我們將進一步分析這些瓶頸如何影響用戶體驗,最後引出 RAG 在此場景中的應用價值。以下分為三個部分詳細說明:

1. 傳統的智能客服系統

主要依賴預設的 FAQ 知識庫來處理用戶問題,其運作流程為下:

  • 知識庫準備:系統部署前企業會建立一個靜態的 FAQ 知識庫,包含常見問題及其對應的標準答案,作為客服系統的「大腦」
  • User 提問: User 通過聊天界面輸入問題,系統接收這些問題並處理
  • 檢索相似問題:系統會在知識庫中搜尋與用戶提問最相似的問題,並將結果排序
  • 返回固定答案:一旦找到最相似的問題,系統直接返回該條目的預設答案

這樣的流程雖然能快速提供答案,但缺乏靈活性,無法針對未預見的問題進行回答,以及在檢索相似問題的環節,有可能因為換句話說,導致大腦無法理解,而無法給予正確的回覆。

2. 生成式 AI 的運作方式(如 GPT):

  • 大規模語料訓練:生成式 AI 通過大量文本資料訓練模型,學習各種領域的知識。
  • 基於語言模型的預測:訓練過程中,模型會被要求從給定的上下文中預測下一個字或詞。例如:
    「狗狗好可X」→ 模型預測 X 是「愛」、「憐」等。
  • 回答生成:當 User 提出問題時,模型基於訓練中學習的知識和語言模式生成答案。然而,要記得的是模型的本質,不在於真正理解問題的與義,而是在於生成文字。

例如,當問「考駕照需要什麼文件?」時,模型可能會基於其訓練中見過的資料,生成針對不同國家或地區的回答,如「身份證和體檢報告」或「護照和學習駕駛證明」。然而,這些答案可能不符合用戶所在國家的實際要求。例如,在某些國家可能需要額外的視力測試報告,而模型生成的答案可能會忽略這些細節。

這就會造成當企業導入生成式 AI 作為智能客服時,無法精準生成該企業特定的回答。雖然答案合理,但不一定適用。

正因為生成式 AI 無法真正理解問題語義,且其答案可能因為訓練資料的廣泛性而缺乏針對性,這就導致了在特定應用場景中準確性不足的問題。例如,當涉及地區性規定或企業內部專屬資訊時,單純依賴生成式 AI 很難滿足需求。

3. RAG 的運作方式

為了解決這些問題,RAG(Retrieval-Augmented Generation)技術應運而生。RAG 結合了檢索與生成的優點,可以視為「LLM + 檢索大腦」的技術組合,其流程如下:

  • LLM 訓練:和一般生成式 AI 一樣,RAG 的基礎仍然是通過大規模語料訓練的語言模型(LLM),具備強大的生成能力。
  • 建立知識庫:除了 LLM,RAG 還需要一個專屬的知識庫,這個知識庫通常包含企業內部或特定領域的重要資訊,確保答案來源的專業性和時效性。
  • User 提問:當 User 提出問題時,RAG 會啟動檢索和生成的雙重流程。
  • 檢索相關內容:RAG 首先在知識庫中檢索與問題最相關的內容,這一步保證了生成答案時有明確的參考資料。
  • 生成精準答案:檢索結果會被餵給 LLM,讓模型生成更加自然、流暢且貼合用戶需求的答案。這樣的回答不僅準確,而且兼具靈活性,能大幅提升用戶體驗。

綜合以上分析,可以看出 RAG 技術在解決傳統智能客服和純生成式 AI 的瓶頸上展現出明顯優勢。透過將檢索與生成結合,RAG 不僅能提供準確的回覆,還能提升系統在多樣化場景中的應用能力。

RAG 的優勢

  1. 語義理解更強:傳統知識庫可能無法理解用戶用不同措辭表達的同一問題,但 RAG 能更好地處理語義變化。
  2. 回答更流暢、自然:相較於死板的預設答案,RAG 能生成更貼近自然語言的回覆,增強用戶體驗。
  3. 避免生成式 AI 的不確定性:純生成式模型會胡亂生成與真實知識不符的答案,而 RAG 能藉由知識庫檢索範圍約束答案,減少不準確的回覆。

結語

這篇文章的目的是幫助大家更清楚地了解,為什麼 RAG 技術在智能客服這個應用場景中,比單純依賴 LLM 更具優勢。透過結合檢索與生成,RAG 不僅能提升答案的準確性與針對性,還能提供更流暢、更自然的回覆方式,顯著改善用戶體驗。

希望這篇文章能對想深入了解 RAG 的朋友提供一些啟發與思考。如果你對這個主題有不同的見解或想法,歡迎隨時一起交流討論,讓我們共同探討如何更好地應用這項技術!

avatar-img
33會員
43內容數
歡迎來到《桃花源記》專欄。這裡不僅是一個文字的集合,更是一個探索、夢想和自我發現的空間。在這個專欄中,我們將一同走進那些隱藏在日常生活中的"桃花源"——那些讓我們心動、讓我們反思、讓我們找到內心平靜的時刻和地方
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
Karen的沙龍 的其他內容
前言 前幾篇分享了 IBM Watsonx.ai 平台,以及在平台上使用 LLM 完成客戶體驗分析、與LLM串連處理較複雜的問題。在這一篇中,我們想來嘗試使用檢索增強生成(RAG)的技術,RAG 通過整合外部數據來增強基礎模型的回答能力,這不僅能解決模型訓練數據的局限性問題,還可以提供更精準和相關
前言 在先前的文章中,我們探討了 IBM Watsonx 在客戶滿意度分析中的應用。今天,我們將利用 Google 的兩款大型語言模型(LLM)— flan-ul2 和 flan-t5-xxl,展示它們如何串聯起來生成關於特定主題的隨機問題和回答。 在這篇文章中,將使用 SimpleSequen
前言 在上一篇文章中,分享了第一次使用 IBM Watsonx 的經歷,以及我對 Prompt lab 功能的初步探索。繼續這個話題,本文將探討 Watsonx 平台對 Python SDK 的支持,以及實作幾個 LLM 的應用,這一特性為開發者提供了極大的便利,使得在此平台上進行開發和應用大型語
前言 在這個迅速變化的技術世界裡,AI 已成為推動創新和效率的主要動力之一,最近很幸運得參加了IBM Watsonx 的 workshop,對我來說是一個很好的機會認識企業對於快速導入AI和整合AI應用的平台。IBM Watson 作為AI領域的先驅之一,長久以來一直在智慧型系統和認知計算方面處於
前言 前幾篇分享了 IBM Watsonx.ai 平台,以及在平台上使用 LLM 完成客戶體驗分析、與LLM串連處理較複雜的問題。在這一篇中,我們想來嘗試使用檢索增強生成(RAG)的技術,RAG 通過整合外部數據來增強基礎模型的回答能力,這不僅能解決模型訓練數據的局限性問題,還可以提供更精準和相關
前言 在先前的文章中,我們探討了 IBM Watsonx 在客戶滿意度分析中的應用。今天,我們將利用 Google 的兩款大型語言模型(LLM)— flan-ul2 和 flan-t5-xxl,展示它們如何串聯起來生成關於特定主題的隨機問題和回答。 在這篇文章中,將使用 SimpleSequen
前言 在上一篇文章中,分享了第一次使用 IBM Watsonx 的經歷,以及我對 Prompt lab 功能的初步探索。繼續這個話題,本文將探討 Watsonx 平台對 Python SDK 的支持,以及實作幾個 LLM 的應用,這一特性為開發者提供了極大的便利,使得在此平台上進行開發和應用大型語
前言 在這個迅速變化的技術世界裡,AI 已成為推動創新和效率的主要動力之一,最近很幸運得參加了IBM Watsonx 的 workshop,對我來說是一個很好的機會認識企業對於快速導入AI和整合AI應用的平台。IBM Watson 作為AI領域的先驅之一,長久以來一直在智慧型系統和認知計算方面處於
你可能也想看
Google News 追蹤
Thumbnail
本文探討了複利效應的重要性,並藉由巴菲特的投資理念,說明如何選擇穩定產生正報酬的資產及長期持有的核心理念。透過定期定額的投資方式,不僅能減少情緒影響,還能持續參與全球股市的發展。此外,文中介紹了使用國泰 Cube App 的便利性及低手續費,幫助投資者簡化投資流程,達成長期穩定增長的財務目標。
傳統的聊天機械人主要承擔基礎客服的角色,但隨着ChatGPT的出現,如今越來越多聊天機械人工具已經可以根據用戶的個性化需求提供定製化服務。 比如,將聊天機械人應用於網頁設計,可以極大地改變用戶與網站的互動方式,從而提高用戶效率和滿意度。此外,設計師在考慮聊天機械人的應用時,可以嘗試將智能問答、
Thumbnail
SearchGPT 是由 OpenAI 開發的 AI 驅動搜尋引擎,結合了傳統搜尋引擎技術和最新的 AI 技術,能即時從互聯網獲取資訊。它與其他搜尋引擎相比,提供更相關的搜尋結果、更豐富的結果呈現、更快的速度和更好的生態合作基礎建設。
Thumbnail
在當今快速變化的數位時代,企業面臨著前所未有的數據處理需求。為了應對這些挑戰,企業紛紛建立自己的大型語言模型(LLM),利用大量數據進行訓練,讓模型能夠理解並生成自然語言,從而實現人機協作,優化業務流程並提升客戶體驗。
Thumbnail
本文討論了在AI時代下我們需要具備的職能,例如提問力、判斷力和專業能力。同時也提到了在使用AI時需要注意的事情,以及一些問答希望可以跟讀者有所互動與交流。另外作者也分享了自己使用AI工具的心得,並期待可以幫助初學者更快地瞭解如何應對AI的基礎邏輯。
了解到現在的生成式AI各有千秋,且能協助的事之多,各家業者有如「電信公司」,遲早會是比較「行動方案」,甚或是拿著不同業者的「多門號」,人人都配有人工智慧了。 我一向不是科技的早期使用者,各家AI我都只用過免費版。 ChatGPT 作為前鋒的GPT,曾請它協助將英文句子潤色、修整文法,以解
Thumbnail
在保險行業,索賠處理的效率直接影響到客戶滿意度和企業的運營效能。傳統的索賠流程往往繁瑣且耗時,涉及大量的手工操作和文件審核。隨著技術的進步,特別是機器學習和自動化工具的發展,保險公司現在有機會顯著提升索賠處理的速度和精確度。
Thumbnail
為了充分發揮AI的潛力,我們必須深入瞭解其運作模式和思考邏輯,並學會與AI對話的技巧。《ChatGPT提問課,做個懂AI的高效工作者》這本書提供了豐富的實例,讓讀者更容易學會如何提出精準的問題,並享有提問課程的閱讀回饋。這對於想成為懂AI的高效工作者的人來說,是一本值得一看的書。
Thumbnail
人工智慧(AI)時代的到來,並不代表要取代人類的工作,而是要幫忙人類釋放雙手,集中在內心的成長上。透過閱讀阿卡西和運用AI工具,可以為個人的成長增添新的力量。
Thumbnail
本文科普了電信產業導入生成式 AI 的兩大使用範例,以及對生成式 AI 衍生服務的接受度。進一步探討了用戶自動化和網路自動化的重要性,並提出對於電信業導入生成式 AI 的展望。
Thumbnail
本文探討了複利效應的重要性,並藉由巴菲特的投資理念,說明如何選擇穩定產生正報酬的資產及長期持有的核心理念。透過定期定額的投資方式,不僅能減少情緒影響,還能持續參與全球股市的發展。此外,文中介紹了使用國泰 Cube App 的便利性及低手續費,幫助投資者簡化投資流程,達成長期穩定增長的財務目標。
傳統的聊天機械人主要承擔基礎客服的角色,但隨着ChatGPT的出現,如今越來越多聊天機械人工具已經可以根據用戶的個性化需求提供定製化服務。 比如,將聊天機械人應用於網頁設計,可以極大地改變用戶與網站的互動方式,從而提高用戶效率和滿意度。此外,設計師在考慮聊天機械人的應用時,可以嘗試將智能問答、
Thumbnail
SearchGPT 是由 OpenAI 開發的 AI 驅動搜尋引擎,結合了傳統搜尋引擎技術和最新的 AI 技術,能即時從互聯網獲取資訊。它與其他搜尋引擎相比,提供更相關的搜尋結果、更豐富的結果呈現、更快的速度和更好的生態合作基礎建設。
Thumbnail
在當今快速變化的數位時代,企業面臨著前所未有的數據處理需求。為了應對這些挑戰,企業紛紛建立自己的大型語言模型(LLM),利用大量數據進行訓練,讓模型能夠理解並生成自然語言,從而實現人機協作,優化業務流程並提升客戶體驗。
Thumbnail
本文討論了在AI時代下我們需要具備的職能,例如提問力、判斷力和專業能力。同時也提到了在使用AI時需要注意的事情,以及一些問答希望可以跟讀者有所互動與交流。另外作者也分享了自己使用AI工具的心得,並期待可以幫助初學者更快地瞭解如何應對AI的基礎邏輯。
了解到現在的生成式AI各有千秋,且能協助的事之多,各家業者有如「電信公司」,遲早會是比較「行動方案」,甚或是拿著不同業者的「多門號」,人人都配有人工智慧了。 我一向不是科技的早期使用者,各家AI我都只用過免費版。 ChatGPT 作為前鋒的GPT,曾請它協助將英文句子潤色、修整文法,以解
Thumbnail
在保險行業,索賠處理的效率直接影響到客戶滿意度和企業的運營效能。傳統的索賠流程往往繁瑣且耗時,涉及大量的手工操作和文件審核。隨著技術的進步,特別是機器學習和自動化工具的發展,保險公司現在有機會顯著提升索賠處理的速度和精確度。
Thumbnail
為了充分發揮AI的潛力,我們必須深入瞭解其運作模式和思考邏輯,並學會與AI對話的技巧。《ChatGPT提問課,做個懂AI的高效工作者》這本書提供了豐富的實例,讓讀者更容易學會如何提出精準的問題,並享有提問課程的閱讀回饋。這對於想成為懂AI的高效工作者的人來說,是一本值得一看的書。
Thumbnail
人工智慧(AI)時代的到來,並不代表要取代人類的工作,而是要幫忙人類釋放雙手,集中在內心的成長上。透過閱讀阿卡西和運用AI工具,可以為個人的成長增添新的力量。
Thumbnail
本文科普了電信產業導入生成式 AI 的兩大使用範例,以及對生成式 AI 衍生服務的接受度。進一步探討了用戶自動化和網路自動化的重要性,並提出對於電信業導入生成式 AI 的展望。