
我們從潛在客戶和使用者那裡收到的最常見問題之一是:「你們的意圖分類器在哪裡?」
我們沒有是的,這是故意的。
Botpress 使用LLMs 來識別使用者的意圖。為什麼?如果您正在建置聊天機器人或AI 代理,這對建置者和使用者來說都好太多了。
我們對於這個立場有強烈的感受,所以我想花幾分鐘的時間來解釋我們缺乏意圖分類器的原因。
TLDR; 它更容易建立、更精準,也更容易維護。
昔日(LLM 之前)的日子
(如果您熟悉什麼是意向分類器及其作用,請放心跳過本節)。
意圖分類器是一種工具,可根據訓練資料將使用者輸入歸類為預先定義的意圖。
開發人員必須為每個可能的意圖整理和標示無數的範例,希望系統能將使用者的輸入與這些範例相匹配。
例如,對於電子商務聊天機器人,開發人員可能會定義類似「TrackOrder」的意向。它們的語句範例可能包括"我的包裹在哪裡?「追蹤我的訂單」,以及 「您能幫我查看送貨狀態嗎?」
他們基本上是透過舉例來訓練 AI 代理識別使用者的意圖。是的,他們必須手動輸入所有這些例子。
幸運的是,隨著LLMs 越來越先進,這種手動將可能的語句對應到意圖的需求幾乎消失了。
但許多會話式人工智能平台仍在使用它們。為什麼呢?我們會說到這一點。
4 意圖分類器的缺點
這不僅是因為它的過程較長 - 意圖分類器很爛的原因有很多。以下是幾個原因:
1.資料依賴性
意向分類器需要大量資料。它們需要一個龐大且具代表性的使用者範例資料集,才能讓每個意圖準確運作。沒有這些資料集,它們就很難正確地對輸入進行分類。
而建立這些資料集是一件苦差事。開發人員要花費無數的時間來收集和標示範例,毫無疑問,這並不是善用時間的好方法。
2.有限的擴充性
意圖分類器也無法擴充。增加新的意圖意味著要收集更多的資料,並重新訓練模型,這很快就會成為開發的瓶頸。Plus,它們也是令人頭痛的維護問題 - 因為隨著語言使用的演進,語句也在演變。
3.語言理解能力差
意圖分類器缺乏真正的語言理解能力。他們對語言的變化感到吃力,例如:
- 同義詞
- 意譯
- 措辭含糊不清
- 錯字
- 不熟悉的口語表達
- 零散的輸入
他們通常也會孤立地處理每個語句,這表示他們缺乏在整個對話過程中維持上下文的能力。
4.過度擬合
意圖分類器很容易過度擬合,即記憶訓練範例而非學習一般模式。
這表示它們對於已見過的精確詞組執行得很好,但對於新的或多變的輸入則很吃力。這使得它們比專業用例更脆弱。
LLMs 比較好的 6 個理由
LLMs 解決了這些問題。它們能夠理解上下文和細微的差異,而且開發人員不需要為它們填入訓練資料就能開始使用。LLM代理程式從建立的那一刻起就可以開始對話。
1.零點學習能力
LLMs 不需要範例來學習。廣泛的預先訓練意味著他們已經了解上下文、細微差別和意圖,而不需要開發人員提供具體的範例。
2.稱為細微差別的小東西
LLMs 擅長於意圖分類器不足之處。他們可以輕鬆詮釋成語、諷刺和模稜兩可的語言。
他們在不同資料集上所接受的廣泛訓練,讓他們有能力掌握人類溝通中的細微差異,而這些細微差異是意圖分類器經常忽略的。
3.更好的背景
LLMs 不會忘記對話內容。他們會記得之前說過的話,這讓互動自然流暢,感覺更有連貫性。
這種上下文也可以幫助他們釐清含糊不清的地方。即使輸入的訊息含糊不清或複雜,他們也可以從更廣泛的對話中拼湊出來。
4. 可擴展性
LLMs 擴展能力是 100% 的優秀。由於他們對語言的廣泛理解,他們不需要重新訓練就能接手新主題。
這使得它們開箱即可處理任何用例。對於多機器人系統,使用LLM 而非意向分類器是最簡單不過的方法。
5.彈性
LLMs 不會依賴僵化的範本。它們的彈性意味著回應感覺自然、多樣化,而且完全是針對會談量身打造的。對使用者來說,它們比脆弱的意圖分類器有更好的體驗。
6.訓練資料較少
LLMs 不需要特定任務的標記資料就能完成工作。它們的威力來自於對多樣化文字的大量預訓,因此它們不需要依賴艱苦的注釋資料集。
如果需要,開發人員總是可以針對他們的專案自訂LLM。例如,LLMs 可以使用最少的資料進行微調,因此可以快速適應專門的使用個案或產業。
為什麼其他公司會使用意向分類器?
問得好。如果LLMs 在意圖分類上有這麼大的優勢,那為什麼仍有這麼多公司使用意圖分類器?
答案並不美麗,而且說出來也不是最有外交手腕:這是傳統技術的問題。
大多數公司都有使用 intent classifiers 的既得利益。他們已經建立了龐大的安裝基礎,可以在上面執行。他們沒有理由勸阻使用者不要使用他們所建立的系統。
但Botpress 以LLM
LLMs 在識別意圖方面的能力遠勝於舊式的意圖分類器。這就是我們在 2020 年從頭寫起,以LLM 為LLM原因。
我們知道更好的技術已經來臨,因此我們不再固守傳統技術,而是投資於躍進。
我們會加入意圖分類器嗎?
不,我們太在乎我們的建置者經驗和他們使用者的經驗了。
意向分類的未來
意圖分類器是過去的工具。這就是我們全力投入LLMs原因。
隨著LLMs 越來越好,建立在Botpress 上的 AI 代理也會越來越好。我們已經準備好,也很高興能繼續提升會話式 AI 的能力。
如果您想要建立由LLMs的彈性 AI 代理,請放心在Botpress上開始建立。它是免費的。