- ChatGPT 會根據訓練資料中的模式而非即時研究產生回應,這意味著它有時會產生不正確或過時的資訊,這種現象稱為幻覺。
- 它的整體準確度很高,例如GPT 在 MMLU 等基準上的得分約為 88.7%,但表現會因問題的複雜性、主題的罕見性和資訊的再現性而有所不同。
- 雖然ChatGPT 功能強大,但其輸出仍可能反映訓練資料的偏差,因此從可靠來源進行嚴謹的評估和驗證仍然非常重要。
當然,您可以使用 ChatGPT幾乎可以用來做任何事 - 但它的資訊準確度有多高呢?
ChatGPT 現在擁有數以億計的使用者。它可以製作內容、協助腦力激發、編寫程式碼,以及充當一般的導師。
但是,您應該在多大程度上相信AI 聊天機器人的回應?
ChatGPT 如何產生回覆?
為了更了解ChatGPT 所提供資訊的品質,我們先從了解 AI 聊天機器人如何選擇資訊開始。
ChatGPT 是一個大型語言模型LLM),設計用來模仿人類語言。
當它產生回應時,它並不是在進行研究或檢查網頁。它是根據訓練資料產生一連串的單字。這表示有時候LLM 會產生幻覺(即感知到不存在的模式,並產生不正確的資訊)。
ChatGPT 有多準確?
根據Massive Multi-task Language Understanding (MMLU),ChatGPT 有 88.7% 的準確率。
MMLU 測試量化大型語言模型的智慧,讓頂尖的 AI 模型互相比拼。
然而,我們很難準確衡量精確度。
成功率總是會因使用的測試方法不同而有所差異。相較於判斷ChatGPT 在個別對話中是否準確,這些測試作為比較LLMs 的工具往往更有幫助。
ChatGPT 何時最有可能提供虛假資訊?
ChatGPT 很少會 - 如果有的話 - 對一個簡單的問題產生幻覺。問它加拿大的首都;您就沒有什麼好擔心的了。
如果是罕見或最近的資訊,ChatGPT 就不太可能提供正確的資訊來源。
如果它在一個主題上的訓練資料越少,ChatGPT 就越不可能準確。由於模型不會使用網際網路上最新的資訊,這表示最近的資訊尚未成為其訓練資料的一部分。
如何提高ChatGPT 的精確度?
請記住,使用ChatGPT 並不是單方面的互動。您可以採取許多步驟來提高回應的準確性。
以下是從ChatGPT 獲得最佳答案的 4 種方法:
1) 賦予它更多的背景
我們有時都會感到困惑,人工智慧也不例外。如果您詢問的是最適合公共運輸的城市,試著說得更具體一點:哪個城市擁有最大的地鐵系統?哪座城市的大眾運輸乘客人次最多?哪座城市花在公共運輸上的經費最多?
如果您與ChatGPT 正在進行對話,它會記住上下文,可能會回答得更準確。
2) 索取可點選連結的資料來源
最新型號的ChatGPT 會在您要求時提供來源連結,這對於尋找精確資訊來說是一大改變。

3) 使用最新型號
每個新的GPT 模型都會帶來更多的可靠性。OpenAI o1 模型 使用思考鏈推理,指示模型在開始產生文字之前,先停下來推理其回應的每個步驟。
4) 用英文詢問
ChatGPT 適用於80 多種語言。但由於網際網路上的英文內容種類繁多,ChatGPT 在以英文對話時的精確度最高。如果您能用英語與 AI 聊天機器人互動,這是您獲得更高品質的輸出的最佳選擇。
ChatGPT 是否有偏見?
ChatGPT 的輸出受到訓練資料和微調過程的影響,訓練資料可能會帶來偏差或不準確,而微調過程則涉及人類審核員。以批判的態度來處理模型的回應,並在需要時從可靠的來源驗證資訊,這一點始終都很重要。
ChatGPT 會給每個人相同的答案嗎?
由於ChatGPT 模型在不斷改進,您可能無法在一段時間內得到相同的答案。
如果有兩個人同時使用ChatGPT 並有相同的提示,您很可能會得到相似的答案。
建立自訂GPT聊天機器人
建立由最新LLMs的安全GPT 聊天機器人 。
Botpress 是一個靈活且可擴充的平台,可用於建立 AI 代理和聊天機器人。透過預先建立的整合程式庫和大量的教學,您可以輕鬆建立自己的客製化 AI 代理。
立即開始構建。 它是免費的。
常見問題
1.ChatGPT 可以從網際網路取得即時資訊嗎?
ChatGPT 預設無法從網際網路存取即時資訊。它會根據預先存在的訓練資料產生回應。但是,在啟用網路瀏覽的ChatGPT Plus 等版本中,它可以在會話期間取得最新資訊。
2.ChatGPT 中的訓練資料與即時資料有何差異?
訓練資料是指ChatGPT 在特定截止日期(例如 2023 年 4 月)前所訓練的靜態資料集,而即時資料是指即時或持續更新的資訊,例如新聞、體育比分或金融市場,ChatGPT 只有在啟用瀏覽功能時才能存取這些資訊。
3.ChatGPT 與 Google 等傳統搜尋引擎有何不同?
ChatGPT 以語言建模為基礎產生對話式回應,也就是以對話形式直接提供合成答案,而 Google 則會回傳一份網頁排名清單,使用者必須點選網頁才能自行尋找資訊。
4.當人們說ChatGPT 「產生幻覺 」是什麼意思?
當人們說ChatGPT 「出現幻覺」時,他們的意思是 AI 有時候會產生不準確或捏造的資訊,這些資訊聽起來很有道理,但卻不是基於真實的資料。
5.如何驗證ChatGPT 提供的資訊?
若要驗證ChatGPT 所提供的資訊,請將其回覆與官方網站、學術資料庫或可信賴的新聞來源等可靠的最新來源進行交叉比對。如果您使用的版本具有瀏覽功能,您也可以要求它顯示來源連結。