操作教學
AI 客服有引用知識就一定答對嗎?用四欄核對表驗收
有引用不等於條件完整。用運費與免運的虛構實測,比對金額、門檻、適用範圍及例外,附人工四欄核對表與可重測反例。
不一定。AI 客服顯示引用來源後,先回到同一事業體、同一位 AI 員工可使用的知識,逐項比對「金額、門檻計算、適用範圍、例外」。引用能協助找到依據;回答是否保留重要條件,仍要由團隊驗收。最容易開始的做法,是把一則原文、一個測試問題和實際回答放在一起,留下可重測的判斷。
先分清楚:找到資料,與回答正確是兩件事
看到「引用 1 筆」,只能先確認介面列出了一筆參考知識。還要檢查標題是否對應本次服務、原文是否仍有效,以及回覆有沒有省略會影響客戶決定的限制。不能只因回答順暢、金額看起來熟悉,就判定整個客服流程已經驗收完成。
例如「商品金額滿 1,500 元免運」與「含運費總額滿 1,500 元免運」,看起來只差幾個字,計算結果卻不同。這類差異要回到規則本身核對,不能用引用數量代替判斷。
用一則真實測試,把三個位置對起來
以下是 JunBot 測試站「好日選物社|團購示範」的虛構教學資料,並非真實商家的價格或客戶訂單。2026 年 11 月 1 日重新核對的知識標題為「好日選物|運費、免運與合併配送」,要點如下:常溫商品運費 NT$80;商品金額滿 NT$1,500 免運,運費不計入門檻;離島、特殊地區及冷藏冷凍商品不適用上述一般規則,需由團主人工確認。
在未綁定客戶的對話測試中,輸入「運費多少、滿多少免運?」。本次實際回答保留了上述運費、商品金額門檻、不含運費及例外條件;測試結果顯示引用 1 筆,參考知識標題與原文相符。本次由自動分流選擇「好日選物商品諮詢顧問」回覆;它不代表所有問題都會由同一位員工處理。
檢查時,依序看三個位置:知識原文的條件、對話中的實際回答,以及測試結果展開後列出的參考知識。當天短片採用 2026 年 10 月 6 日經本機錄製器取得的測試站原始畫面,片內標示錄製日期;今天的重新核對與歷史實錄分開保存,不把舊畫面說成今日新錄影。
四欄核對表:讓另一位同事也能重測
這張表是團隊可以自行使用的人工驗收範本,不是宣稱系統已自動替你判定通過。實際填寫時,另外附上事業體、測試問題、原文版本或確認日期,以及測試時間。
| 原文條件 | 本次實測回答 | 判斷 | 下一步 |
|---|---|---|---|
| 常溫運費 NT$80 | 回答常溫商品運費 NT$80 | 本次相符 | 保留回答,換一種問法重測 |
| 商品金額滿 NT$1,500 免運 | 保留「商品金額」及門檻 | 本次相符 | 再測門檻上下的情境 |
| 運費不計入免運門檻 | 回答明確保留此限制 | 本次相符 | 用含運總額的反例驗算 |
| 離島及冷藏冷凍需人工確認 | 未把一般規則套用至例外 | 本次相符 | 例外題另外測試接續方式 |
「本次相符」只描述這一題的回答。若原文不完整、回答看不出計算依據,或兩份知識互相矛盾,先記待確認與負責人,再決定補資料或交由人員處理,不要為了把表填滿就勾通過。
最值得補的一題:含運 1,500 元,真的免運嗎?
以下是建議加入的人工反例,並非本次已執行的系統測試結果:商品 NT$1,420,加運費 NT$80,含運總額 NT$1,500。若原文的門檻是「商品金額滿 NT$1,500」,商品仍未達門檻,不能因含運總額到 1,500 元就判免運。
同樣地,「含運費合計滿 1,500 元即可免運」是用來辨識錯誤的假設句,不是這次 JunBot 的實際回答。把反例與實測紀錄分清楚,團隊才不會把尚未測過的題目當成已驗收。
再準備兩種變化:一種只換口語,例如「買多少不用付運費」;另一種直接帶入例外,例如「冷凍商品寄離島也適用嗎」。測試前先寫出預期需要保留的限制,再看實際回覆。這些題目是接下來的驗收清單,不代表本文已逐題完成測試。
發現不一致時,先追哪一層?
第一步確認目前選到的事業體、實際回覆的 AI 員工和引用標題;不要拿另一家店或另一版活動的規則來比。第二步檢查原文是否清楚寫出金額、對象、期間與例外,並找出有沒有互相衝突的資訊。第三步把原問題與實際回答留在紀錄中,更新必要知識後,重測原問法及相關例外題。
如果問題涉及尚未確認的配送安排、個別訂單或商務承諾,讓負責人接續確認。測試介面的回覆或轉人工提示,不等於已建立正式訂單、完成付款,或已有真人接受工單。
常見問題
引用越多筆,回答就越可靠嗎?
不能只看數量。要先看引用是否相關、規則是否一致,回答是否保留會改變判斷的條件。多筆互相矛盾的資料,同樣需要整理與重測。
這一題相符,可以直接對客戶全面上線嗎?
這一題可作為一筆驗收證據,仍需測試不同問法、條件邊界與例外處理。正式知識、分流設定或服務規則更新後,也需要重新核對相關題目。
要把每一段回答都逐字比對嗎?
先抓會影響承諾的內容:金額、計算方式、適用對象、期間、交期與例外。語氣可以不同,條件不能因此被改掉;資訊不足時,也要確認回覆有留下待確認的界線。
延伸閱讀:AI 客服試用怎麼留紀錄?四欄差異表讓同事能重測,以及 AI 客服驗收表怎麼寫?報價、交期與交付範圍分開核對。
先選你自己的一則常見問題,把重要條件列出來,再到 JunBot 免費開通 測試實際回答。用自己的資料完成一組可重測的核對,比只看一個順暢的示範更能幫助團隊判斷是否適用。