AI 客服上線 6 個月後悄悄變笨？模型 drift 完整治理指南：3 種 drift 類型、5 個監控指標、4 條合約 SLA——中小企業老闆 AI 客服維運避坑手冊

我們上個月接到一個客戶的緊急諮詢——他半年前花 80 萬導入了一套 AI 客服 SaaS，前 3 個月所有 KPI 都漂亮，CSAT 從 78 升到 86、首次解決率從 41% 升到 67%。第 4 個月開始所有指標悄悄回落、客訴提升、退款率多了 1.2%——但這些變化都在「正常波動」範圍裡，當下沒人警覺。第 6 個月 CFO 看月報才發現：「等等，這套 AI 客服好像越來越笨？」這就是經典的模型 drift——AI 客服上線那一刻效果最好，之後因為現實世界資料分佈、客戶問題分佈、語言用法都在變，模型表現會慢慢退化。

過去半年我們陪不同客戶評估 AI 客服 SaaS 的維運合約，發現八成以上的中小企業老闆對「drift」這件事零認知——以為「上線完就結案」、合約裡也沒寫 drift 監控與治理條款。AI 客服跟傳統客服軟體最大的差別就是——傳統軟體裝完就不會自己變笨、AI 客服會。這不是廠商品質問題，是 AI 系統的物理特性。沒有監控與治理框架，等到第 6 個月發現變笨，已經錯失最佳介入時機 4-5 個月。

這篇要把 AI 客服模型 drift 這件事講清楚——3 種主流 drift 類型（data drift、concept drift、prompt drift）、5 個你必須裝的監控指標、4 條跟 AI 客服供應商必須寫進合約的 SLA 條款，給中小企業老闆一張 AI 客服維運的完整避坑手冊。先給結論：Stanford HAI 2025 AI Index Report揭露的數據是——客服場景 AI 模型在上線後 6 個月平均效能會下降 12-18%，但只有 23% 的企業有監控機制能在前 60 天偵測到。換句話說，77% 的企業是「上線後就變笨還不知道」的狀態。

先把 drift 名詞講清楚：data / concept / prompt 三種類型不能混淆

「AI 變笨了」是現象，背後機制不只一種——把三種 drift 混在一起治理會錯方向。我們的判斷是：中小企業 AI 客服場景最常見的是 prompt drift 跟 data drift，concept drift 通常要到平台級規模才嚴重。三者治理手法完全不一樣，混淆會浪費維運預算。

實務上中小企業最常踩的是 prompt drift——維運同仁為了修一個客訴去動 system prompt，沒做 A/B 對照、沒做回歸測試，當下修好了一個場景、把另外三個場景搞壞。這也是為什麼我們做 AI 客服維運接案會強制要求 prompt 走 git + canary 部署的流程。

5 個必裝監控指標：要在客戶感受到之前先偵測

AI 客服 drift 的核心治理原則是「在客戶感受到之前先偵測」——客戶用 CSAT 跟客訴回報是最後的訊號，前面有 4 條更早的訊號要看。以下五個指標是我們建議中小企業 AI 客服維運的最低監控盤：

• 指標 1：嵌入向量分佈漂移（embedding drift）。每週對近 1000 條客戶問題做 embedding、跟基準週對比 distribution distance（KL divergence 或 PSI）。超過閾值代表問題類型在變——比 CSAT 早 4-8 週。
• 指標 2：拒答率（abstention rate）。AI 回覆「我不確定 / 請聯繫人工」的比例。突然上升代表新類型問題進來、知識庫缺東西——是 data drift 最直接訊號。
• 指標 3：人工介入轉接率。從 AI 對話轉接到人工的比例。上升代表 AI 對某類問題開始失能。
• 指標 4：回覆長度與一致性。同類問題回覆長度標準差突然擴大、或同問題 24 小時內被問兩次給出矛盾答案——是 prompt drift 訊號。
• 指標 5：金牌測試集（golden test set）週評分。固定一份 200 題基準問題，每週讓 AI 跑一次、人工評分（或用 LLM-as-judge）。週評分掉 5% 以上要回頭查 prompt + 知識庫變更。

4 條跟 AI 客服 SaaS 廠商必寫的合約 SLA 條款

中小企業老闆採購 AI 客服 SaaS 時最容易忽略的是「上線之後」的合約條款——大部分廠商的標準合約只規範「服務可用率 99.9%」這種傳統 IT 條款，沒寫任何模型品質相關 SLA。以下四條是我們建議寫進合約的最低標：

這 4 條目前業界（特別是台灣本地 AI 客服 SaaS）幾乎沒人主動寫進合約——通常要客戶在合約談判時主動要求補。我們的判斷是：廠商願不願意接受這 4 條 SLA，是篩選成熟廠商與快速堆量 startup 的最佳分水嶺。願意簽的廠商通常有完整 MLOps 流程；不肯簽的廠商代表他們內部根本也不知道模型表現變化。

AI 客服維運不是上線完就交差——是新的客服長期合約

中小企業老闆導入 AI 客服最容易掉的心態坑是「上線完就交差」——這套思維在傳統客服軟體年代成立、但 AI 客服年代不成立。AI 客服上線那一刻你買的不是一套軟體、是一個會持續變化的同事。沒有 5 大指標監控 + 4 條 SLA 合約，第 6 個月之後就會變成隱性流血。這跟 我們先前寫過的 AI 客服自動化導入完整指南 是同一條軸——前者教你怎麼導入、這篇教你導入後怎麼維運。

想要我們幫你做 AI 客服維運合約審查、或建立內部監控指標儀表板，可以從 AI 導入諮詢服務頁 預約半小時，我們會帶你把現有 AI 客服合約的 SLA 漏洞列出來、給你一張 90 天監控配套建議。