知識庫上線只是開始:AI辦公助理愈用愈準的修正迴圈
知識庫上線那天其實是最不准的時候。真正的分水嶺在於上線之後有沒有一套修正迴圈在跑——同一套知識庫,有迴圈的三個月後脫胎換骨,沒迴圈的半年後沒人問。
富啟科技最想先導正的觀念是:上線時的回答品質大概只會是六十分,這很正常,不是建置失敗。文件用真人的分類邏輯寫了幾十年,換成提問式的檢索,本來就需要磨合。

▍迴圈的第一圈:看沒被回答的問題
系統要記錄每一題它沒把握的問題。這份未答清單是知識庫最貴的資產,因為它是公司真實的知識地圖缺口:員工以為有答案的事,公司其實沒寫下來。
每週掃一次這份清單,會看出三種東西。一種是文件有但沒抓到,屬於檢索問題,調關鍵詞跟描述。一種是真的沒有,例如最近才改的制度沒人更新文件,這要派工補。還有一種最有意思:同一個問題出現十幾種不同問法,代表這件事大家都在找,值得寫成一篇完整的說明放在最前面。
▍第二圈:答案的滿意度訊號
光知道有沒有回答不夠,還要知道回答得好不好。最直接的是每題下面放有用跟沒用的按鈕,門檻越低越好,按一下就好。
但按鈕訊號有個偏誤:覺得普通的人不會按,只有很滿意跟很生氣的會按。所以要搭配行為訊號一起看。問完之後又重複問了類似問題、看到答案立刻再發一題、過一會兒直接打電話問同事,這些行為都在說答案沒解決問題。問完之後沒有後續動作、或答案展開停留很久,通常代表有用。
被按沒用的問題不要只看那一題,要看它引用的是哪份文件。常常是某一份文件被引用的題目滿意度都低,問題出在那份文件本身寫得不清楚,修一份等於修一串。
▍第三圈:文件的新陳代謝
知識庫會胖,而且胖得很快。每個單位都熱心上架,三個月後重複主題的文件十幾份,新舊版本並存。
所以下架跟上架一樣重要。每季做一次檢視,三類文件要處理:超過期限還被引用的舊版,直接下架;內容重複的,合併並指定唯一現行版;上線之後從來沒被查詢過的,確認還需不需要留。第三類很多主管捨不得刪,但從未被查詢的文件留在索引裡只會干擾命中率。
▍迴圈要有人負責,不然不會自己轉
技術上這些紀錄系統都產得出來,差別只在有沒有人每週看。實務上最穩的配置是一個窗口加上各部門內容負責人:窗口掃清單、分流,文件內容的問題派給各部門,檢索調校找系統商,窗口追蹤到結案。
這個角色每週大約只需要半天,不需要專職,但不能沒有。沒有人負責的常見結局是:前三週大家新鮮,什麼問題都有人回報,之後清單開始堆積,一個月後沒人記得密碼。
▍三個月後要看到的三個指標
未答率持續下降,代表缺口在補。重複問題的比例下降,代表同一個問題第一次問就解決了。人工轉查詢的量上升,代表同仁遇到問題開始先問系統,這是信任的指標,比滿意度分數更誠實。
這三個指標往上走,就不用再辯論知識庫有沒有用。
▍小結
知識庫是少數上線時品質最低、卻註定愈用愈好的系統,前提是修正迴圈真的在轉。未答清單、滿意度訊號、新陳代謝加上一個負責的窗口,四件事持續跑,三個月就有感;缺了迴圈,上線那天就是它最好的一天。
▍AI辦公助理知識庫修正迴圈常見問題
Q1:知識庫上線後回答不準,是不是建置失敗了?
通常不是。文件長年依分類邏輯存放,改成提問式檢索一定有磨合期,上線初期只到六十分是常態。判斷成敗要看趨勢:未答率有沒有每週下降、同一問題重複問的比例有沒有減少。若兩三個月後指標完全不動,才比較可能是建置或資料品質的問題。
Q2:怎麼知道同仁問了什麼,以及AI辦公助理哪些題沒答好?
靠兩份紀錄:未答清單記錄系統沒把握或找不到依據的問題,滿意度訊號記錄被評為沒用的回答。富啟科技的知識庫在後台會把這兩類分開,再附上當時引用的文件,方便判斷是文件缺口還是檢索失準。另外可參考行為訊號,例如問完立刻再問類似問題、或轉而去問同事,這些通常代表答案沒有解決問題。
Q3:知識庫裡的文件愈來愈多,需要定時清理嗎?
需要,建議每季一次。要處理三類:超過有效期還在被引用的舊版下架、重複主題的合併並指定唯一現行版、上線以來從未被查詢過的文件確認是否留存。第三類很多單位捨不得刪,但無人查詢的文件會干擾命中率,留著的代價不只是儲存空間。清理時保留清單紀錄即可,日後需要還找得到軌跡。
Q4:讓知識庫愈用愈準,需要專職人員負責嗎?
多數公司不需要專職,但需要一個明確的窗口,每週大約半天。窗口負責掃未答清單、把問題分流到各部門內容負責人或系統商,並追蹤到結案。這個角色最怕的是沒有掛名,系統的紀錄不會自己變成行動。如果公司規模小到連半天都抽不出來,至少把每週固定一個時段排進某人的行事曆,比完全沒人管強很多。
知識庫值不值得長期經營,不看上線時的掌聲,看三個月後未答題是變少還是變成積案。若您想確認修正迴圈該怎麼分工、哪些指標值得每週看,歡迎跟我們聊聊。
富啟科技可協助規劃未答題分流、文件檢視週期與負責窗口的運作方式,取得客製化建置方案與報價:
電話 (02)2516-6100|手機 0979-382-058|LineID:@964dmmig
地址:台北市南京東路二段178號6樓
-
已經在用Zoho、HubSpot還需要什麼?AI CRM的補位與串接評估
-
公司什麼時候該上AI CRM?業務人數與客戶量的判斷點
-
教育訓練影片、會議錄影也能進AI知識庫嗎?影音檔匯入前的整理
-
AI辦公助理被問過什麼?知識庫查詢紀錄與稽核軌跡怎麼設計
-
客戶合約掃描檔能丟進AI知識庫嗎?個資盤點先分四類文件
-
企業私有知識庫換廠商,文件搬得走嗎?匯出清單導入前就要談好
-
全公司共用一組帳號登入?AI辦公助理的知識庫權限等於虛設
-
連鎖品牌總部SOP知識庫|AI辦公助理讓分店不再用到舊版本
-
知識庫上線只是開始:AI辦公助理愈用愈準的修正迴圈
-
RAG到底是什麼?AI辦公助理的知識庫為什麼不能直接丟檔案
-
掃描檔、照片、Excel都能進AI知識庫嗎?匯入前的檔案整理
-
公司資料散在LINE群組與信箱?收進AI辦公助理知識庫的順序
-
AI辦公助理答錯怎麼辦?回答附出處只是最基本的要求
-
買了Microsoft 365 Copilot,還需要企業私有知識庫嗎?
-
AI辦公助理的知識庫權限怎麼開?查到不該看的資料才是大問題
新東陽
六角國際旗下品牌
羅森便利商店
喜士多便利商店
