為了提供持續改善的方向,打造更優質的 AI 知識庫,
AI 小幫手在提供服務的同時,會紀錄以下資訊:
  1. 使用者提問
  2. AI 回應的內容及參考來源 (文件或 FAQ)
  3. 使用者對 AI 回應的滿意度回饋

透過這些數據,進行內容調整與優化
提升 AI 回應的正確率與覆蓋率,打造更優質的 AI 服務。
  1. 正確率
    針對「不滿意」、「值得改善」的問題進行優化。

  2. 覆蓋率 (知識缺口)
    針對「無法回答」、「都找不到」、「值得整理成 FAQ」、「常見問題」的問題,補 FAQ or 文件。

以「找不到 FAQ」為例,以下是 xms+ 的操作步驟。
操作步驟

  1. 查看統計資料
  2. 1.
    進入統計資料
    在「AI 小幫手管理」頁面 (網址/ai/mgr),從主題的統計圖示 2a6950f8fc907a26bb4d617c64dc0b9f.png 進入。
  3. 2.
    過濾出「找不到 FAQ」的問題
    在「AI 小幫手管理 / 統計資料」點「找不到 FAQ」篩選出沒有對應 FAQ 的問題。

    補充:
    也可以透過其他篩選,例如「值得整理成 FAQ」篩選出沒有對應 FAQ 的問題。


  4. 持續優化內容
  5. 3.
    查看回應內容
    點「回應」欄位中的連結,就會顯示 AI 的回應。
    並依據提問與來源的線索,調整內容。

    補充說明:
    AI 回應分成三種形式
    1. 系統
      AI 判斷使用者的提問系統已經有整理成 FAQ 的形式,就會直接回應 FAQ 的內容,好處是更完整 (含圖片、相關連結等) 也降低 AI 生成歪樓的機率。

    2. AI
      由 AI 小幫手依據文件 or FAQ 的內容生成回應。

    3. 外部 AI
      AI 小幫手直接詢問 ChatGPT 的回應
  6. 4.
    查看參考資料
    在「參考資料」欄位,會列出 AI 參考的內容。
    我們就能依據提問與來源的線索,調整內容。
  7. 5.
    整理 FAQ
    針對問題,在右側的下拉選單,點擊「整理成 FAQ」

    附註:
    如果有類似、相同的問題,記得善用「整併」的技巧,進一步瞭解:


  8. 確認效果
  9. 6.
    執行「更新資料」
    透過下拉工具執行「更新資料」,更新 AI 知識庫 (註)  

    註:
    由於目前 AI 硬體大量缺貨且昂貴,xms+ 是串接 openAI 的服務。
    基於成本的考量,並沒有在異動後立即自動更新,系統會於凌晨統一更新或允許透過人工更新。

  10. 7.
    再問一次
    接著,執行「再問一次」
    系統會另開分頁,將該問題再次詢問 AI 小幫手。

    小提醒:
    更好的做法是「換個問法」再問一次,
    如果 AI 依然可以找到我們寫的 FAQ,代表我們的 Q 有寫到關鍵的核心主體。
  11. 8.
    標示「已改善」
    確認 AI 已經可以正確回答後,
    就可以透過列表的下拉工具,標示成「已改善」 (註)

    附註:
    1. 處理過程中會詢問多次相同的問題,標示最近期的一筆即可,相同問題的會一起被標示。
    2. 篩選條件有提供「待改善」的狀態,方便我們篩選出需要處理的問題,就不會遺漏囉。

    評語
    請登入後才可以評分
    位置
    資料夾名稱
    AI 人工智慧之道 ~ 每天 10 分鐘,打造沒有幻覺的 AI 知識庫
    上傳者
    蘇德宙
    單位
    台灣數位員工
    標籤
    xms+ AI, AI統計
    建立
    2026-05-13 14:27:58
    最近修訂
    2026-09-17 11:40:46
    1. 1.
      快速入門
    2. 2.
      需求、現況與突破
    3. 3.
      生成式 AI 的根本限制與風險
    4. 4.
      打造沒有 AI 幻覺的知識庫
    5. 5.
      應用 (1) ~ 用 AI 提升業績 20%
    6. 6.
      應用 (2) ~ AI 驅動的學習革命
    7. 7.
      採取行動 ~ 導入系統與建立制度
    8. 8.
      知識管理 (1) ~ 記錄經驗
    9. 9.
      知識管理 (2) ~ 維護資料
    10. 10.
      知識管理 (3) ~ 寫 FAQ
    11. 11.
      知識管理 (4) ~ 寫文件
    12. 12.
      操作教學
    13. 13.
      Q&A
    14. 14.
      補充 (1) ~ 數位轉型
    15. 15.
      補充 (2) ~ 其他應用