為了提供持續改善的方向,打造更優質的 AI 知識庫,
AI 小幫手在提供服務的同時,會紀錄以下資訊:
  1. 使用者提問
  2. AI 回應的內容及參考來源 (文件或 FAQ)
  3. 使用者對 AI 回應的滿意度回饋

透過這些數據,進行內容調整與優化
提升 AI 回應的正確率與覆蓋率,打造更優質的 AI 服務。
  1. 正確率
    針對「不滿意」、「值得改善」的問題進行優化。

  2. 覆蓋率 (知識缺口)
    針對「無法回答」、「都找不到」、「值得整理成 FAQ」、「常見問題」的問題,補 FAQ or 文件。

以「找不到 FAQ」為例,以下是 xms+ 的操作步驟。
操作步驟

  1. 查看統計資料
  2. 1.
    進入統計資料
    在「AI 小幫手管理」頁面 (網址/ai/mgr),從主題的統計圖示 2a6950f8fc907a26bb4d617c64dc0b9f.png 進入。
  3. 2.
    過濾出「找不到 FAQ」的問題
    在「AI 小幫手管理 / 統計資料」點「找不到 FAQ」篩選出沒有對應 FAQ 的問題。

    補充:
    也可以透過其他篩選,例如「值得整理成 FAQ」篩選出沒有對應 FAQ 的問題。


  4. 持續優化內容
  5. 3.
    查看回應內容
    點「回應」欄位中的連結,就會顯示 AI 的回應。
    並依據提問與來源的線索,調整內容。

    補充說明:
    AI 回應分成三種形式
    1. 系統
      AI 判斷使用者的提問系統已經有整理成 FAQ 的形式,就會直接回應 FAQ 的內容,好處是更完整 (含圖片、相關連結等) 也降低 AI 生成歪樓的機率。

    2. AI
      由 AI 小幫手依據文件 or FAQ 的內容生成回應。

    3. 外部 AI
      AI 小幫手直接詢問 ChatGPT 的回應
  6. 4.
    查看參考資料
    在「參考資料」欄位,會列出 AI 參考的內容。
    我們就能依據提問與來源的線索,調整內容。
  7. 5.
    整理 FAQ
    針對問題,在右側的下拉選單,點擊「整理成 FAQ」

    附註:
    如果有類似、相同的問題,記得善用「整併」的技巧,進一步瞭解:


  8. 確認效果
  9. 6.
    執行「更新資料」
    透過下拉工具執行「更新資料」,更新 AI 知識庫 (註) 。 

    註:
    由於目前 AI 硬體大量缺貨且昂貴,xms+ 是串接 openAI 的服務。
    基於成本的考量,並沒有在異動後立即自動更新,系統會於凌晨統一更新或允許透過人工更新。

  10. 7.
    再問一次
    接著,執行「再問一次」,
    系統會另開分頁,將該問題再次詢問 AI 小幫手。

    小提醒:
    更好的做法是「換個問法」再問一次,
    如果 AI 依然可以找到我們寫的 FAQ,代表我們的 Q 有寫到關鍵的核心主體。
  11. 8.
    標示「已改善」
    確認 AI 已經可以正確回答後,
    就可以透過列表的下拉工具,標示成「已改善」 (註)。

    附註:
    1. 處理過程中會詢問多次相同的問題,標示最近期的一筆即可,相同問題的會一起被標示。
    2. 篩選條件有提供「待改善」的狀態,方便我們篩選出需要處理的問題,就不會遺漏囉。

    評語
    請登入後才可以評分
    位置
    資料夾名稱
    AI 人工智慧之道 ~ 每天 10 分鐘,打造沒有幻覺的 AI 知識庫
    上傳者
    蘇德宙
    單位
    台灣數位員工
    標籤
    xms+ AI, AI統計
    建立
    2026-05-13 14:27:58
    最近修訂
    2026-09-17 11:40:46
    1. 1.
      快速入門
    2. 2.
      需求、現況與突破
    3. 3.
      生成式 AI 的根本限制與風險
    4. 4.
      打造沒有 AI 幻覺的知識庫
    5. 5.
      應用 (1) ~ 用 AI 提升業績 20%
    6. 6.
      應用 (2) ~ AI 驅動的學習革命
    7. 7.
      採取行動 ~ 導入系統與建立制度
    8. 8.
      知識管理 (1) ~ 記錄經驗
    9. 9.
      知識管理 (2) ~ 維護資料
    10. 10.
      知識管理 (3) ~ 寫 FAQ
    11. 11.
      知識管理 (4) ~ 寫文件
    12. 12.
      操作教學
    13. 13.
      Q&A
      1. 13.2
        企業為什麼需要自己的 AI 知識庫?
      2. 13.3
        文件與 FAQ
      3. 13.4
        AI 幻覺
      4. 13.5
        如何開始累積經驗?
      5. 13.6
        員工不想寫 FAQ 怎麼辦?
      6. 13.7
        FAQ 要怎麼寫?
      7. 13.8
        知識庫如何持續維護?
      8. 13.9
        經驗如何變成能力?
      9. 13.10
        如何推動?
      10. 13.11
        xms+AI 操作相關
    14. 14.
      補充 (1) ~ 數位轉型
    15. 15.
      補充 (2) ~ 其他應用