AI 與易學

如何評估 AI 易學系統:從好聽到可驗證

評估至少包含規則正確率、引用可追溯率、幻覺率、行動可用性與高風險越界率。

AI 的合理角色是檢索、計算、整理、比較與提出待驗證問題。模型輸出必須保留資料來源、規則版本和人類責任,不能把流暢文本誤當作古籍原文或現實證據。

Key Idea

核心理解

同一批盲測案例應比較不同模型、不同 Prompt 與人工基線。

Method

怎麼用這個框架

事前定義指標,保留失敗樣本,版本更新後重新回歸測試。

  1. 這個主題在當前問題中對應哪一個可觀察的結構?
  2. 哪些內容來自傳統文本,哪些只是本站的現代轉譯?
  3. 下一步可以用什麼事實、數據或結果檢查這個判斷?

公開延伸閱讀

NIST AI Risk Management Framework