產出 #673

env=production · 緯育 AI 數位學習管理助手 米寶 (85546bd9-1a88-4ba7-b448-f0a098946481) · eval_kind=kb_accuracy

已完成
已寫入
10 / 10
通過驗證
10
場景覆蓋
1 / 9
總成本
$0.0201
Tokens
↑149504 / ↓6437
MISSED
8 個 scenario 未被任何 case 涵蓋：6160, 6161, 6159, 6162, 6886, 7173, 2731, 6158。可以重新派發、增加 N 來補。
SUITE
✅ 已寫入 EvalSuite auto-85546bd9-r1-054000477。
案例明細（28 筆 — 含已寫入、被拒、retry 軌跡）
  • 語氣不像真人 chat（被 Stage E 拒絕） 直接問答 第 3 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：是否有報名候補的機制 know_224683 
      Q: 是否有報名候補的機制
A: 目前沒有，但可以用以下方式來處理：
開啟簽核流程，將「簽核者」設為指定帳號(例如班級的承辦人)，學員報名課程後，簽核者可進入「個人中心/申請及簽核/我的簽核」中篩選學員名單，將要加入課程的學員簽核通過即可。

補充：
簽核申請單的順序，會依申請時間前後顯示(最新申請的在最上面)
    Q
    學員報名課程後，簽核者可以做什麼?
    A
    學員報名課程後，簽核者可進入「個人中心/申請及簽核/我的簽核」中篩選學員名單，將要加入課程的學員簽核通過即可。
    原因
    • chat-realism: internal_role_title (The question mentions '簽核者', which is an internal role that a typical customer wouldn't reference.)
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：如果簽退多次，平台會以哪個時間為主呢 know_224708 
      Q: 如果簽退多次，平台會以哪個時間為主呢
A: 會以最後簽退的時間
    Q
    如果簽退多次，會以哪個時間為主?
    A
    會以最後簽退的時間。
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：為何測驗匯出報表中每題四個選項的總和不同？ know_224649 
      Q: 為何測驗匯出報表中每題四個選項的總和不同？
A: 因為未每位學員都作答每個題目，未作答的選項數值未被計入。若想檢視未作答情況，可同時匯出「測驗填答紀錄」進行比對。
    Q
    測驗報表選項總和為什麼不同？
    A
    因為未每位學員都作答每個題目，未作答的選項數值未被計入。若想檢視未作答情況，可同時匯出「測驗填答紀錄」進行比對。
  • 語氣不像真人 chat（被 Stage E 拒絕） 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：簽核通知有哪幾種 know_224626 
      Q: 簽核通知有哪幾種
A: 包含待簽核者通知(通知簽核者)、簽核結果通知(通知申請人)
    Q
    簽核通知裡有包含簽核結果通知嗎？
    A
    是的，簽核通知包括簽核結果通知，會通知申請人。
    原因
    • chat-realism: internal_role_title (The question references '簽核通知', which suggests an internal company process that a typical customer wouldn't mention.)
  • 語氣不像真人 chat（被 Stage E 拒絕） 直接問答 第 2 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：簽核通知有哪幾種 know_224626 
      Q: 簽核通知有哪幾種
A: 包含待簽核者通知(通知簽核者)、簽核結果通知(通知申請人)
    Q
    簽核通知包含哪些種類呢？
    A
    簽核通知包含待簽核者通知和簽核結果通知。
    原因
    • chat-realism: internal_role_title (The question uses the term '簽核通知', which suggests an internal company process that a typical customer wouldn't refere...)
  • 已寫入 EvalSuite 直接問答 第 3 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：簽核通知有哪幾種 know_224626 
      Q: 簽核通知有哪幾種
A: 包含待簽核者通知(通知簽核者)、簽核結果通知(通知申請人)
    Q
    請問簽核通知有哪幾種呢？
    A
    簽核通知包含待簽核者通知(通知簽核者)和簽核結果通知(通知申請人)。
  • 語氣不像真人 chat（被 Stage E 拒絕） 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：AI設定常見問題有哪些？ know_381972 
      Q: AI設定常見問題有哪些？
A: AI助手常見問題說明：Q1使用前需先建立AI助手並設定權限；Q2 AI回答內容來自模型既有知識及企業上傳的訓練文件；Q3 AI可能無法有效回應所有問題，可在訓練檔案中標明超出範圍時的處理方式；Q4無法回答可能是問題未包含在文件、提問過於模糊或權限限制；Q5 AI功能使用量超過上限時無法使用；Q6使用者可在對話視窗查看個人剩餘額度，管理員可在後台查看使用額度；Q7若回答錯誤可更改訓練檔案並重新上傳或修改提示詞；Q8支援中英日韓等85種語言；Q9 AI無法記住歷史對話，建議詢問時提供完整問題描述；Q10有多個助手存取權限時可在對話視窗選擇對應的助手。
    Q
    AI可能無法有效回應所有問題嗎?
    A
    是的，AI可能無法有效回應所有問題，並可在訓練檔案中標明超出範圍時的處理方式。
    原因
    • chat-realism: vague_meta (The question is vague and asks about the effectiveness of AI in general, which is not a concrete inquiry a customer w...)
  • 已寫入 EvalSuite 直接問答 第 2 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：AI設定常見問題有哪些？ know_381972 
      Q: AI設定常見問題有哪些？
A: AI助手常見問題說明：Q1使用前需先建立AI助手並設定權限；Q2 AI回答內容來自模型既有知識及企業上傳的訓練文件；Q3 AI可能無法有效回應所有問題，可在訓練檔案中標明超出範圍時的處理方式；Q4無法回答可能是問題未包含在文件、提問過於模糊或權限限制；Q5 AI功能使用量超過上限時無法使用；Q6使用者可在對話視窗查看個人剩餘額度，管理員可在後台查看使用額度；Q7若回答錯誤可更改訓練檔案並重新上傳或修改提示詞；Q8支援中英日韓等85種語言；Q9 AI無法記住歷史對話，建議詢問時提供完整問題描述；Q10有多個助手存取權限時可在對話視窗選擇對應的助手。
    Q
    AI無法有效回應所有問題是為什麼?
    A
    AI可能無法有效回應所有問題，可在訓練檔案中標明超出範圍時的處理方式。