產出 #259

env=production · JV3C客服小幫手 (f2e2f75c-5fbe-400d-afeb-295f4ccc78c7) · eval_kind=kb_accuracy

已完成
已寫入
10 / 10
通過驗證
10
場景覆蓋
1 / 2
總成本
$0.0098
Tokens
↑70995 / ↓2689
MISSED
1 個 scenario 未被任何 case 涵蓋：7657。可以重新派發、增加 N 來補。
SUITE
✅ 已寫入 EvalSuite auto-f2e2f75c-r1-053958978。
案例明細（14 筆 — 含已寫入、被拒、retry 軌跡）
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：門市在哪 know_370537 
      Q: 門市在哪
A: 您好，以下提供給您
中壢中原門市
🗺️地址：桃園市中壢區中山東路二段70號
⏰營業時間：13:00-22:00
八德大湳門市
🗺️地址：桃園市八德區廣福路42號
⏰營業時間：13:00-21:30
桃園站前店
🗺️地址：桃園市桃園區中正路79號
⏰營業時間：13:00~21:30
    Q
    桃園站前店的地址是多少?
    A
    桃園站前店的地址是桃園市桃園區中正路79號。
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：您好，請問要如何退貨 know_370520 
      Q: 您好，請問要如何退貨
A: 您好，請問商品是否有保持全新呢，目前商品在使用過程中有遇到什麼狀況呢，若需要退貨要麻煩先使用711、全家或郵局寄回，並在訂單頁面申請退貨，我們收到商品檢查沒問題會同意退貨唷
    Q
    請問退貨必須透過哪裡寄回呢？
    A
    退貨必須透過711、全家或郵局寄回，並在訂單頁面申請退貨。
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問錶帶要如何選擇 know_370535 
      Q: 請問錶帶要如何選擇
A: 您好，請問您的手錶背面標示是多少mm的呢
    Q
    選擇錶帶時需要知道什麼嗎？
    A
    您好，請問您的手錶背面標示是多少mm的呢？
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問我的訂單到貨了嗎 know_370534 
      Q: 請問我的訂單到貨了嗎
A: 您好，方便提供您的訂單編號，這邊為您查詢看看嗎
    Q
    我的訂單到貨了嗎
    A
    您好，方便提供您的訂單編號，這邊為您查詢看看嗎
  • 品質檢查未通過 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問我的平板要購買哪一個規格 know_370532 
      Q: 請問我的平板要購買哪一個規格
A: 您好，方便至您的平板設定-一般-關於本機的地方截圖嗎，或是可以拍一下平板裸機背面標示model的部分，這邊為您確認型號喔
    Q
    平板的型號要在哪裡找?
    A
    平板的型號可以在設定中的一般選項下找到。
    原因
    • 答案與資料來源的重疊度只有 27.8%（門檻 30%）—— LLM 寫的答案可能偏離了來源，有 hallucination 風險
  • 已寫入 EvalSuite 直接問答 第 2 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：請問我的平板要購買哪一個規格 know_370532 
      Q: 請問我的平板要購買哪一個規格
A: 您好，方便至您的平板設定-一般-關於本機的地方截圖嗎，或是可以拍一下平板裸機背面標示model的部分，這邊為您確認型號喔
    Q
    平板的型號在哪裡可以找到？
    A
    您可以在平板的設定裡找到型號，操作步驟是設定-一般-關於本機。
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：我下單了 know_370530 
      Q: 我下單了
A: 您好，可以提供您的訂單編號給我們，這邊會盡快為您出貨，感謝您的支持
    Q
    我已經下單了，請問需要提供什麼資訊？
    A
    您好，可以提供您的訂單編號給我們，這邊會盡快為您出貨，感謝您的支持。
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問折價卷一次可以使用兩張嗎 know_370525 
      Q: 請問折價卷一次可以使用兩張嗎
A: 您好，一筆訂單僅能使用一張折價卷喔~
    Q
    折價卷一次可以用幾張?
    A
    您好，一筆訂單僅能使用一張折價卷喔~
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問充電線要購買哪一個規格 know_370523 
      Q: 請問充電線要購買哪一個規格
A: 您好，請問您要充電的手機是甚麼型號呢，以及您目前使用的充電頭是USB大孔還是TYPE-C小孔呢
    Q
    充電線要考慮手機型號嗎
    A
    是的，請問您要充電的手機是甚麼型號呢？
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問我取消訂單，折價卷會還我嗎 know_370526 
      Q: 請問我取消訂單，折價卷會還我嗎
A: 您好，會的，訂單尚未出貨，取消訂單，系統會將折價卷歸還給您
    Q
    取消訂單，折價卷會還嗎
    A
    會的，訂單尚未出貨，系統會將折價卷歸還給您。
  • 語意近重複（被 Stage C 拒絕） 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問我的訂單出貨了嗎 know_370524 
      Q: 請問我的訂單出貨了嗎
A: 您好，方便提供您的訂單編號，這邊來為您查詢嗎
    Q
    我的訂單出貨了嗎?
    A
    您好，方便提供您的訂單編號，這邊來為您查詢嗎
    原因
    • semantic duplicate of "我的訂單到貨了嗎" (cosine=0.895 ≥ 0.8)
  • 其他 直接問答 第 2 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：請問我的訂單出貨了嗎 know_370524 
      Q: 請問我的訂單出貨了嗎
A: 您好，方便提供您的訂單編號，這邊來為您查詢嗎
    Q
    我的訂單出貨了嗎？
    A
    您好，方便提供您的訂單編號，這邊來為您查詢嗎。
    原因
    • duplicate (scenario, question)
  • 其他 直接問答 第 3 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：請問我的訂單出貨了嗎 know_370524 
      Q: 請問我的訂單出貨了嗎
A: 您好，方便提供您的訂單編號，這邊來為您查詢嗎
    Q
    我的訂單出貨了嗎?
    A
    您好，方便提供您的訂單編號，這邊來為您查詢嗎。
    原因
    • duplicate (scenario, question)
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：我想要取消訂單 know_370533 
      Q: 我想要取消訂單
A: 您好，方便提供一下訂單編號，這邊為您確認一下嗎
    Q
    我想取消訂單，訂單編號是多少?
    A
    您好，方便提供一下訂單編號，這邊為您確認一下嗎