產出 #261

env=production · JV3C客服小幫手 (f2e2f75c-5fbe-400d-afeb-295f4ccc78c7) · eval_kind=mixed_qa

已完成
已寫入
10 / 10
通過驗證
10
場景覆蓋
1 / 2
總成本
$0.0121
Tokens
↑92615 / ↓3330
MISSED
1 個 scenario 未被任何 case 涵蓋：7658。可以重新派發、增加 N 來補。
SUITE
✅ 已寫入 EvalSuite auto-f2e2f75c-r1-053958978。
案例明細（19 筆 — 含已寫入、被拒、retry 軌跡）
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：我下單了 know_370530 
      Q: 我下單了
A: 您好，可以提供您的訂單編號給我們，這邊會盡快為您出貨，感謝您的支持
    Q
    我下單了，請問需要提供什麼資訊嗎？
    A
    您好，可以提供您的訂單編號給我們，這邊會盡快為您出貨，感謝您的支持。
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 對話流程：轉接真人客服 7657 
      轉接真人客服

## 1. 觸發條件
- 當用戶要求轉接真人客服，例如：線上客服、真人客服、轉真人、找真人

轉接真人客服的 Agent 情景

## 4. 回覆規則
- 直接觸發轉接真人
    Q
    可以轉接真人客服嗎
    A
    轉接真人客服
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問錶帶要如何選擇 know_370535 
      Q: 請問錶帶要如何選擇
A: 您好，請問您的手錶背面標示是多少mm的呢
    Q
    手錶背面標示的尺寸是幾毫米？
    A
    您好，請問您的手錶背面標示是多少mm的呢
  • 品質檢查未通過 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問我的平板要購買哪一個規格 know_370532 
      Q: 請問我的平板要購買哪一個規格
A: 您好，方便至您的平板設定-一般-關於本機的地方截圖嗎，或是可以拍一下平板裸機背面標示model的部分，這邊為您確認型號喔
    Q
    請問如何查看平板的一般資訊？
    A
    您可以透過平板的設定查看一般資訊。
    原因
    • 答案與資料來源的重疊度只有 26.7%（門檻 30%）—— LLM 寫的答案可能偏離了來源，有 hallucination 風險
  • 品質檢查未通過 直接問答 第 2 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：請問我的平板要購買哪一個規格 know_370532 
      Q: 請問我的平板要購買哪一個規格
A: 您好，方便至您的平板設定-一般-關於本機的地方截圖嗎，或是可以拍一下平板裸機背面標示model的部分，這邊為您確認型號喔
    Q
    請問我的平板可以在哪裡查看一般資訊?
    A
    您好，您可以透過平板的設定查看一般資訊。
    原因
    • 答案與資料來源的重疊度只有 29.4%（門檻 30%）—— LLM 寫的答案可能偏離了來源，有 hallucination 風險
  • 品質檢查未通過 直接問答 第 3 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：請問我的平板要購買哪一個規格 know_370532 
      Q: 請問我的平板要購買哪一個規格
A: 您好，方便至您的平板設定-一般-關於本機的地方截圖嗎，或是可以拍一下平板裸機背面標示model的部分，這邊為您確認型號喔
    Q
    請問我可以在哪裡查看平板的一般資訊？
    A
    您可以透過平板的設定查看一般資訊。
    原因
    • 答案與資料來源的重疊度只有 26.7%（門檻 30%）—— LLM 寫的答案可能偏離了來源，有 hallucination 風險
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問筆尖安裝上去為甚麼無法書寫 know_370531 
      Q: 請問筆尖安裝上去為甚麼無法書寫
A: 您好，請問您的觸控筆是原廠apple pencil嗎，若是的話是什麼型號呢
    Q
    筆尖安裝不當會造成無法書寫嗎
    A
    您好，筆尖安裝不當可能導致無法書寫。請問您的觸控筆是原廠apple pencil嗎，若是的話是什麼型號呢？
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問什麼時候會出貨 know_370522 
      Q: 請問什麼時候會出貨
A: 您好，訂單若於當天14:00前下單，當天會為您寄出，若於14點後下單，將會是隔日出貨喔，若使用宅配收貨的話，周五兩點後的訂單，將會是周一寄出喔
    Q
    訂單什麼時候會出貨?
    A
    若訂單於當天14:00前下單，當天會寄出，若於14點後下單，將會是隔日出貨喔。
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問我的訂單到貨了嗎 know_370534 
      Q: 請問我的訂單到貨了嗎
A: 您好，方便提供您的訂單編號，這邊為您查詢看看嗎
    Q
    訂單到貨了嗎？
    A
    您好，方便提供您的訂單編號，這邊為您查詢看看嗎
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：我購買的商品使用有問題 know_370527 
      Q: 我購買的商品使用有問題
A: 您好，請問方便提供訂單編號，這邊查詢一下嗎，目前是哪一個商品使用有遇到問題呢，方便說明一下目前遇到的狀況嗎
    Q
    如果商品使用有問題，我該怎麼辦？
    A
    您好，請問方便提供訂單編號，這邊查詢一下嗎，目前是哪一個商品使用有遇到問題呢，方便說明一下目前遇到的狀況嗎
  • 語意近重複（被 Stage C 拒絕） 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問SE可以使用這個錶殼嗎 know_370528 
      Q: 請問SE可以使用這個錶殼嗎
A: 您好，您方便幫我確認一下手錶背面標示多少MM嗎
    Q
    手錶背面標示多少MM？
    A
    您好，您方便幫我確認一下手錶背面標示多少MM嗎。
    原因
    • semantic duplicate of "手錶背面標示的尺寸是幾毫米？" (cosine=0.947 ≥ 0.8)
  • 其他 直接問答 第 2 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：請問SE可以使用這個錶殼嗎 know_370528 
      Q: 請問SE可以使用這個錶殼嗎
A: 您好，您方便幫我確認一下手錶背面標示多少MM嗎
    Q
    手錶背面標示多少MM？
    A
    您好，您方便幫我確認一下手錶背面標示多少MM嗎
    原因
    • duplicate (scenario, question)
  • 其他 直接問答 第 3 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：請問SE可以使用這個錶殼嗎 know_370528 
      Q: 請問SE可以使用這個錶殼嗎
A: 您好，您方便幫我確認一下手錶背面標示多少MM嗎
    Q
    手錶背面標示多少MM?
    A
    您好，您方便幫我確認一下手錶背面標示多少MM嗎
    原因
    • duplicate (scenario, question)
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問我取消訂單，折價卷會還我嗎 know_370526 
      Q: 請問我取消訂單，折價卷會還我嗎
A: 您好，會的，訂單尚未出貨，取消訂單，系統會將折價卷歸還給您
    Q
    取消訂單的時候，折價卷會還我嗎?
    A
    您好，會的，訂單尚未出貨，取消訂單，系統會將折價卷歸還給您。
  • 語意近重複（被 Stage C 拒絕） 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問我的訂單出貨了嗎 know_370524 
      Q: 請問我的訂單出貨了嗎
A: 您好，方便提供您的訂單編號，這邊來為您查詢嗎
    Q
    我的訂單出貨了嗎？
    A
    您好，方便提供您的訂單編號，這邊來為您查詢嗎
    原因
    • semantic duplicate of "訂單到貨了嗎？" (cosine=0.837 ≥ 0.8)
  • 其他 直接問答 第 2 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：請問我的訂單出貨了嗎 know_370524 
      Q: 請問我的訂單出貨了嗎
A: 您好，方便提供您的訂單編號，這邊來為您查詢嗎
    Q
    我的訂單出貨了嗎？
    A
    您好，方便提供您的訂單編號，這邊來為您查詢嗎。
    原因
    • duplicate (scenario, question)
  • 其他 直接問答 第 3 次嘗試
    來源素材（點擊查看完整內容）
    • • 知識：請問我的訂單出貨了嗎 know_370524 
      Q: 請問我的訂單出貨了嗎
A: 您好，方便提供您的訂單編號，這邊來為您查詢嗎
    Q
    我的訂單出貨了嗎?
    A
    您好，方便提供您的訂單編號，這邊來為您查詢嗎
    原因
    • duplicate (scenario, question)
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：請問折價卷一次可以使用兩張嗎 know_370525 
      Q: 請問折價卷一次可以使用兩張嗎
A: 您好，一筆訂單僅能使用一張折價卷喔~
    Q
    折價卷一次可以用兩張嗎
    A
    一筆訂單僅能使用一張折價卷喔~
  • 已寫入 EvalSuite 直接問答
    來源素材（點擊查看完整內容）
    • • 知識：您好，請問要如何退貨 know_370520 
      Q: 您好，請問要如何退貨
A: 您好，請問商品是否有保持全新呢，目前商品在使用過程中有遇到什麼狀況呢，若需要退貨要麻煩先使用711、全家或郵局寄回，並在訂單頁面申請退貨，我們收到商品檢查沒問題會同意退貨唷
    Q
    退貨的商品要去哪裡寄回?
    A
    退貨商品需使用711、全家或郵局寄回，並在訂單頁面申請退貨。