產出 #555

env=production · 廢車王 (58c4d1ba-7634-46d9-a524-b8a48e1d3c0b) · eval_kind=mixed_qa

已完成
已寫入
10 / 10
通過驗證
10
場景覆蓋
1 / 5
總成本
$0.0088
Tokens
↑59757 / ↓2718
MISSED
4 個 scenario 未被任何 case 涵蓋:3, 4, 2, 701。可以重新派發、增加 N 來補。
SUITE
✅ 已寫入 EvalSuite auto-58c4d1ba-r1-054000139
案例明細(11 筆 — 含已寫入、被拒、retry 軌跡)
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:車子報廢還要繳牌照稅嗎? know_81316
      Q: 車子報廢還要繳牌照稅嗎?
      A: 您好,若當期牌照稅尚未繳納,於報廢車輛後仍需結清牌照欠費,您可至車輛環保回收欠(退)稅網路申報平台申請。僅限委託回收商代辦者適用
    Q
    報廢車輛還要繳牌照稅嗎
    A
    若當期牌照稅尚未繳納,報廢車輛後仍需結清牌照欠費,您可至車輛環保回收欠(退)稅網路申報平台申請。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 工具:電商訂單搜尋 executor — 打 JTCG SaaS API + vendor parser 格式化 51
      電商訂單搜尋 executor — 打 JTCG SaaS API + vendor parser 格式化 (shopline_search_orders)
      
      Search for order details based on the information user provided.
    Q
    電商訂單搜尋怎麼用?
    A
    電商訂單搜尋 executor 是透過 JTCG SaaS API 和 vendor parser 格式化來進行操作的。
  • Judge LLM 拒絕 直接問答
    來源素材(點擊查看完整內容)
    • • 對話流程:轉接真人客服 1
      轉接真人客服
      
      ## 1. 觸發條件
      - 線上客服/轉線上客服
      - 在線客服/轉在線客服
      - 真人客服/轉真人客服
      - 轉真人/找真人
      - Direct transfer request
      - Emotional escalation
      - Resolution failure
      
      轉接真人客服的 Agent 情景
      
      ## 4. 回覆規則
      - Acknowledge situation
      - Return transfer response in specified format
    Q
    轉接真人客服需要確認什麼情況?
    A
    轉接真人客服的代理人需要確認情況。
    原因
    • The answer does not specify the conditions that need to be confirmed for transferring to a live agent, which are present in the sources.
    • Judge LLM 認為答案與資料來源有事實出入
  • 已寫入 EvalSuite 直接問答 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 對話流程:轉接真人客服 1
      轉接真人客服
      
      ## 1. 觸發條件
      - 線上客服/轉線上客服
      - 在線客服/轉在線客服
      - 真人客服/轉真人客服
      - 轉真人/找真人
      - Direct transfer request
      - Emotional escalation
      - Resolution failure
      
      轉接真人客服的 Agent 情景
      
      ## 4. 回覆規則
      - Acknowledge situation
      - Return transfer response in specified format
    Q
    要轉接真人客服前,需要確認什麼嗎?
    A
    轉接真人客服的代理人需要確認情況。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:空污/溫室氣體補助要去哪裡申請 know_81296
      Q: 空污/溫室氣體補助要去哪裡申請
      A: 您好,可至環保署平台:?https://mobile.moenv.gov.tw/EPAMobileETP/Home/Index?ReturnUrl=%252fEPAMobileETP%252f?進行媒合與申請。
    Q
    空污補助要去哪裡申請?
    A
    您好,可至環保署平台:https://mobile.moenv.gov.tw/EPAMobileETP/Home/Index?ReturnUrl=%252fEPAMobileETP%252f進行媒合與申請。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:臨櫃繳回車牌,可以直接申請獎勵金嗎?去監理站可以直接申請獎勵金嗎?獎勵金多久會匯到帳戶? know_81289
      Q: 臨櫃繳回車牌,可以直接申請獎勵金嗎?去監理站可以直接申請獎勵金嗎?獎勵金多久會匯到帳戶?
      A: 可以的,監理站都設有獎勵金櫃台,可於辦理車籍報廢時一併申請,若您所在縣市監理站無獎勵金專責櫃台,請透過環保署網站申請。無論透過哪種方式,都需等2-3週,獎勵金才會匯至帳戶。
    Q
    請問獎勵金匯到帳戶大約需要多久?
    A
    獎勵金需要等2-3週才會匯至帳戶。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:我是線上繳罰單,為何還是不能代辦? know_81327
      Q: 我是線上繳罰單,為何還是不能代辦?
      A: 您好,如是這種問題,需請您聯繫監理站確認。
    Q
    線上繳罰單後為什麼不能代辦?
    A
    您好,如是這種問題,需請您聯繫監理站確認。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:貨物稅找誰申請?可以申請的期限?要準備什麼資料? know_81294
      Q: 貨物稅找誰申請?可以申請的期限?要準備什麼資料?
      A: 若要申請舊換新補助,請於報廢車輛前後6個月內購置新車,備妥回收管制聯單、報廢單(異動登記書)、新車領牌登記與新車完稅證明,交由經銷商協助申請,更多貨物稅詳情請上財政部官網。
    Q
    申請舊換新補助要準備什麼資料?
    A
    申請舊換新補助需要準備回收管制聯單、報廢單(異動登記書)、新車領牌登記與新車完稅證明。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:晚上或是假日可以拖車嗎?拖車現場要有人在嗎? know_81276
      Q: 晚上或是假日可以拖車嗎?拖車現場要有人在嗎?
      A: 依據各回收商營業時間,基本上拖車時間為周一至周六,上午九點至下午五點。汽車回收需有人到場簽收聯單,機車則可採無接觸服務(意即車主免到場)
    Q
    汽車回收要有人到場簽收嗎
    A
    汽車回收需有人到場簽收聯單。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:可以拆零件嗎?拆零件會扣錢嗎? know_81279
      Q: 可以拆零件嗎?拆零件會扣錢嗎?
      A: 基本上回收商都是提供完整零件的報價,若您有確認想要拆卸的零件,請和回收商告知,以利回收商提供準確報價。
    Q
    回收商提供拆零件的報價嗎?
    A
    基本上回收商都是提供完整零件的報價,若您有確認想要拆卸的零件,請和回收商告知,以利回收商提供準確報價。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:請問獎勵金跟退稅,可以用家人或朋友的帳戶嗎? know_81328
      Q: 請問獎勵金跟退稅,可以用家人或朋友的帳戶嗎?
      A: 申請獎勵金跟退稅,只能使用車主本人帳戶申請。
    Q
    請問申請獎勵金可以用家人或朋友的帳戶嗎?
    A
    申請獎勵金跟退稅,只能使用車主本人帳戶申請。