產出 #141

env=production · Cacafly AI (99cd5f07-9e93-4897-83f6-a04779b55e5c) · eval_kind=mixed_qa

已完成
已寫入
10 / 10
通過驗證
10
場景覆蓋
1 / 3
總成本
$0.0096
Tokens
↑65657 / ↓2931
MISSED
2 個 scenario 未被任何 case 涵蓋:1325, 1327。可以重新派發、增加 N 來補。
SUITE
✅ 已寫入 EvalSuite auto-99cd5f07-r1-053958524
案例明細(11 筆 — 含已寫入、被拒、retry 軌跡)
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:超商取貨有什麼限制? know_137135
      Q: 超商取貨有什麼限制?
      A: 超商取貨有重量(5公斤內)和尺寸限制,不適用於大型商品。商品到店後會收到簡訊通知,請在7天內憑簡訊和身分證件取貨。逾期未取將退回並收取來回運費。取貨時請當場檢查商品狀況。
    Q
    請問超商取貨需要在幾天內取貨呢?
    A
    商品到店後請在7天內憑簡訊和身分證件取貨。
  • 語氣不像真人 chat(被 Stage E 拒絕) 直接問答
    來源素材(點擊查看完整內容)
    • • 工具:電商訂單搜尋 executor — 打 JTCG SaaS API + vendor parser 格式化 51
      電商訂單搜尋 executor — 打 JTCG SaaS API + vendor parser 格式化 (shopline_search_orders)
      
      Search for order details based on the information user provided.
    Q
    怎麼用 JTCG SaaS API 查訂單?
    A
    使用電商訂單搜尋 executor,可以透過 JTCG SaaS API 和 vendor parser 格式化來查詢訂單細節。
    原因
    • chat-realism: internal_role_title (提到 'JTCG SaaS API' 顯示出內部角色的專業術語,顧客不會這樣詢問。)
  • 已寫入 EvalSuite 直接問答 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 工具:電商訂單搜尋 executor — 打 JTCG SaaS API + vendor parser 格式化 51
      電商訂單搜尋 executor — 打 JTCG SaaS API + vendor parser 格式化 (shopline_search_orders)
      
      Search for order details based on the information user provided.
    Q
    電商訂單搜尋要怎麼操作?
    A
    可以透過打 JTCG SaaS API 及 vendor parser 來搜尋電商訂單。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 對話流程:知識與產品查詢 1326
      知識與產品查詢
      
      ## 1. 觸發條件
      - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                          - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                          - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                          - Short queries under 10 characters
                          - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
      - 活動相關:
                          - 活動/報名/參加
                          - 優惠/折扣/促銷
                          - 抽獎/贈品/獎品
      - 公司資訊相關:
                          - 粉絲團/粉專/FB/Facebook/臉書
                          - Instagram/IG/社群/社群媒體
                          - 官網/網站/官方網站
                          - LINE/Line官方帳號
                          - Youtube/YT/影片/頻道
                          - 公司/品牌/關於我們
      - 服務相關:
                          - 服務時間/營業時間/上班時間
                          - 聯絡方式/電話/信箱/地址
                          - 退換貨/退款/退費
                          - 保固/維修/售後
                          - 配送/運費/到貨時間
                          - 付款方式/分期/優惠
                          - 會員/積分/紅利
                          - 發票/收據/證明
      - 政策相關:
                          - 政策/規定/條款
                          - 隱私/個資/資料
                          - 安全/保障/保護
                          - 責任/義務/權利
      - 技術問題:
                          - 無法/不能/不行
                          - 錯誤/異常/問題
                          - 當機/卡住/慢
                          - 登入/註冊/密碼
                          - 設定/安裝/使用
      - 產品使用方式:
                          - 怎麼用/如何使用/使用方法
                          - 使用方式/操作方式/使用步驟
                          - 安裝/設定/配置
                          - 第一次使用/新手使用/初次使用
                          - 使用技巧/使用建議/使...
    Q
    查詢的問題要有問號還是疑問詞嗎
    A
    是的,任何含有問號或者疑問詞的查詢都會立即觸發知識與產品查詢。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:點數如何累積和使用? know_137188
      Q: 點數如何累積和使用?
      A: 每消費100元可獲得1點積分,1點可折抵1元消費。積分會在訂單完成後7天內入帳,退貨時會扣回相對應積分。積分有效期限為2年,即將到期前會email提醒使用。積分可在結帳時抵用現金。
    Q
    積分多久會入帳啊
    A
    積分會在訂單完成後7天內入帳。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:會員等級如何提升? know_137187
      Q: 會員等級如何提升?
      A: 會員等級依年度累積消費金額自動升級:一般會員0元、銀卡會員滿5000元、金卡會員滿15000元、鑽石會員滿30000元。每年1月1日重新計算消費金額,等級可能調整。不同等級享有不同優惠和服務。
    Q
    一般會員需要消費多少金額才能升級?
    A
    一般會員的消費金額要求為0元即可升級。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:退貨需要付運費嗎? know_137169
      Q: 退貨需要付運費嗎?
      A: 一般退貨運費由顧客自付,約60-100元。若因商品瑕疵、錯誤出貨或與描述不符等我方責任導致退貨,運費由我們承擔並會連同退款一起處理。退貨前請確認退貨原因和運費負擔方式。
    Q
    退貨的運費大概要多少?
    A
    一般退貨運費由顧客自付,約60-100元。如果因商品瑕疵、錯誤出貨或與描述不符的原因退貨,運費由我們承擔,並會連同退款一起處理。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:為什麼我的訂單被取消了? know_137098
      Q: 為什麼我的訂單被取消了?
      A: 訂單取消原因可能包括:付款失敗、商品缺貨、地址資訊不完整、疑似異常訂單等。系統會自動發送取消通知至您的email。若對取消原因有疑問,請提供訂單編號聯繫客服,我們將為您詳細說明並協助重新下單。
    Q
    訂單被取消了,要怎麼聯繫客服?
    A
    若對訂單取消原因有疑問,請提供訂單編號聯繫客服,我們將為您詳細說明並協助重新下單。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:可以分批出貨嗎? know_137105
      Q: 可以分批出貨嗎?
      A: 當訂單中包含不同出貨時程的商品時,我們會依商品到貨情況分批出貨,以加快您收到現貨商品的速度。每次出貨都會發送通知,運費僅收取一次。您也可以選擇等齊後一次出貨,請在訂單備註註明或聯繫客服協助設定。
    Q
    可以等齊所有商品後一次出貨嗎?
    A
    可以,客戶可以選擇等齊所有商品後一次出貨,請在訂單備註註明或聯繫客服協助設定。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:特價商品可以退換貨嗎? know_137176
      Q: 特價商品可以退換貨嗎?
      A: 特價商品和出清商品可能有不同的退換貨政策,部分可能不接受退貨或需收取手續費。購買前請詳閱商品頁面的特殊說明。一般特價商品仍可正常退換,但建議確認後再購買。
    Q
    特價商品可以退換嗎
    A
    一般特價商品仍可正常退換,但建議確認後再購買。
  • 已寫入 EvalSuite 直接問答
    來源素材(點擊查看完整內容)
    • • 知識:貨到付款有額外費用嗎? know_137118
      Q: 貨到付款有額外費用嗎?
      A: 貨到付款需收取30元處理費,限台灣本島地區且單筆訂單金額5000元以下。配送時請備妥現金給司機,恕不找零。若收件時不在家導致配送失敗,可能需支付額外運費。建議優先選擇其他付款方式以節省費用。
    Q
    貨到付款時要準備現金嗎?
    A
    配送時請備妥現金給司機,恕不找零。