產出 #758
env=production · 順易利 AI 小幫手 (8ec6e097-52ee-44b9-b7bb-f4f1d1bac79d) · eval_kind=scenario_funnel
已完成
10 / 10
10
3 / 4
$0.0268
↑189372 / ↓4785
MISSED
1 個 scenario 未被任何 case 涵蓋:
965。可以重新派發、增加 N 來補。
SUITE
✅ 已寫入 EvalSuite auto-8ec6e097-r1-054000703。
案例明細(25 筆 — 含已寫入、被拒、retry 軌跡)
-
語意近重複(被 Stage C 拒絕) scenario_focused來源素材(點擊查看完整內容)
-
• 對話流程:訂單查詢 967
訂單查詢 ## 1. 觸發條件 - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info). 訂單查詢的 Agent 情景 ## 3. API 工具 1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊 ## 4. 回覆規則 - Provide clear and concise answers based on order search results from tool messages - If multiple relevant orders found, combine them logically - If no relevant order found, acknowledge and offer to check with customer service
Q我想查詢我的訂單狀態,可以幫我看一下嗎?A請提供您的訂購姓名或訂單編號,我才能幫您查詢訂單狀態。原因- semantic duplicate of "我可以查詢我的訂單狀態嗎?" (cosine=0.826 ≥ 0.8)
-
-
已寫入 EvalSuite scenario_focused 第 2 次嘗試來源素材(點擊查看完整內容)
-
• 對話流程:訂單查詢 967
訂單查詢 ## 1. 觸發條件 - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info). 訂單查詢的 Agent 情景 ## 3. API 工具 1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊 ## 4. 回覆規則 - Provide clear and concise answers based on order search results from tool messages - If multiple relevant orders found, combine them logically - If no relevant order found, acknowledge and offer to check with customer service
Q我的訂單狀態怎麼樣?A為了幫你查詢訂單狀態,請提供你的訂單編號或相關個人資訊。 -
-
已寫入 EvalSuite scenario_focused來源素材(點擊查看完整內容)
-
• 對話流程:退換貨 968
退換貨 ## 1. 觸發條件 - 關鍵字偵測: 「我要退貨」、「想退貨」、「申請退貨」 「換貨」、「寄錯」、「瑕疵」、「收到錯的商品」 「商品壞掉」、「包裝破損」、「想退」、「退費」、「退款」 「不滿意」、「不想要了」、「寄錯尺寸」、「寄錯顏色」 語意偵測場景: 客戶提及「收到商品有問題」 客戶詢問「如何退」、「怎麼寄回」、「退貨流程」 客戶在抱怨商品品質或寄錯商品 ## 2. 資訊收集 ### 基本資訊 - 訂單編號 [text] (必填): - 商品名稱 [text] (必填): - 退換貨原因 [text] (必填): - 收貨日期 [text]: - 是否已拆封 [text] (必填): - 退換貨寄回地址/聯絡方式 [text]: ## 4. 回覆規則 - 一、優先判斷邏輯: 若同時出現「瑕疵」或「寄錯」,優先導向【瑕疵換貨】流程。 若只提及「退貨」、「不想要」,導向【鑑賞期退貨】流程。 若客戶提及「退款」、「退費」,AI 需確認是否已寄回。 二、資訊收集(AI需主動詢問並紀錄) AI 在觸發此情境後,先詢問退貨原因,再收集基本資訊 三、回覆規則(AI執行流程與規範) 情境A:申請退貨(非瑕疵品) 條件:使用者回覆「未拆封」或「不想要」 AI流程: 確認在7日鑑賞期內 → 顯示退貨流程 提示商品須保持全新未拆封、完整包裝 引導使用者填寫基本資訊 若逾期7天 → 回覆「超過鑑賞期無法受理」 若商品仍在7日鑑賞期內且未拆封,我們可以協助辦理退貨。 ⚠️ 商品需保持全新未拆封、包裝完整,拆封後恕無法退貨。 - 情境B:瑕疵或出貨錯誤換貨 條件:偵測「破損」、「寄錯」、「瑕疵」等字詞 AI流程: 請收集客戶基本資訊 → 協助轉真人(同步提醒請用戶提供商品照片) 若經檢查屬於瑕疵或出貨錯誤,順易利將負擔來回運費,並立即安排更換新品。 - 情境C:退款查詢 條件:偵測「退款」、「退費」、「錢什麼時候退」 AI流程: 確認是否已寄回商品 若「已寄回」→ 回覆「退款需7-10個工作天處理」 若「尚未寄回」→ 引導退貨寄回流程 退款將於順易利收到退回商品後 7-10 個工作天內完成,您可於會員中心查詢退款進度喔 !
-
• 知識:退貨後多久會退款? know_224862
Q: 退貨後多久會退款? A: 退貨商品經順易利確認收回後,將於7-10個工作天內完成退款,退款進度可於會員中心查詢。
-
• 知識:換貨運費由誰負擔? know_224860
Q: 換貨運費由誰負擔? A: 若為商品瑕疵或出貨錯誤,順易利將負擔來回運費。 請提供有效收件地址、聯繫人與電話以便處理。
Q商品有瑕疵要怎麼換貨?A若商品有瑕疵或寄錯,我們會導向瑕疵換貨流程,並負擔來回運費。請提供訂單編號、商品名稱、退換貨原因等基本資訊來進行後續處理。 -
-
語意近重複(被 Stage C 拒絕) scenario_focused來源素材(點擊查看完整內容)
-
• 對話流程:訂單查詢 967
訂單查詢 ## 1. 觸發條件 - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info). 訂單查詢的 Agent 情景 ## 3. API 工具 1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊 ## 4. 回覆規則 - Provide clear and concise answers based on order search results from tool messages - If multiple relevant orders found, combine them logically - If no relevant order found, acknowledge and offer to check with customer service
Q請問我的訂單狀態是什麼呢?A請提供您的姓名和聯絡電話,我將幫您查詢訂單的狀態。原因- semantic duplicate of "我的訂單狀態怎麼樣?" (cosine=0.9 ≥ 0.8)
-
-
已寫入 EvalSuite scenario_focused 第 2 次嘗試來源素材(點擊查看完整內容)
-
• 對話流程:訂單查詢 967
訂單查詢 ## 1. 觸發條件 - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info). 訂單查詢的 Agent 情景 ## 3. API 工具 1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊 ## 4. 回覆規則 - Provide clear and concise answers based on order search results from tool messages - If multiple relevant orders found, combine them logically - If no relevant order found, acknowledge and offer to check with customer service
Q請問我的訂單目前的運送狀態是什麼?A要查詢訂單的運送狀態,我需要您的訂單編號或個人資訊。您可以提供這些細節嗎? -