產出 #359

env=production · Stacy (ef2c7746-b611-465d-9fe6-7c18c20cd865) · eval_kind=scenario_funnel

已完成
已寫入
10 / 10
通過驗證
10
場景覆蓋
5 / 6
總成本
$0.0145
Tokens
↑98679 / ↓3227
MISSED
1 個 scenario 未被任何 case 涵蓋:2370。可以重新派發、增加 N 來補。
SUITE
✅ 已寫入 EvalSuite auto-ef2c7746-r1-053959508
案例明細(13 筆 — 含已寫入、被拒、retry 軌跡)
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:售後|已收到貨之瑕疵退換貨 2641
      售後|已收到貨之瑕疵退換貨
      
      ## 1. 觸發條件
      - 瑕疵
      壞掉
      裂開
      刮傷
      掉漆
      寄錯商品
      少寄
      商品有問題
      品質問題
      收到破損
      商品壞了
      鏡面刮傷
      電鍍脫落
      收到錯誤商品
      缺件
      
      ## 2. 資訊收集
      ### 瑕疵售後申請 — 用於收集瑕疵退換貨所需資訊並供訂單查詢 API 使用。
      - 訂單編號 [number] (必填): 請填寫完整訂單編號(例如:20250226001)
      - 商品名稱 [text] (必填): 請填寫有問題的商品名稱
      - 問題描述 [text] (必填): 請簡單說明商品問題狀況
      - 是否可提供照片 [text]: 請確認是否可提供瑕疵照片協助判斷
      
      ## 3. API 工具
      1. shopline_search_orders — 搜尋 Shopline 訂單資訊。使用自然語言查詢(如「我的訂單編號是: 77446594369」、「電話是:0970981389」),系統會自動提取訂單識別資訊進行搜尋。返回客服友善格式,包含訂單狀態、物流進度、追蹤連結等完整資訊。
      
      ## 4. 回覆規則
      - 【情境用途】
      處理已收到商品後之瑕疵、寄錯、少寄等問題。
      
      【執行流程】
      
      1. 先確認訂單是否存在。
      2. 查詢訂單是否已出貨並完成收件。
      3. 判斷是否在七天鑑賞期內。
      4. 根據使用者提供的問題描述進行分流。
      
      【分流邏輯】
      
      若訂單在七天內:
      
      回覆:
      
      您好 🤍  
      真的非常抱歉讓您收到不完美的商品 🙇‍♀️  
      
      再請您提供商品瑕疵照片,我們會立即為您安排換貨或補發流程。
      
      我們會提供 7-11 退貨便代碼,包裹退回約需 5-7 個工作天完成驗貨後為您寄出新品。
      
      ---
      
      若訂單已超過七天:
      
      回覆:
      
      您好 
      這邊查詢您的訂單已超過七天鑑賞期。
      
      若屬於特殊情況(例如非人為問題),我可以協助為您轉人工進一步確認。
      
      ---
      
      若查無訂單:
      
      回覆:
      
      您好 🤍  
      查詢不到此訂單編號,請再確認是否填寫正確,或提供下單姓名與電話供我們查詢。
    Q
    瑕疵退換貨需要提供什麼資料?
    A
    瑕疵退換貨需要提供完整的訂單編號、商品名稱及問題描述,並可選擇提供瑕疵照片。
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:售前|出貨時間詢問 2632
      售前|出貨時間詢問
      
      ## 1. 觸發條件
      - 出貨
      多久到
      幾天到
      什麼時候寄
      何時收到
      到貨時間
      
      ## 2. 資訊收集
      ### 出貨狀態確認
      - 是否已下單 [text]: 若已下單,請提供訂單編號或手機號碼供查詢;若尚未下單則無需填寫。
      
      ## 3. API 工具
      1. shopline_search_orders — 搜尋 Shopline 訂單資訊。使用自然語言查詢(如「我的訂單編號是: 77446594369」、「電話是:0970981389」),系統會自動提取訂單識別資訊進行搜尋。返回客服友善格式,包含訂單狀態、物流進度、追蹤連結等完整資訊。
      
      ## 4. 回覆規則
      - 【情境用途】
      處理使用者詢問出貨時間或到貨時間。
      
      【判斷邏輯】
      
      1. 若使用者未提供任何訂單資訊(無訂單編號、電話、Email):
         判定為「尚未下單」詢問。
      
      2. 若使用者提供訂單資訊:
         呼叫訂單查詢 API 查詢訂單狀態。
      
      3. 若查詢成功:
         - 告知該訂單為現貨或預購商品。
         - 說明對應出貨時間。
         - 引導轉人工進一步查詢物流細節。
      
      4. 若查無訂單:
         提醒確認資訊是否正確。
      
      -----------------------------------
      
      【尚未下單回覆】
      
      您好 🤍  
      
      目前出貨時間如下:
      
      ✔ 現貨商品:1–3 個工作天內出貨  
      ✔ 預購商品:7–10 個工作天內出貨  
      ✔ 客製商品:7–15 個工作天內出貨  
      
      出貨後會提供物流追蹤資訊至您的 Email 或簡訊。
      
      若您急用,也可以告訴我型號與商品名稱,我幫您確認是否有現貨。
      
      -----------------------------------
      
      【已下單回覆】
      
      您好 🤍  
      這邊幫您查詢訂單狀態中。
      
      若您的商品為現貨,將於 1–3 個工作天內出貨;  若為預購商品,需 7–10 個工作天製作完成後出貨。
      
      因每筆訂單狀況不同,我將為您轉人工客服協助進一步確認實際出貨進度 🙏
    • • 產品:【客製化】文字款奶油灰鱷魚紋皮革 MacBook 全包防刮保護殼 prod_60681
      【客製化】文字款奶油灰鱷魚紋皮革 MacBook 全包防刮保護殼
      
      Summary: 材質:環保PU皮革 + PC 客製化預覽圖會依照您留下的客製化資訊製作, 1-3個工作天內便會傳送至您的訂購信箱,再請查看及確認。
      
      Description: 客製化商品製作時間約 7-15 個工作日內出貨。 *此商品請勿使用酒精液體擦拭/觸碰* 下單時備註告知印製文字/字體/排列方式 如:Jacky Huang / 9 號字體 / 連線 置中 連線 字體 固定使用9號字體、置中 排列方式備註如下:連線置中 若需加購似顏繪服務 請加入我們的官方Line並傳需繪製的圖片給繪師 Line: http://bit.ly/apeelline 歡迎品牌、企業大量訂製批發 👉 點我填寫表單 產品: 奶茶色鱷魚紋 皮革 外殼 + 透明磨砂材質 底殼 重量:約280g 材質:塑膠材質,完整包覆, 易拆卸. 完整包覆電腦,防摔抗震 - FULL PROTECTION FOR YOUR MACBOOK- specifically designed a cut-out around the ports that allows you to access ports effortlessly.- fully vented holes that will ensure your devices have good heat dissipation and prevent slipery- Available in all MacBook models: From MacBook Air 11, MacBook Air 13, MacBook Pro, MacBook Pro Retina, MacBook New Pro 13'-15', both Touch Bar & Non-Touch Bar.
    • • 產品:【客製化】文字款銀色爆裂紋皮革 MacBook 全包防刮保護殼 prod_60793
      【客製化】文字款銀色爆裂紋皮革 MacBook 全包防刮保護殼
      
      Summary: 材質:環保PU皮革 + PC 客製化預覽圖會依照您留下的客製化資訊製作, 1-3個工作天內便會傳送至您的訂購信箱,再請查看及確認。
      
      Description: 客製化商品製作時間約 7-15 個工作日內出貨。 *此商品請勿使用酒精液體擦拭/觸碰* 下單時備註告知印製文字/字體/排列方式 如:Jacky Huang / 9 號字體 / 連線 置中 連線 字體 固定使用9號字體、置中 排列方式備註如下:連線置中 若需加購似顏繪服務 請加入我們的官方Line並傳需繪製的圖片給繪師 Line: http://bit.ly/apeelline 產品:銀色 皮革 外殼 + 透明磨砂材質 底殼 重量:約280g 材質:塑膠材質,完整包覆, 易拆卸. 完整包覆電腦,防摔抗震 歡迎品牌、企業大量訂製批發 👉 點我填寫表單 - FULL PROTECTION FOR YOUR MACBOOK- specifically designed a cut-out around the ports that allows you to access ports effortlessly.- fully vented holes that will ensure your devices have good heat dissipation and prevent slipery- Available in all MacBook models: From MacBook Air 11, MacBook Air 13, MacBook Pro, MacBook Pro Retina, MacBook New Pro 13'-15', both Touch Bar & Non-Touch Bar.
    Q
    現貨商品要多久可以收到?
    A
    您好 🤍 目前現貨商品的出貨時間為 1–3 個工作天內出貨。出貨後會提供物流追蹤資訊至您的 Email 或簡訊。如果您急用,請告訴我型號與商品名稱,我幫您確認是否有現貨。
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:知識與產品查詢 2371
      知識與產品查詢
      
      ## 1. 觸發條件
      - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                          - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                          - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                          - Short queries under 10 characters
                          - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
      - 活動相關:
                          - 活動/報名/參加
                          - 優惠/折扣/促銷
                          - 抽獎/贈品/獎品
      - 公司資訊相關:
                          - 粉絲團/粉專/FB/Facebook/臉書
                          - Instagram/IG/社群/社群媒體
                          - 官網/網站/官方網站
                          - LINE/Line官方帳號
                          - Youtube/YT/影片/頻道
                          - 公司/品牌/關於我們
      - 服務相關:
                          - 服務時間/營業時間/上班時間
                          - 聯絡方式/電話/信箱/地址
                          - 退換貨/退款/退費
                          - 保固/維修/售後
                          - 配送/運費/到貨時間
                          - 付款方式/分期/優惠
                          - 會員/積分/紅利
                          - 發票/收據/證明
      - 政策相關:
                          - 政策/規定/條款
                          - 隱私/個資/資料
                          - 安全/保障/保護
                          - 責任/義務/權利
      - 技術問題:
                          - 無法/不能/不行
                          - 錯誤/異常/問題
                          - 當機/卡住/慢
                          - 登入/註冊/密碼
                          - 設定/安裝/使用
      - 產品使用方式:
                          - 怎麼用/如何使用/使用方法
                          - 使用方式/操作方式/使用步驟
                          - 安裝/設定/配置
                          - 第一次使用/新手使用/初次使用
                          - 使用技巧/使用建議/使...
    Q
    你們的官方網站是什麼?
    A
    我們的官網可以在這裡找到: 官方網站: https://www.raccoonai.com。
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:售前|產品是否客人的型號 2639
      售前|產品是否客人的型號
      
      ## 1. 觸發條件
      - 當使用者詢問某商品是否支援特定手機型號時觸發。
      比如:
      -有 iPhone
      -有 15 Plus 嗎
      -有 16 Pro 嗎
      -【產品名】 有嗎
      - 適用【裝置型號】嗎
      
      ## 2. 資訊收集
      ### 商品查詢資訊 — 用於確認使用者詢問的商品名稱與手機型號,供 API 查詢是否支援。
      - 商品名稱 [text]: 請填寫使用者詢問的商品名稱,例如:Mirror Pro 手機殼、鏡頭底座貼。
      - 手機型號 [text] (必填): 請填寫使用者的手機型號,例如:iPhone 15 Plus、iPhone 16 Pro Max。
      
      ## 3. API 工具
      1. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
      2. search_unified — 統一搜尋知識庫、產品與網頁資料,支援自適應三通道智能排序
      
      ## 4. 回覆規則
      - 【情境用途】
      處理使用者詢問某商品是否支援特定手機型號。
      
      【邏輯】
      	•	若資訊不足,詢問缺少欄位。
      	•	若 API 回傳 support = true → 提供商品連結。
      	•	若 support = false → 提供該型號專區頁面。
      
      【回覆模板】
      
      若支援:
      您好 🤍
      {商品名稱} 有支援 {手機型號},這邊提供您商品連結:
      {product_url}
      
      若不支援:
      您好 🤍
      目前 {商品名稱} 尚未推出 {手機型號} 的版本。
      您可以參考此型號專區的其他款式:
      🔗 https://www.apeelcase.com/collections/{手機型號}
      
    Q
    這款手機殼有支援 iPhone 15 Plus 嗎
    A
    您好 🤍 這款手機殼有支援 iPhone 15 Plus,這邊提供您商品連結:{product_url}
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:售後|已收到貨之非瑕疵退換貨 2643
      售後|已收到貨之非瑕疵退換貨
      
      ## 1. 觸發條件
      - 想退貨
      想換顏色
      想換型號
      不喜歡
      尺寸不合
      想退款
      退貨流程
      換貨流程
      收到商品想退
      顏色不喜歡
      買錯型號
      以及其他非商品品質問題的退換需求。
      
      ## 2. 資訊收集
      ### 非瑕疵退換貨申請 — 用於處理已收到商品後,因個人主觀因素申請退換貨。
      - 訂單編號 [text] (必填): 請填寫完整訂單編號(例如:20250226001)
      - 退換貨原因 [text] (必填): 請說明退貨或換貨原因(例如:不喜歡顏色、買錯型號)
      - 商品是否保持完整未使用 [text] (必填): 請確認商品是否保持完整包裝、未使用、無損壞
      - 商品名稱 [text]: 填寫想退換的商品名稱
      
      ## 3. API 工具
      1. shopline_search_orders — 搜尋 Shopline 訂單資訊。使用自然語言查詢(如「我的訂單編號是: 77446594369」、「電話是:0970981389」),系統會自動提取訂單識別資訊進行搜尋。返回客服友善格式,包含訂單狀態、物流進度、追蹤連結等完整資訊。
      
      ## 4. 回覆規則
      - 【情境用途】
      處理已收到商品後,因個人因素申請退貨或換貨。
      
      
      【執行流程】
      1. 先確認訂單是否存在。
      2. 查詢訂單是否已出貨並完成收件。
      3. 判斷是否在七天鑑賞期內。
      4. 根據使用者提供的問題描述進行分流。
      
      【七天內處理流程】
      您好 🤍  
      這邊為您辦理退貨申請。
      
      請將商品恢復完整包裝並妥善密封。
      
      我們會提供 7-11 退貨便代碼(效期 5 天)。
      
      🔺 商品需保持完整無瑕疵狀態  
      🔺 若訂單未達免運門檻,將扣除運費 
      🔺 退款流程約需 7-14 個工作天  
      
      【若為換貨】
      
      若您是想更換顏色或型號,請告知欲更換的商品與型號。
      若有價差將另行通知補款或退款。
      
      【超過七天】
      
      您好 🤍  
      依公司規定,超過七天鑑賞期無法辦理退換貨服務。  
      造成您的不便敬請見諒 🙇‍♀️
    Q
    我想退貨,申請需要填寫什麼資訊?
    A
    要申請非瑕疵退換貨,您需要填寫以下資訊:完整的訂單編號、退換貨原因(例如:不喜歡顏色)、確認商品是否保持完整未使用,以及想退換的商品名稱。
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:售後|已收到貨之非瑕疵退換貨 2643
      售後|已收到貨之非瑕疵退換貨
      
      ## 1. 觸發條件
      - 想退貨
      想換顏色
      想換型號
      不喜歡
      尺寸不合
      想退款
      退貨流程
      換貨流程
      收到商品想退
      顏色不喜歡
      買錯型號
      以及其他非商品品質問題的退換需求。
      
      ## 2. 資訊收集
      ### 非瑕疵退換貨申請 — 用於處理已收到商品後,因個人主觀因素申請退換貨。
      - 訂單編號 [text] (必填): 請填寫完整訂單編號(例如:20250226001)
      - 退換貨原因 [text] (必填): 請說明退貨或換貨原因(例如:不喜歡顏色、買錯型號)
      - 商品是否保持完整未使用 [text] (必填): 請確認商品是否保持完整包裝、未使用、無損壞
      - 商品名稱 [text]: 填寫想退換的商品名稱
      
      ## 3. API 工具
      1. shopline_search_orders — 搜尋 Shopline 訂單資訊。使用自然語言查詢(如「我的訂單編號是: 77446594369」、「電話是:0970981389」),系統會自動提取訂單識別資訊進行搜尋。返回客服友善格式,包含訂單狀態、物流進度、追蹤連結等完整資訊。
      
      ## 4. 回覆規則
      - 【情境用途】
      處理已收到商品後,因個人因素申請退貨或換貨。
      
      
      【執行流程】
      1. 先確認訂單是否存在。
      2. 查詢訂單是否已出貨並完成收件。
      3. 判斷是否在七天鑑賞期內。
      4. 根據使用者提供的問題描述進行分流。
      
      【七天內處理流程】
      您好 🤍  
      這邊為您辦理退貨申請。
      
      請將商品恢復完整包裝並妥善密封。
      
      我們會提供 7-11 退貨便代碼(效期 5 天)。
      
      🔺 商品需保持完整無瑕疵狀態  
      🔺 若訂單未達免運門檻,將扣除運費 
      🔺 退款流程約需 7-14 個工作天  
      
      【若為換貨】
      
      若您是想更換顏色或型號,請告知欲更換的商品與型號。
      若有價差將另行通知補款或退款。
      
      【超過七天】
      
      您好 🤍  
      依公司規定,超過七天鑑賞期無法辦理退換貨服務。  
      造成您的不便敬請見諒 🙇‍♀️
    Q
    退貨的退款流程大概需要多久?
    A
    退款流程約需 7-14 個工作天。我們會在收到退貨後進行處理,謝謝您的耐心等候。
  • 語意近重複(被 Stage C 拒絕) scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:售前|出貨時間詢問 2632
      售前|出貨時間詢問
      
      ## 1. 觸發條件
      - 出貨
      多久到
      幾天到
      什麼時候寄
      何時收到
      到貨時間
      
      ## 2. 資訊收集
      ### 出貨狀態確認
      - 是否已下單 [text]: 若已下單,請提供訂單編號或手機號碼供查詢;若尚未下單則無需填寫。
      
      ## 3. API 工具
      1. shopline_search_orders — 搜尋 Shopline 訂單資訊。使用自然語言查詢(如「我的訂單編號是: 77446594369」、「電話是:0970981389」),系統會自動提取訂單識別資訊進行搜尋。返回客服友善格式,包含訂單狀態、物流進度、追蹤連結等完整資訊。
      
      ## 4. 回覆規則
      - 【情境用途】
      處理使用者詢問出貨時間或到貨時間。
      
      【判斷邏輯】
      
      1. 若使用者未提供任何訂單資訊(無訂單編號、電話、Email):
         判定為「尚未下單」詢問。
      
      2. 若使用者提供訂單資訊:
         呼叫訂單查詢 API 查詢訂單狀態。
      
      3. 若查詢成功:
         - 告知該訂單為現貨或預購商品。
         - 說明對應出貨時間。
         - 引導轉人工進一步查詢物流細節。
      
      4. 若查無訂單:
         提醒確認資訊是否正確。
      
      -----------------------------------
      
      【尚未下單回覆】
      
      您好 🤍  
      
      目前出貨時間如下:
      
      ✔ 現貨商品:1–3 個工作天內出貨  
      ✔ 預購商品:7–10 個工作天內出貨  
      ✔ 客製商品:7–15 個工作天內出貨  
      
      出貨後會提供物流追蹤資訊至您的 Email 或簡訊。
      
      若您急用,也可以告訴我型號與商品名稱,我幫您確認是否有現貨。
      
      -----------------------------------
      
      【已下單回覆】
      
      您好 🤍  
      這邊幫您查詢訂單狀態中。
      
      若您的商品為現貨,將於 1–3 個工作天內出貨;  若為預購商品,需 7–10 個工作天製作完成後出貨。
      
      因每筆訂單狀況不同,我將為您轉人工客服協助進一步確認實際出貨進度 🙏
    • • 產品:【客製化】文字款奶油灰鱷魚紋皮革 MacBook 全包防刮保護殼 prod_60681
      【客製化】文字款奶油灰鱷魚紋皮革 MacBook 全包防刮保護殼
      
      Summary: 材質:環保PU皮革 + PC 客製化預覽圖會依照您留下的客製化資訊製作, 1-3個工作天內便會傳送至您的訂購信箱,再請查看及確認。
      
      Description: 客製化商品製作時間約 7-15 個工作日內出貨。 *此商品請勿使用酒精液體擦拭/觸碰* 下單時備註告知印製文字/字體/排列方式 如:Jacky Huang / 9 號字體 / 連線 置中 連線 字體 固定使用9號字體、置中 排列方式備註如下:連線置中 若需加購似顏繪服務 請加入我們的官方Line並傳需繪製的圖片給繪師 Line: http://bit.ly/apeelline 歡迎品牌、企業大量訂製批發 👉 點我填寫表單 產品: 奶茶色鱷魚紋 皮革 外殼 + 透明磨砂材質 底殼 重量:約280g 材質:塑膠材質,完整包覆, 易拆卸. 完整包覆電腦,防摔抗震 - FULL PROTECTION FOR YOUR MACBOOK- specifically designed a cut-out around the ports that allows you to access ports effortlessly.- fully vented holes that will ensure your devices have good heat dissipation and prevent slipery- Available in all MacBook models: From MacBook Air 11, MacBook Air 13, MacBook Pro, MacBook Pro Retina, MacBook New Pro 13'-15', both Touch Bar & Non-Touch Bar.
    • • 產品:【客製化】文字款銀色爆裂紋皮革 MacBook 全包防刮保護殼 prod_60793
      【客製化】文字款銀色爆裂紋皮革 MacBook 全包防刮保護殼
      
      Summary: 材質:環保PU皮革 + PC 客製化預覽圖會依照您留下的客製化資訊製作, 1-3個工作天內便會傳送至您的訂購信箱,再請查看及確認。
      
      Description: 客製化商品製作時間約 7-15 個工作日內出貨。 *此商品請勿使用酒精液體擦拭/觸碰* 下單時備註告知印製文字/字體/排列方式 如:Jacky Huang / 9 號字體 / 連線 置中 連線 字體 固定使用9號字體、置中 排列方式備註如下:連線置中 若需加購似顏繪服務 請加入我們的官方Line並傳需繪製的圖片給繪師 Line: http://bit.ly/apeelline 產品:銀色 皮革 外殼 + 透明磨砂材質 底殼 重量:約280g 材質:塑膠材質,完整包覆, 易拆卸. 完整包覆電腦,防摔抗震 歡迎品牌、企業大量訂製批發 👉 點我填寫表單 - FULL PROTECTION FOR YOUR MACBOOK- specifically designed a cut-out around the ports that allows you to access ports effortlessly.- fully vented holes that will ensure your devices have good heat dissipation and prevent slipery- Available in all MacBook models: From MacBook Air 11, MacBook Air 13, MacBook Pro, MacBook Pro Retina, MacBook New Pro 13'-15', both Touch Bar & Non-Touch Bar.
    Q
    現貨商品大概幾天會到?
    A
    目前現貨商品的出貨時間為 1–3 個工作天內出貨。出貨後會提供物流追蹤資訊至您的 Email 或簡訊。
    原因
    • semantic duplicate of "現貨商品要多久可以收到?" (cosine=0.911 ≥ 0.8)
  • 已寫入 EvalSuite scenario_focused 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 對話流程:售前|出貨時間詢問 2632
      售前|出貨時間詢問
      
      ## 1. 觸發條件
      - 出貨
      多久到
      幾天到
      什麼時候寄
      何時收到
      到貨時間
      
      ## 2. 資訊收集
      ### 出貨狀態確認
      - 是否已下單 [text]: 若已下單,請提供訂單編號或手機號碼供查詢;若尚未下單則無需填寫。
      
      ## 3. API 工具
      1. shopline_search_orders — 搜尋 Shopline 訂單資訊。使用自然語言查詢(如「我的訂單編號是: 77446594369」、「電話是:0970981389」),系統會自動提取訂單識別資訊進行搜尋。返回客服友善格式,包含訂單狀態、物流進度、追蹤連結等完整資訊。
      
      ## 4. 回覆規則
      - 【情境用途】
      處理使用者詢問出貨時間或到貨時間。
      
      【判斷邏輯】
      
      1. 若使用者未提供任何訂單資訊(無訂單編號、電話、Email):
         判定為「尚未下單」詢問。
      
      2. 若使用者提供訂單資訊:
         呼叫訂單查詢 API 查詢訂單狀態。
      
      3. 若查詢成功:
         - 告知該訂單為現貨或預購商品。
         - 說明對應出貨時間。
         - 引導轉人工進一步查詢物流細節。
      
      4. 若查無訂單:
         提醒確認資訊是否正確。
      
      -----------------------------------
      
      【尚未下單回覆】
      
      您好 🤍  
      
      目前出貨時間如下:
      
      ✔ 現貨商品:1–3 個工作天內出貨  
      ✔ 預購商品:7–10 個工作天內出貨  
      ✔ 客製商品:7–15 個工作天內出貨  
      
      出貨後會提供物流追蹤資訊至您的 Email 或簡訊。
      
      若您急用,也可以告訴我型號與商品名稱,我幫您確認是否有現貨。
      
      -----------------------------------
      
      【已下單回覆】
      
      您好 🤍  
      這邊幫您查詢訂單狀態中。
      
      若您的商品為現貨,將於 1–3 個工作天內出貨;  若為預購商品,需 7–10 個工作天製作完成後出貨。
      
      因每筆訂單狀況不同,我將為您轉人工客服協助進一步確認實際出貨進度 🙏
    • • 產品:【客製化】文字款奶油灰鱷魚紋皮革 MacBook 全包防刮保護殼 prod_60681
      【客製化】文字款奶油灰鱷魚紋皮革 MacBook 全包防刮保護殼
      
      Summary: 材質:環保PU皮革 + PC 客製化預覽圖會依照您留下的客製化資訊製作, 1-3個工作天內便會傳送至您的訂購信箱,再請查看及確認。
      
      Description: 客製化商品製作時間約 7-15 個工作日內出貨。 *此商品請勿使用酒精液體擦拭/觸碰* 下單時備註告知印製文字/字體/排列方式 如:Jacky Huang / 9 號字體 / 連線 置中 連線 字體 固定使用9號字體、置中 排列方式備註如下:連線置中 若需加購似顏繪服務 請加入我們的官方Line並傳需繪製的圖片給繪師 Line: http://bit.ly/apeelline 歡迎品牌、企業大量訂製批發 👉 點我填寫表單 產品: 奶茶色鱷魚紋 皮革 外殼 + 透明磨砂材質 底殼 重量:約280g 材質:塑膠材質,完整包覆, 易拆卸. 完整包覆電腦,防摔抗震 - FULL PROTECTION FOR YOUR MACBOOK- specifically designed a cut-out around the ports that allows you to access ports effortlessly.- fully vented holes that will ensure your devices have good heat dissipation and prevent slipery- Available in all MacBook models: From MacBook Air 11, MacBook Air 13, MacBook Pro, MacBook Pro Retina, MacBook New Pro 13'-15', both Touch Bar & Non-Touch Bar.
    • • 產品:【客製化】文字款銀色爆裂紋皮革 MacBook 全包防刮保護殼 prod_60793
      【客製化】文字款銀色爆裂紋皮革 MacBook 全包防刮保護殼
      
      Summary: 材質:環保PU皮革 + PC 客製化預覽圖會依照您留下的客製化資訊製作, 1-3個工作天內便會傳送至您的訂購信箱,再請查看及確認。
      
      Description: 客製化商品製作時間約 7-15 個工作日內出貨。 *此商品請勿使用酒精液體擦拭/觸碰* 下單時備註告知印製文字/字體/排列方式 如:Jacky Huang / 9 號字體 / 連線 置中 連線 字體 固定使用9號字體、置中 排列方式備註如下:連線置中 若需加購似顏繪服務 請加入我們的官方Line並傳需繪製的圖片給繪師 Line: http://bit.ly/apeelline 產品:銀色 皮革 外殼 + 透明磨砂材質 底殼 重量:約280g 材質:塑膠材質,完整包覆, 易拆卸. 完整包覆電腦,防摔抗震 歡迎品牌、企業大量訂製批發 👉 點我填寫表單 - FULL PROTECTION FOR YOUR MACBOOK- specifically designed a cut-out around the ports that allows you to access ports effortlessly.- fully vented holes that will ensure your devices have good heat dissipation and prevent slipery- Available in all MacBook models: From MacBook Air 11, MacBook Air 13, MacBook Pro, MacBook Pro Retina, MacBook New Pro 13'-15', both Touch Bar & Non-Touch Bar.
    Q
    現在下單這個客製化的 MacBook 保護殼要等多久才會收到?
    A
    您好 🤍 目前出貨時間如下:✔ 現貨商品:1–3 個工作天內出貨 ✔ 預購商品:7–10 個工作天內出貨 ✔ 客製商品:7–15 個工作天內出貨 出貨後會提供物流追蹤資訊至您的 Email 或簡訊。
  • Judge LLM 拒絕 scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:知識與產品查詢 2371
      知識與產品查詢
      
      ## 1. 觸發條件
      - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                          - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                          - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                          - Short queries under 10 characters
                          - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
      - 活動相關:
                          - 活動/報名/參加
                          - 優惠/折扣/促銷
                          - 抽獎/贈品/獎品
      - 公司資訊相關:
                          - 粉絲團/粉專/FB/Facebook/臉書
                          - Instagram/IG/社群/社群媒體
                          - 官網/網站/官方網站
                          - LINE/Line官方帳號
                          - Youtube/YT/影片/頻道
                          - 公司/品牌/關於我們
      - 服務相關:
                          - 服務時間/營業時間/上班時間
                          - 聯絡方式/電話/信箱/地址
                          - 退換貨/退款/退費
                          - 保固/維修/售後
                          - 配送/運費/到貨時間
                          - 付款方式/分期/優惠
                          - 會員/積分/紅利
                          - 發票/收據/證明
      - 政策相關:
                          - 政策/規定/條款
                          - 隱私/個資/資料
                          - 安全/保障/保護
                          - 責任/義務/權利
      - 技術問題:
                          - 無法/不能/不行
                          - 錯誤/異常/問題
                          - 當機/卡住/慢
                          - 登入/註冊/密碼
                          - 設定/安裝/使用
      - 產品使用方式:
                          - 怎麼用/如何使用/使用方法
                          - 使用方式/操作方式/使用步驟
                          - 安裝/設定/配置
                          - 第一次使用/新手使用/初次使用
                          - 使用技巧/使用建議/使...
    Q
    有關最近的促銷活動資訊是什麼?
    A
    根據我的了解,我們目前有一些精彩的促銷活動。為了確保準確,建議你跟真人客服確認一下喔!
    原因
    • The answer does not provide specific information about the promotional activities, which is expected based on the question.
    • Judge LLM 認為答案與資料來源有事實出入
  • 已寫入 EvalSuite scenario_focused 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 對話流程:知識與產品查詢 2371
      知識與產品查詢
      
      ## 1. 觸發條件
      - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                          - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                          - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                          - Short queries under 10 characters
                          - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
      - 活動相關:
                          - 活動/報名/參加
                          - 優惠/折扣/促銷
                          - 抽獎/贈品/獎品
      - 公司資訊相關:
                          - 粉絲團/粉專/FB/Facebook/臉書
                          - Instagram/IG/社群/社群媒體
                          - 官網/網站/官方網站
                          - LINE/Line官方帳號
                          - Youtube/YT/影片/頻道
                          - 公司/品牌/關於我們
      - 服務相關:
                          - 服務時間/營業時間/上班時間
                          - 聯絡方式/電話/信箱/地址
                          - 退換貨/退款/退費
                          - 保固/維修/售後
                          - 配送/運費/到貨時間
                          - 付款方式/分期/優惠
                          - 會員/積分/紅利
                          - 發票/收據/證明
      - 政策相關:
                          - 政策/規定/條款
                          - 隱私/個資/資料
                          - 安全/保障/保護
                          - 責任/義務/權利
      - 技術問題:
                          - 無法/不能/不行
                          - 錯誤/異常/問題
                          - 當機/卡住/慢
                          - 登入/註冊/密碼
                          - 設定/安裝/使用
      - 產品使用方式:
                          - 怎麼用/如何使用/使用方法
                          - 使用方式/操作方式/使用步驟
                          - 安裝/設定/配置
                          - 第一次使用/新手使用/初次使用
                          - 使用技巧/使用建議/使...
    Q
    最近有什麼優惠活動嗎?
    A
    目前我們有各種優惠活動,建議你留意我們的社群媒體平台,像是Facebook及Instagram,會有第一手的活動資訊。為了確保準確,建議你跟真人客服確認一下喔!
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:售後|已收到貨之非瑕疵退換貨 2643
      售後|已收到貨之非瑕疵退換貨
      
      ## 1. 觸發條件
      - 想退貨
      想換顏色
      想換型號
      不喜歡
      尺寸不合
      想退款
      退貨流程
      換貨流程
      收到商品想退
      顏色不喜歡
      買錯型號
      以及其他非商品品質問題的退換需求。
      
      ## 2. 資訊收集
      ### 非瑕疵退換貨申請 — 用於處理已收到商品後,因個人主觀因素申請退換貨。
      - 訂單編號 [text] (必填): 請填寫完整訂單編號(例如:20250226001)
      - 退換貨原因 [text] (必填): 請說明退貨或換貨原因(例如:不喜歡顏色、買錯型號)
      - 商品是否保持完整未使用 [text] (必填): 請確認商品是否保持完整包裝、未使用、無損壞
      - 商品名稱 [text]: 填寫想退換的商品名稱
      
      ## 3. API 工具
      1. shopline_search_orders — 搜尋 Shopline 訂單資訊。使用自然語言查詢(如「我的訂單編號是: 77446594369」、「電話是:0970981389」),系統會自動提取訂單識別資訊進行搜尋。返回客服友善格式,包含訂單狀態、物流進度、追蹤連結等完整資訊。
      
      ## 4. 回覆規則
      - 【情境用途】
      處理已收到商品後,因個人因素申請退貨或換貨。
      
      
      【執行流程】
      1. 先確認訂單是否存在。
      2. 查詢訂單是否已出貨並完成收件。
      3. 判斷是否在七天鑑賞期內。
      4. 根據使用者提供的問題描述進行分流。
      
      【七天內處理流程】
      您好 🤍  
      這邊為您辦理退貨申請。
      
      請將商品恢復完整包裝並妥善密封。
      
      我們會提供 7-11 退貨便代碼(效期 5 天)。
      
      🔺 商品需保持完整無瑕疵狀態  
      🔺 若訂單未達免運門檻,將扣除運費 
      🔺 退款流程約需 7-14 個工作天  
      
      【若為換貨】
      
      若您是想更換顏色或型號,請告知欲更換的商品與型號。
      若有價差將另行通知補款或退款。
      
      【超過七天】
      
      您好 🤍  
      依公司規定,超過七天鑑賞期無法辦理退換貨服務。  
      造成您的不便敬請見諒 🙇‍♀️
    Q
    如果超過七天,還可以退換貨嗎?
    A
    您好 🤍 依公司規定,超過七天鑑賞期無法辦理退換貨服務。造成您的不便敬請見諒 🙇‍♀️
  • LLM 產出錯誤
    來源素材(點擊查看完整內容)
    • • 對話流程:售後|已收到貨之瑕疵退換貨 2641
      售後|已收到貨之瑕疵退換貨
      
      ## 1. 觸發條件
      - 瑕疵
      壞掉
      裂開
      刮傷
      掉漆
      寄錯商品
      少寄
      商品有問題
      品質問題
      收到破損
      商品壞了
      鏡面刮傷
      電鍍脫落
      收到錯誤商品
      缺件
      
      ## 2. 資訊收集
      ### 瑕疵售後申請 — 用於收集瑕疵退換貨所需資訊並供訂單查詢 API 使用。
      - 訂單編號 [number] (必填): 請填寫完整訂單編號(例如:20250226001)
      - 商品名稱 [text] (必填): 請填寫有問題的商品名稱
      - 問題描述 [text] (必填): 請簡單說明商品問題狀況
      - 是否可提供照片 [text]: 請確認是否可提供瑕疵照片協助判斷
      
      ## 3. API 工具
      1. shopline_search_orders — 搜尋 Shopline 訂單資訊。使用自然語言查詢(如「我的訂單編號是: 77446594369」、「電話是:0970981389」),系統會自動提取訂單識別資訊進行搜尋。返回客服友善格式,包含訂單狀態、物流進度、追蹤連結等完整資訊。
      
      ## 4. 回覆規則
      - 【情境用途】
      處理已收到商品後之瑕疵、寄錯、少寄等問題。
      
      【執行流程】
      
      1. 先確認訂單是否存在。
      2. 查詢訂單是否已出貨並完成收件。
      3. 判斷是否在七天鑑賞期內。
      4. 根據使用者提供的問題描述進行分流。
      
      【分流邏輯】
      
      若訂單在七天內:
      
      回覆:
      
      您好 🤍  
      真的非常抱歉讓您收到不完美的商品 🙇‍♀️  
      
      再請您提供商品瑕疵照片,我們會立即為您安排換貨或補發流程。
      
      我們會提供 7-11 退貨便代碼,包裹退回約需 5-7 個工作天完成驗貨後為您寄出新品。
      
      ---
      
      若訂單已超過七天:
      
      回覆:
      
      您好 
      這邊查詢您的訂單已超過七天鑑賞期。
      
      若屬於特殊情況(例如非人為問題),我可以協助為您轉人工進一步確認。
      
      ---
      
      若查無訂單:
      
      回覆:
      
      您好 🤍  
      查詢不到此訂單編號,請再確認是否填寫正確,或提供下單姓名與電話供我們查詢。
    原因
    • LLM 輸出格式錯誤(不是合法 JSON)—— 罕見,可重跑試試
  • 已寫入 EvalSuite scenario_focused 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 對話流程:售後|已收到貨之瑕疵退換貨 2641
      售後|已收到貨之瑕疵退換貨
      
      ## 1. 觸發條件
      - 瑕疵
      壞掉
      裂開
      刮傷
      掉漆
      寄錯商品
      少寄
      商品有問題
      品質問題
      收到破損
      商品壞了
      鏡面刮傷
      電鍍脫落
      收到錯誤商品
      缺件
      
      ## 2. 資訊收集
      ### 瑕疵售後申請 — 用於收集瑕疵退換貨所需資訊並供訂單查詢 API 使用。
      - 訂單編號 [number] (必填): 請填寫完整訂單編號(例如:20250226001)
      - 商品名稱 [text] (必填): 請填寫有問題的商品名稱
      - 問題描述 [text] (必填): 請簡單說明商品問題狀況
      - 是否可提供照片 [text]: 請確認是否可提供瑕疵照片協助判斷
      
      ## 3. API 工具
      1. shopline_search_orders — 搜尋 Shopline 訂單資訊。使用自然語言查詢(如「我的訂單編號是: 77446594369」、「電話是:0970981389」),系統會自動提取訂單識別資訊進行搜尋。返回客服友善格式,包含訂單狀態、物流進度、追蹤連結等完整資訊。
      
      ## 4. 回覆規則
      - 【情境用途】
      處理已收到商品後之瑕疵、寄錯、少寄等問題。
      
      【執行流程】
      
      1. 先確認訂單是否存在。
      2. 查詢訂單是否已出貨並完成收件。
      3. 判斷是否在七天鑑賞期內。
      4. 根據使用者提供的問題描述進行分流。
      
      【分流邏輯】
      
      若訂單在七天內:
      
      回覆:
      
      您好 🤍  
      真的非常抱歉讓您收到不完美的商品 🙇‍♀️  
      
      再請您提供商品瑕疵照片,我們會立即為您安排換貨或補發流程。
      
      我們會提供 7-11 退貨便代碼,包裹退回約需 5-7 個工作天完成驗貨後為您寄出新品。
      
      ---
      
      若訂單已超過七天:
      
      回覆:
      
      您好 
      這邊查詢您的訂單已超過七天鑑賞期。
      
      若屬於特殊情況(例如非人為問題),我可以協助為您轉人工進一步確認。
      
      ---
      
      若查無訂單:
      
      回覆:
      
      您好 🤍  
      查詢不到此訂單編號,請再確認是否填寫正確,或提供下單姓名與電話供我們查詢。
    Q
    收到有瑕疵的商品要怎麼退換?
    A
    您好 🤍 真的非常抱歉讓您收到不完美的商品 🙇‍♀️ 請提供您的訂單編號、商品名稱以及商品的問題描述,還有是否可以提供瑕疵照片。我們會立即為您安排換貨或補發流程。