執行 #104

CheeseCake1 (bulk R1) → production-canary (canary)

狀態
已完成
案例
30
開始時間
16 May 11:28
耗時
863.3s
¶ Economics · Bot-side N=30 attempts

Cost & Tokens

$0.1686
Total Bot Cost · USD
83.6%
Prompt Cache Hit
cost per case
$0.0056
cost per 1k tokens
$0.0009
input tokens
175,912
output tokens
4,670
cached tokens — prompt-cache hit
147,072
Total Tokens
180,582
economic efficiency
cost per correct
$0.0013
pass rate
86.7%
26 / 30
judge cost
$0.0328
設定快照(reproducibility) 1 個 bot 已捕捉 · Judge:gpt-4o-mini

Bot 設定快照

  • bc7cf215-c2a9-4eb6-88ba-0f074014b7a9 39 筆 KB
    SystemPrompt: sha256:a147cf42 KBContent: sha256:98c1cba9 Tools: sha256:cb414772 Scenarios: sha256:0d3c54e8 AI: gpt-4.1-2025-04-14 (T=0.0, max=2048)

Judge 設定快照

model: gpt-4o-mini T=0.0 max=4096 prompt: v1
已完成
30 / 30
錯誤
0
失敗維度
5
首字延遲 p95
10380 ms
Bot 成本(Neptune)
$0.1686
Bot Tokens(Neptune)
180,582
Judge 成本(Eris)
$0.0328
Judge Tokens(Eris)
250,338
項目 I.

知識庫精準度

kb_accuracy 10 cases

維度總表

各維度品質分 · 覆蓋率
找對資料 召回
retrieval
90.0%
[70.0% – 100.0%] · n=10
F1 16.4% · 相關率 12.2% · 精確 9.0%
10 / 10 適用 · 1 提示
不亂編造 平均
faithfulness
95.0%
[85.0% – 100.0%] · n=10
10 / 10 適用
答得到位 平均
answer_quality
95.7%
[88.0% – 100.0%] · n=10
10 / 10 適用
  • 案例 D1DAB31E

    要怎麼加入會員?

    已完成
    第 1 次嘗試 · 已完成 28120ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER要怎麼加入會員?
    BOT馬上為您找找看相關內容 📋 您好,我是 CheeseCake1 客服,很高興為您服務! 您可以點擊官網右上角的人物符號來加入會員,支援 Facebook 及 LINE 註冊方式,非常方便。如果您需要進一步協助,歡迎隨時告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28155 · 如何加入會員 ?
      問題
      如何加入會員 ?
      回答
      請點擊官網右上角人物符號加入會員,支援FB、LINE管道註冊~
    意料之外 (9)
    • ! know_28122 · 門市註冊會員,要怎麼登入官網
      問題
      門市註冊會員,要怎麼登入官網
      回答
      1️⃣ 選好商品 → 點選「購物車」→ 按「會員登入」 2️⃣ 點「忘記密碼」→ 輸入手機號碼 → 收簡訊輸入驗證碼 3️⃣ 設定新密碼 → 輸入 email 完成重設 ✅ 從此之後登入就能自動累計會員消費啦!
    • ! know_28154 · 怎麼查詢出貨了嗎?
      問題
      怎麼查詢出貨了嗎?
      回答
      若您有加入官網會員, 可以直接登入官網後台查詢訂單資訊與配送進度唷 💻 👉 https://www.cheesecake1.com.tw/users/sign_in 若您尚未加入會員, 也可以回到您訂購時填寫的 Email 信箱, 信件中會有完整的訂單明細可供查詢 📧 📦 提醒您: 到貨日前一晚 20:00(晚上 8 點)後, 即可於訂單頁面中點選「黑貓物流追蹤」查詢配送狀態。 若您對物流有任何進一步的疑問, 也可直接致電黑貓客服:02-412-8888
    • ! know_28147 · 會附上玫瑰花嗎?
      問題
      會附上玫瑰花嗎?
      回答
      我們所使用的玫瑰鮮花為可食用花材,但因產量易受天候與氣溫影響, 若當次品質不佳,將 暫停附上玫瑰裝飾,以確保整體體驗與安全。 為表歉意,我們將補償 NT$100 購物金,領取方式如下: 請洽客服,提供蛋糕盒內「說明小紙條」背面之領取代碼。 經核對無誤後,購物金將於 3–5 個工作日內匯入帳號。 請登入會員後前往「購物金專區」查詢。
    • ! know_28150 · 合作邀約
      問題
      合作邀約
      回答
      您好,麻煩您將相關資料寄送至 ck1@cheesecake1.com.tw,客服會協助轉交給主管過目唷
    • ! know_28156 · 慶生組合裡面有什麼
      問題
      慶生組合裡面有什麼
      回答
      Happy Birthday 立牌+金色質感蠟燭一支哦!
    • ! know_28126 · 如何更改訂單資訊?
      問題
      如何更改訂單資訊?
      回答
      麻煩您提供一下訂購人電話📞,客服這邊幫您查詢訂單狀況唷~💛
    • ! know_28144 · 有附蠟燭嗎?
      問題
      有附蠟燭嗎?
      回答
      您好,蠟燭都需要加購唷!您可以到官網「重要時刻加購區」加購唷~謝謝
    • ! know_28137 · 付款方式有哪些?
      問題
      付款方式有哪些?
      回答
      您可以使用以下多種方式輕鬆付款唷: ✔ 信用卡線上刷卡(支援 Visa / MasterCard / JCB) ✔ LINE Pay ✔ ATM 轉帳 ✔ 超商代碼繳費(7-11 / 全家 / OK / 萊爾富)
    • ! know_28119 · 如何訂購與付款?
      問題
      如何訂購與付款?
      回答
      您可以直接在官網下單,選擇「百貨專櫃自取」或「冷藏宅配」,並享有多元付款方式與彈性到貨日期選擇。 🔺實際到貨時間仍以您地址所屬區域的宅配業者配送狀況為準喔!
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆完全符合來源資料,並且所有的事實陳述都有來源支持,因此沒有虛構的內容。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 您好,我是 CheeseCake1 客服,很高興為您服務! 您可以點擊官網右上角的人物符號來加入會員,支援 Facebook 及 LINE 註冊方式,非常方便。如果您需要進一步協助,歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 請點擊官網右上角人物符號加入會員
    • 支援 FB、LINE 管道註冊
    Judge 推理
    這個回答完全符合用戶的問題,提供了清楚的步驟來加入會員,並且包含了所有必要的資訊,沒有遺漏任何要點。
  • 案例 B4A6CDA9

    桃園起司蛋糕壹廠可以現場購買嗎?

    已完成
    第 1 次嘗試 · 已完成 23550ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER桃園起司蛋糕壹廠可以現場購買嗎?
    BOT正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 桃園起司蛋糕壹廠目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,因此建議您先在官網訂購後再前往取貨。現場不提供現金交易,只能刷卡付款。 另外,桃園壹廠的取貨時間為週一至週五 09:30 – 17:30,六日不開放取貨。 如需更多門市資訊,您也可以參考 CheeseCake1 門市頁面: 門市資訊: https://www.cheesecake1.com.tw/pages/%E9%96%80%E5%B8%82%E6%93%9A%E9%BB%9E 有其他問題歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28127 · 可以直接到桃園起司蛋糕壹廠購買嗎?
      問題
      可以直接到桃園起司蛋糕壹廠購買嗎?
      回答
      目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,所以建議訂好再前往取蛋糕~ 因應衛生考量,桃園起士蛋糕壹廠不提供現金交易僅提供刷卡唷~
    意料之外 (9)
    • ! know_28151 · 門市資訊
      問題
      門市資訊
      回答
      📍 CheeseCake1|台北信義新光三越 A4 館 B2 專櫃 🧀 地址|台北市信義區松高路 19 號 B2(新光三越 A4 館) 📞 電話|02-7723-1095 # 13 📍 CheeseCake1|台中歌劇院門市 🧀 地址|台中市西屯區市政北二路 57 號 (聯聚仁愛大樓,台中歌劇院斜對面) 📞 電話|(02) 7723-1095 分機 14 📍 桃園起司蛋糕壹廠 取貨資訊 🏠 地址|桃園市中壢區中園路 168-1 號 3 樓 📞 電話|(02) 7723-1095 分機 9
    • ! know_28121 · 配送與取貨地點怎麼安排?
      問題
      配送與取貨地點怎麼安排?
      回答
      黑貓宅配|可預訂 60 天內的日期(黑貓週日/週一不配送,建議選擇提前一天或改至櫃位自取) 台北信義門市(新光A4)|可預訂 60 天內的取貨 台中歌劇院門市|可預訂 30 天內的取貨 桃園起司蛋糕壹廠|可預訂 60 天內的取貨 若您有超過上述時間的預約需求,歡迎私訊客服為您安排
    • ! know_28124 · 蛋糕有哪些配件呢?
      問題
      蛋糕有哪些配件呢?
      回答
      🎁 購買《遇見,最對味的另一半》(雙拼)系列蛋糕 凡購買此系列任一款蛋糕,即享以下專屬包裝與贈禮: 品牌五入叉子組(適合二至四人甜蜜分享) 專屬 精美品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附有 產品說明卡,細節體現心意 🎁 購買其他任一款蛋糕(不含上述系列) 即贈送: 一支 大理石紋質感蛋糕鏟(實用又具收藏價值) 專屬 訂製品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附上 產品說明卡 蛋糕貼心附贈 五人份叉盤組,分享無負擔!
    • ! know_28120 · 乳酪蛋糕什麼時候會送到?
      問題
      乳酪蛋糕什麼時候會送到?
      回答
      我們採「接單現做」,確保每顆蛋糕都新鮮美味! 完成下單後約 3~5 個工作日內,就能收到精緻又新鮮的乳酪蛋糕。
    • ! know_28141 · 蛋糕尺寸
      問題
      蛋糕尺寸
      回答
      ・🟠 圓形蛋糕為 6 吋 ・大 🟧 方形蛋糕為 8 吋(以斜對角計算) ・小 🟧+ 🟧 方形(雙拼)蛋糕為 4 吋
    • ! know_28148 · 小編可以幫我訂嗎?
      問題
      小編可以幫我訂嗎?
      回答
      為了保障您的付款安全與個人資料,我們無法透過 LINE 接受訂單唷 🙇‍♀️ 我們希望每一筆訂單、每一顆蛋糕都能被好好對待與妥善照顧💛 您可以直接透過官網安心下單: 1.自由選擇蛋糕口味 2.指定您想要的取貨日期 3.選擇宅配 or 專櫃自取都沒問題!
    • ! know_28125 · 可以放幾天?
      問題
      可以放幾天?
      回答
      食用期限與保存建議: 請於收到後 3 日內食用完畢,才是最美味的黃金賞味期。 切勿冷凍保存:冷凍會破壞乳酪與新鮮水果的口感與品質,不建議使用。 所有水果皆經挑選與手工分切,無添加防腐劑或人工劑,因此若出現輕微氧化、褐變,屬於正常現象,請安心食用。 🌡 常溫注意事項: 建議不要將蛋糕放置於常溫超過 2 小時(炎熱天氣請縮短至 1 小時內)。 若需外出攜帶或長時間常溫擺放,建議加購保冷袋,並放入冰塊保冷,維持蛋糕口感品質。 💡 小秘訣: 蛋糕若退冰後,若回冰 2小時後再享用,風味更迷人!吃不完的蛋糕,記得放回冷藏唷!
    • ! know_28130 · 請問桃園六日可以取貨嗎?
      問題
      請問桃園六日可以取貨嗎?
      回答
      桃園取貨時間: 週一至週五|09:30 – 17:30(六日不開放)
    • ! know_28131 · 指定日期就能當天收到嗎?
      問題
      指定日期就能當天收到嗎?
      回答
      我們這邊都會準時出貨唷, 目前黑貓宅配整體狀況良好, 根據小編統計,當日準時送達率超過 99% , 絕大多數客人都能準時收到蛋糕! 不過實際配送仍會依照您所在地區的物流安排為主, 有時難免會遇到一些突發狀況~像是天氣不穩、交通壅塞, 甚至小編真的看過黑貓宅配車因違停被拖走的情況。 若您的蛋糕是要用來慶生或過節等重要時刻, 我們會強烈建議您提前一天到貨, 這樣能更安心準備、避免壓線風險。 若您對配送時間有進一步疑問, 也歡迎直接致電黑貓客服:02-412-8888 查詢狀況唷!
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆完全符合來源資料,所有的事實陳述都有來源支持,因此沒有任何虛構的聲明。

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    100.0% · w 30%
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 桃園起司蛋糕壹廠目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,因此建議您先在官網訂購後再前往取貨。現場不提供現金交易,只能刷卡付款。 另外,桃園壹廠的取貨時間為週一至週五 09:30 – 17:30,六日不開放取貨。 如需更多門市資訊,您也可以參考 CheeseCake1 門市頁面: 門市資訊: https://www.cheesecake1.com.tw/pages/%E9%96%80%E5%B8%82%E6%93%9A%E9%BB%9E 有其他問題歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 目前僅提供官網預約自取
    • 現場有少量現貨但沒有展示蛋糕
    II 重要限制 w 30%
    • 建議訂好再前往取蛋糕
    Judge 推理
    回覆內容針對用戶的問題提供了詳細的資訊,涵蓋了官網預約自取和現場現貨的情況,並且正確地建議用戶先訂購再前往取貨。雖然提供了額外的付款和取貨時間資訊,但這些並不是必須的,因此完整性稍微扣分。
  • 案例 10C4F7FA

    台中門市電話是什麼

    已完成
    第 1 次嘗試 · 已完成 28822ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER台中門市電話是什麼
    BOT正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 台中門市資訊如下: - CheeseCake1|台中歌劇院門市 - 地址:台中市西屯區市政北二路 57 號(聯聚仁愛大樓,台中歌劇院斜對面) - 電話:(02) 7723-1095 分機 14 如需更多協助,歡迎隨時告訴我!門市資訊也可參考: https://www.cheesecake1.com.tw/pages/%E9%96%80%E5%B8%82%E6%93%9A%E9%BB%9E

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28151 · 門市資訊
      問題
      門市資訊
      回答
      📍 CheeseCake1|台北信義新光三越 A4 館 B2 專櫃 🧀 地址|台北市信義區松高路 19 號 B2(新光三越 A4 館) 📞 電話|02-7723-1095 # 13 📍 CheeseCake1|台中歌劇院門市 🧀 地址|台中市西屯區市政北二路 57 號 (聯聚仁愛大樓,台中歌劇院斜對面) 📞 電話|(02) 7723-1095 分機 14 📍 桃園起司蛋糕壹廠 取貨資訊 🏠 地址|桃園市中壢區中園路 168-1 號 3 樓 📞 電話|(02) 7723-1095 分機 9
    意料之外 (9)
    • ! know_28126 · 如何更改訂單資訊?
      問題
      如何更改訂單資訊?
      回答
      麻煩您提供一下訂購人電話📞,客服這邊幫您查詢訂單狀況唷~💛
    • ! know_28132 · 我要取消訂單
      問題
      我要取消訂單
      回答
      好的,請提供訂購人電話或訂單編號 退款款項會退款至您的原付款方式,處理時間約為 7 ~10個工作日左右,以下是各付款方式的退款方式說明: 1.信用卡 / LINE Pay:將原卡退刷,款項會自動回到您的帳戶 2. 匯款 / 超商付款:將匯入您提供的指定帳戶,退款時會酌收 $30 元匯款手續費喔
    • ! know_28142 · 可以代寫卡片嗎?
      問題
      可以代寫卡片嗎?
      回答
      可以唷~下單完成後,只要提供: 1.訂購人電話 2.想寫在卡片上的內容(限30字含標點符號) 我們會幫您一字一句用心寫下 ❤️
    • ! know_28122 · 門市註冊會員,要怎麼登入官網
      問題
      門市註冊會員,要怎麼登入官網
      回答
      1️⃣ 選好商品 → 點選「購物車」→ 按「會員登入」 2️⃣ 點「忘記密碼」→ 輸入手機號碼 → 收簡訊輸入驗證碼 3️⃣ 設定新密碼 → 輸入 email 完成重設 ✅ 從此之後登入就能自動累計會員消費啦!
    • ! know_28121 · 配送與取貨地點怎麼安排?
      問題
      配送與取貨地點怎麼安排?
      回答
      黑貓宅配|可預訂 60 天內的日期(黑貓週日/週一不配送,建議選擇提前一天或改至櫃位自取) 台北信義門市(新光A4)|可預訂 60 天內的取貨 台中歌劇院門市|可預訂 30 天內的取貨 桃園起司蛋糕壹廠|可預訂 60 天內的取貨 若您有超過上述時間的預約需求,歡迎私訊客服為您安排
    • ! know_28138 · 請問可以外送嗎?
      問題
      請問可以外送嗎?
      回答
      可以哦!您可以直接到官網上→門市據點→各門市底下都有【查詢門市現貨/預約自取/外送】連結
    • ! know_28123 · 如何查詢當日現貨?
      問題
      如何查詢當日現貨?
      回答
      您可以直接到官網上→門市據點→各門市底下都有【查詢門市現貨/預約自取/外送】連結,可從上面查詢到當日門市現貨唷!
    • ! know_28145 · 運費多少?
      問題
      運費多少?
      回答
      CheeseCake1 全站使用 黑貓冷藏宅配 每筆訂單(單一地址)運費為 NT$80元。 單筆訂單滿 NT$3,900(以實際支付金額為準)即可享免運優惠!
    • ! know_28130 · 請問桃園六日可以取貨嗎?
      問題
      請問桃園六日可以取貨嗎?
      回答
      桃園取貨時間: 週一至週五|09:30 – 17:30(六日不開放)
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆完全符合來源資料,所有提供的門市資訊都能在來源中找到,因此沒有任何虛構的聲明。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 台中門市資訊如下: - CheeseCake1|台中歌劇院門市 - 地址:台中市西屯區市政北二路 57 號(聯聚仁愛大樓,台中歌劇院斜對面) - 電話:(02) 7723-1095 分機 14 如需更多協助,歡迎隨時告訴我!門市資訊也可參考: https://www.cheesecake1.com.tw/pages/%E9%96%80%E5%B8%82%E6%93%9A%E9%BB%9E
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • (02) 7723-1095 分機 14
    Judge 推理
    這個回答完全符合用戶的查詢,提供了正確的台中門市電話,並且包含了額外的門市資訊,顯示出完整性和正確性。
  • 案例 55968426

    可以客製化嗎?

    已完成
    第 1 次嘗試 · 已完成 27560ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER可以客製化嗎?
    BOT正在為您搜尋最新資料 ⏳ 根據目前資訊,CheeseCake1 並未提供蛋糕客製化的相關說明。若您有特別的需求或想詢問是否能客製化蛋糕,建議您直接聯繫我們的客服或透過官網下單時備註您的需求,我們會盡力協助您。 如需進一步協助,歡迎告訴我您的具體需求!

    知識檢索

    0.0%
    Precision
    0.0%
    Recall
    0.0%
    F1
    0.0%
    預期 (1)
    • know_28139 · 可以客製化嗎?
      問題
      可以客製化嗎?
      回答
      我們目前配合專用精裝盒規格,僅提供固定尺寸與樣式!沒有客製化唷~
    意料之外 (10)
    • ! know_28120 · 乳酪蛋糕什麼時候會送到?
      問題
      乳酪蛋糕什麼時候會送到?
      回答
      我們採「接單現做」,確保每顆蛋糕都新鮮美味! 完成下單後約 3~5 個工作日內,就能收到精緻又新鮮的乳酪蛋糕。
    • ! know_28152 · 乳糖不耐症 可以吃嗎?
      問題
      乳糖不耐症 可以吃嗎?
      回答
      您好,CheeseCake1 的蛋糕主要成分包含鮮奶油與乳酪,屬於乳製品甜點。 若您有乳糖不耐症,建議您依自身情況斟酌食用,避免身體不適。
    • ! know_28125 · 可以放幾天?
      問題
      可以放幾天?
      回答
      食用期限與保存建議: 請於收到後 3 日內食用完畢,才是最美味的黃金賞味期。 切勿冷凍保存:冷凍會破壞乳酪與新鮮水果的口感與品質,不建議使用。 所有水果皆經挑選與手工分切,無添加防腐劑或人工劑,因此若出現輕微氧化、褐變,屬於正常現象,請安心食用。 🌡 常溫注意事項: 建議不要將蛋糕放置於常溫超過 2 小時(炎熱天氣請縮短至 1 小時內)。 若需外出攜帶或長時間常溫擺放,建議加購保冷袋,並放入冰塊保冷,維持蛋糕口感品質。 💡 小秘訣: 蛋糕若退冰後,若回冰 2小時後再享用,風味更迷人!吃不完的蛋糕,記得放回冷藏唷!
    • ! know_28124 · 蛋糕有哪些配件呢?
      問題
      蛋糕有哪些配件呢?
      回答
      🎁 購買《遇見,最對味的另一半》(雙拼)系列蛋糕 凡購買此系列任一款蛋糕,即享以下專屬包裝與贈禮: 品牌五入叉子組(適合二至四人甜蜜分享) 專屬 精美品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附有 產品說明卡,細節體現心意 🎁 購買其他任一款蛋糕(不含上述系列) 即贈送: 一支 大理石紋質感蛋糕鏟(實用又具收藏價值) 專屬 訂製品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附上 產品說明卡 蛋糕貼心附贈 五人份叉盤組,分享無負擔!
    • ! know_28127 · 可以直接到桃園起司蛋糕壹廠購買嗎?
      問題
      可以直接到桃園起司蛋糕壹廠購買嗎?
      回答
      目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,所以建議訂好再前往取蛋糕~ 因應衛生考量,桃園起士蛋糕壹廠不提供現金交易僅提供刷卡唷~
    • ! know_28141 · 蛋糕尺寸
      問題
      蛋糕尺寸
      回答
      ・🟠 圓形蛋糕為 6 吋 ・大 🟧 方形蛋糕為 8 吋(以斜對角計算) ・小 🟧+ 🟧 方形(雙拼)蛋糕為 4 吋
    • ! know_28129 · 素食可以食用嗎?
      問題
      素食可以食用嗎?
      回答
      ✅ 蛋奶素可食用: 經典1583|濃郁重乳酪 雙倍經典|特濃超越重乳酪 黑爵|三倍濃巧乳酪 ⚠️ 其他品項含動物性吉利丁(非素) 其他品項含有吉利丁(動物膠),非素食,敬請留意。
    • ! know_28148 · 小編可以幫我訂嗎?
      問題
      小編可以幫我訂嗎?
      回答
      為了保障您的付款安全與個人資料,我們無法透過 LINE 接受訂單唷 🙇‍♀️ 我們希望每一筆訂單、每一顆蛋糕都能被好好對待與妥善照顧💛 您可以直接透過官網安心下單: 1.自由選擇蛋糕口味 2.指定您想要的取貨日期 3.選擇宅配 or 專櫃自取都沒問題!
    • ! know_28146 · 寶寶可以吃嗎?
      問題
      寶寶可以吃嗎?
      回答
      我們的蛋糕不含人工添加物,只要寶寶已具備良好吞嚥能力,適量食用是沒問題的唷!
    • ! know_28157 · 有推薦口味嗎?
      問題
      有推薦口味嗎?
      回答
      第一次購買推薦: 1. 四個女生的故事 2. 奢侈藍莓乳酪 3. 雙倍經典 - 特濃超越重乳酪
    TP 0
    FP 10
    FN 1

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    0.0%
    越高越好
    Judge 推理
    AI的回覆中提到CheeseCake1並未提供蛋糕客製化的相關說明,這一點在提供的來源中並沒有明確的支持,因此無法評估其真實性。由於來源與問題無關,無法計算具體的引用基礎。

    回答品質

    63.3%
    相關性
    90.0%
    完整性
    50.0%
    正確性
    50.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 目前配合專用精裝盒規格
    • 僅提供固定尺寸與樣式
    • 沒有客製化
    II 重要
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ 根據目前資訊,CheeseCake1 並未提供蛋糕客製化的相關說明。若您有特別的需求或想詢問是否能客製化蛋糕,建議您直接聯繫我們的客服或透過官網下單時備註您的需求,我們會盡力協助您。 如需進一步協助,歡迎告訴我您的具體需求!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 目前配合專用精裝盒規格
    • 僅提供固定尺寸與樣式
    • 沒有客製化
    Judge 推理
    回覆中提到的資訊與事實不符,未能正確說明客製化的限制,且缺少了關鍵的核心內容。
  • 案例 713BCB4B

    蛋糕退冰後要回冰多久比較好?

    已完成
    第 1 次嘗試 · 已完成 32135ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER蛋糕退冰後要回冰多久比較好?
    BOT稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 蛋糕退冰後,如果再放回冰箱冷藏約2小時後再享用,風味會更加迷人!吃不完的蛋糕也請記得放回冷藏保存,並建議於收到後3日內食用完畢,這樣才能品嚐到最美味的口感。 如有其他保存或食用上的疑問,也歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28125 · 可以放幾天?
      問題
      可以放幾天?
      回答
      食用期限與保存建議: 請於收到後 3 日內食用完畢,才是最美味的黃金賞味期。 切勿冷凍保存:冷凍會破壞乳酪與新鮮水果的口感與品質,不建議使用。 所有水果皆經挑選與手工分切,無添加防腐劑或人工劑,因此若出現輕微氧化、褐變,屬於正常現象,請安心食用。 🌡 常溫注意事項: 建議不要將蛋糕放置於常溫超過 2 小時(炎熱天氣請縮短至 1 小時內)。 若需外出攜帶或長時間常溫擺放,建議加購保冷袋,並放入冰塊保冷,維持蛋糕口感品質。 💡 小秘訣: 蛋糕若退冰後,若回冰 2小時後再享用,風味更迷人!吃不完的蛋糕,記得放回冷藏唷!
    意料之外 (9)
    • ! know_28141 · 蛋糕尺寸
      問題
      蛋糕尺寸
      回答
      ・🟠 圓形蛋糕為 6 吋 ・大 🟧 方形蛋糕為 8 吋(以斜對角計算) ・小 🟧+ 🟧 方形(雙拼)蛋糕為 4 吋
    • ! know_28131 · 指定日期就能當天收到嗎?
      問題
      指定日期就能當天收到嗎?
      回答
      我們這邊都會準時出貨唷, 目前黑貓宅配整體狀況良好, 根據小編統計,當日準時送達率超過 99% , 絕大多數客人都能準時收到蛋糕! 不過實際配送仍會依照您所在地區的物流安排為主, 有時難免會遇到一些突發狀況~像是天氣不穩、交通壅塞, 甚至小編真的看過黑貓宅配車因違停被拖走的情況。 若您的蛋糕是要用來慶生或過節等重要時刻, 我們會強烈建議您提前一天到貨, 這樣能更安心準備、避免壓線風險。 若您對配送時間有進一步疑問, 也歡迎直接致電黑貓客服:02-412-8888 查詢狀況唷!
    • ! know_28120 · 乳酪蛋糕什麼時候會送到?
      問題
      乳酪蛋糕什麼時候會送到?
      回答
      我們採「接單現做」,確保每顆蛋糕都新鮮美味! 完成下單後約 3~5 個工作日內,就能收到精緻又新鮮的乳酪蛋糕。
    • ! know_28121 · 配送與取貨地點怎麼安排?
      問題
      配送與取貨地點怎麼安排?
      回答
      黑貓宅配|可預訂 60 天內的日期(黑貓週日/週一不配送,建議選擇提前一天或改至櫃位自取) 台北信義門市(新光A4)|可預訂 60 天內的取貨 台中歌劇院門市|可預訂 30 天內的取貨 桃園起司蛋糕壹廠|可預訂 60 天內的取貨 若您有超過上述時間的預約需求,歡迎私訊客服為您安排
    • ! know_28127 · 可以直接到桃園起司蛋糕壹廠購買嗎?
      問題
      可以直接到桃園起司蛋糕壹廠購買嗎?
      回答
      目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,所以建議訂好再前往取蛋糕~ 因應衛生考量,桃園起士蛋糕壹廠不提供現金交易僅提供刷卡唷~
    • ! know_28124 · 蛋糕有哪些配件呢?
      問題
      蛋糕有哪些配件呢?
      回答
      🎁 購買《遇見,最對味的另一半》(雙拼)系列蛋糕 凡購買此系列任一款蛋糕,即享以下專屬包裝與贈禮: 品牌五入叉子組(適合二至四人甜蜜分享) 專屬 精美品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附有 產品說明卡,細節體現心意 🎁 購買其他任一款蛋糕(不含上述系列) 即贈送: 一支 大理石紋質感蛋糕鏟(實用又具收藏價值) 專屬 訂製品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附上 產品說明卡 蛋糕貼心附贈 五人份叉盤組,分享無負擔!
    • ! know_28133 · 彌月試吃申請
      問題
      彌月試吃申請
      回答
      彌月試吃申請資格: 懷孕30週~產後30天的孕媽咪皆可申請! 📌 申請步驟如下: 1 上傳以下照片給小編:   ・媽媽手冊封面照片   ・產檢內頁及預產期照片 2 line官方取得彌月專屬 85折優惠代碼 3 官網結帳頁面輸入優惠代碼 4 收到彌月試吃蛋糕 5 試吃後續訂彌月蛋糕依數量享優惠!
    • ! know_28147 · 會附上玫瑰花嗎?
      問題
      會附上玫瑰花嗎?
      回答
      我們所使用的玫瑰鮮花為可食用花材,但因產量易受天候與氣溫影響, 若當次品質不佳,將 暫停附上玫瑰裝飾,以確保整體體驗與安全。 為表歉意,我們將補償 NT$100 購物金,領取方式如下: 請洽客服,提供蛋糕盒內「說明小紙條」背面之領取代碼。 經核對無誤後,購物金將於 3–5 個工作日內匯入帳號。 請登入會員後前往「購物金專區」查詢。
    • ! know_28152 · 乳糖不耐症 可以吃嗎?
      問題
      乳糖不耐症 可以吃嗎?
      回答
      您好,CheeseCake1 的蛋糕主要成分包含鮮奶油與乳酪,屬於乳製品甜點。 若您有乳糖不耐症,建議您依自身情況斟酌食用,避免身體不適。
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到的蛋糕退冰後回冰2小時的建議以及3日內食用的建議均有來源支持,因此沒有虛構的內容。所有的事實陳述都能在提供的來源中找到相應的支持。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 蛋糕退冰後,如果再放回冰箱冷藏約2小時後再享用,風味會更加迷人!吃不完的蛋糕也請記得放回冷藏保存,並建議於收到後3日內食用完畢,這樣才能品嚐到最美味的口感。 如有其他保存或食用上的疑問,也歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 蛋糕若退冰後,回冰 2 小時後再享用風味更佳
    Judge 推理
    這個回答完全符合用戶的問題,並且提供了正確的建議,涵蓋了所有關鍵點。回冰 2 小時後再享用的建議也正確無誤,並且語氣友好,符合客服的風格。
  • 案例 CB66E91E

    慶生組合裡面包含什麼呢?

    已完成
    第 1 次嘗試 · 已完成 24217ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER慶生組合裡面包含什麼呢?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 慶生組合裡面包含「Happy Birthday 立牌」以及「金色質感蠟燭一支」哦! 如果您還有其他關於蛋糕配件或加購品的問題,也歡迎隨時詢問。

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28156 · 慶生組合裡面有什麼
      問題
      慶生組合裡面有什麼
      回答
      Happy Birthday 立牌+金色質感蠟燭一支哦!
    意料之外 (9)
    • ! know_28153 · 可以單獨買一小塊嗎?
      問題
      可以單獨買一小塊嗎?
      回答
      您好,沒有販售單獨一小塊,因為最小尺寸就是雙拼(2入)組合唷!
    • ! know_28155 · 如何加入會員 ?
      問題
      如何加入會員 ?
      回答
      請點擊官網右上角人物符號加入會員,支援FB、LINE管道註冊~
    • ! know_28150 · 合作邀約
      問題
      合作邀約
      回答
      您好,麻煩您將相關資料寄送至 ck1@cheesecake1.com.tw,客服會協助轉交給主管過目唷
    • ! know_28124 · 蛋糕有哪些配件呢?
      問題
      蛋糕有哪些配件呢?
      回答
      🎁 購買《遇見,最對味的另一半》(雙拼)系列蛋糕 凡購買此系列任一款蛋糕,即享以下專屬包裝與贈禮: 品牌五入叉子組(適合二至四人甜蜜分享) 專屬 精美品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附有 產品說明卡,細節體現心意 🎁 購買其他任一款蛋糕(不含上述系列) 即贈送: 一支 大理石紋質感蛋糕鏟(實用又具收藏價值) 專屬 訂製品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附上 產品說明卡 蛋糕貼心附贈 五人份叉盤組,分享無負擔!
    • ! know_28129 · 素食可以食用嗎?
      問題
      素食可以食用嗎?
      回答
      ✅ 蛋奶素可食用: 經典1583|濃郁重乳酪 雙倍經典|特濃超越重乳酪 黑爵|三倍濃巧乳酪 ⚠️ 其他品項含動物性吉利丁(非素) 其他品項含有吉利丁(動物膠),非素食,敬請留意。
    • ! know_28119 · 如何訂購與付款?
      問題
      如何訂購與付款?
      回答
      您可以直接在官網下單,選擇「百貨專櫃自取」或「冷藏宅配」,並享有多元付款方式與彈性到貨日期選擇。 🔺實際到貨時間仍以您地址所屬區域的宅配業者配送狀況為準喔!
    • ! know_28144 · 有附蠟燭嗎?
      問題
      有附蠟燭嗎?
      回答
      您好,蠟燭都需要加購唷!您可以到官網「重要時刻加購區」加購唷~謝謝
    • ! know_28122 · 門市註冊會員,要怎麼登入官網
      問題
      門市註冊會員,要怎麼登入官網
      回答
      1️⃣ 選好商品 → 點選「購物車」→ 按「會員登入」 2️⃣ 點「忘記密碼」→ 輸入手機號碼 → 收簡訊輸入驗證碼 3️⃣ 設定新密碼 → 輸入 email 完成重設 ✅ 從此之後登入就能自動累計會員消費啦!
    • ! know_28142 · 可以代寫卡片嗎?
      問題
      可以代寫卡片嗎?
      回答
      可以唷~下單完成後,只要提供: 1.訂購人電話 2.想寫在卡片上的內容(限30字含標點符號) 我們會幫您一字一句用心寫下 ❤️
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到的慶生組合內容完全來自於來源資料,且所有的事實陳述都有相應的支持,因此沒有任何虛構的聲明。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 慶生組合裡面包含「Happy Birthday 立牌」以及「金色質感蠟燭一支」哦! 如果您還有其他關於蛋糕配件或加購品的問題,也歡迎隨時詢問。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 慶生組合裡面包含 Happy Birthday 立牌
    • 包含金色質感蠟燭一支
    Judge 推理
    這個回答完全符合用戶的問題,並且正確地列出了慶生組合的內容,沒有遺漏任何關鍵資訊。
  • 案例 88475C45

    CheeseCake1 的蛋糕可以給乳糖不耐症的人吃嗎

    已完成
    第 1 次嘗試 · 已完成 22105ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USERCheeseCake1 的蛋糕可以給乳糖不耐症的人吃嗎
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 關於乳糖不耐症是否可以食用 CheeseCake1 的蛋糕,因為我們的蛋糕主要成分包含鮮奶油與乳酪,屬於乳製品甜點。如果您有乳糖不耐症,建議您依自身情況斟酌食用,以避免身體不適。 如果您還有其他疑問或需要進一步協助,歡迎隨時告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28152 · 乳糖不耐症 可以吃嗎?
      問題
      乳糖不耐症 可以吃嗎?
      回答
      您好,CheeseCake1 的蛋糕主要成分包含鮮奶油與乳酪,屬於乳製品甜點。 若您有乳糖不耐症,建議您依自身情況斟酌食用,避免身體不適。
    意料之外 (9)
    • ! know_28146 · 寶寶可以吃嗎?
      問題
      寶寶可以吃嗎?
      回答
      我們的蛋糕不含人工添加物,只要寶寶已具備良好吞嚥能力,適量食用是沒問題的唷!
    • ! know_28141 · 蛋糕尺寸
      問題
      蛋糕尺寸
      回答
      ・🟠 圓形蛋糕為 6 吋 ・大 🟧 方形蛋糕為 8 吋(以斜對角計算) ・小 🟧+ 🟧 方形(雙拼)蛋糕為 4 吋
    • ! know_28125 · 可以放幾天?
      問題
      可以放幾天?
      回答
      食用期限與保存建議: 請於收到後 3 日內食用完畢,才是最美味的黃金賞味期。 切勿冷凍保存:冷凍會破壞乳酪與新鮮水果的口感與品質,不建議使用。 所有水果皆經挑選與手工分切,無添加防腐劑或人工劑,因此若出現輕微氧化、褐變,屬於正常現象,請安心食用。 🌡 常溫注意事項: 建議不要將蛋糕放置於常溫超過 2 小時(炎熱天氣請縮短至 1 小時內)。 若需外出攜帶或長時間常溫擺放,建議加購保冷袋,並放入冰塊保冷,維持蛋糕口感品質。 💡 小秘訣: 蛋糕若退冰後,若回冰 2小時後再享用,風味更迷人!吃不完的蛋糕,記得放回冷藏唷!
    • ! know_28124 · 蛋糕有哪些配件呢?
      問題
      蛋糕有哪些配件呢?
      回答
      🎁 購買《遇見,最對味的另一半》(雙拼)系列蛋糕 凡購買此系列任一款蛋糕,即享以下專屬包裝與贈禮: 品牌五入叉子組(適合二至四人甜蜜分享) 專屬 精美品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附有 產品說明卡,細節體現心意 🎁 購買其他任一款蛋糕(不含上述系列) 即贈送: 一支 大理石紋質感蛋糕鏟(實用又具收藏價值) 專屬 訂製品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附上 產品說明卡 蛋糕貼心附贈 五人份叉盤組,分享無負擔!
    • ! know_28120 · 乳酪蛋糕什麼時候會送到?
      問題
      乳酪蛋糕什麼時候會送到?
      回答
      我們採「接單現做」,確保每顆蛋糕都新鮮美味! 完成下單後約 3~5 個工作日內,就能收到精緻又新鮮的乳酪蛋糕。
    • ! know_28133 · 彌月試吃申請
      問題
      彌月試吃申請
      回答
      彌月試吃申請資格: 懷孕30週~產後30天的孕媽咪皆可申請! 📌 申請步驟如下: 1 上傳以下照片給小編:   ・媽媽手冊封面照片   ・產檢內頁及預產期照片 2 line官方取得彌月專屬 85折優惠代碼 3 官網結帳頁面輸入優惠代碼 4 收到彌月試吃蛋糕 5 試吃後續訂彌月蛋糕依數量享優惠!
    • ! know_28127 · 可以直接到桃園起司蛋糕壹廠購買嗎?
      問題
      可以直接到桃園起司蛋糕壹廠購買嗎?
      回答
      目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,所以建議訂好再前往取蛋糕~ 因應衛生考量,桃園起士蛋糕壹廠不提供現金交易僅提供刷卡唷~
    • ! know_28145 · 運費多少?
      問題
      運費多少?
      回答
      CheeseCake1 全站使用 黑貓冷藏宅配 每筆訂單(單一地址)運費為 NT$80元。 單筆訂單滿 NT$3,900(以實際支付金額為準)即可享免運優惠!
    • ! know_28151 · 門市資訊
      問題
      門市資訊
      回答
      📍 CheeseCake1|台北信義新光三越 A4 館 B2 專櫃 🧀 地址|台北市信義區松高路 19 號 B2(新光三越 A4 館) 📞 電話|02-7723-1095 # 13 📍 CheeseCake1|台中歌劇院門市 🧀 地址|台中市西屯區市政北二路 57 號 (聯聚仁愛大樓,台中歌劇院斜對面) 📞 電話|(02) 7723-1095 分機 14 📍 桃園起司蛋糕壹廠 取貨資訊 🏠 地址|桃園市中壢區中園路 168-1 號 3 樓 📞 電話|(02) 7723-1095 分機 9
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆完全基於來源資料,並且正確地引用了有關乳糖不耐症的建議,因此沒有任何虛構的聲明。所有的事實聲明都可以從來源中找到支持。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    100.0% · w 30%
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 關於乳糖不耐症是否可以食用 CheeseCake1 的蛋糕,因為我們的蛋糕主要成分包含鮮奶油與乳酪,屬於乳製品甜點。如果您有乳糖不耐症,建議您依自身情況斟酌食用,以避免身體不適。 如果您還有其他疑問或需要進一步協助,歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • CheeseCake1 的蛋糕主要成分包含鮮奶油與乳酪
    • 屬於乳製品甜點
    II 重要限制 w 30%
    • 若您有乳糖不耐症,建議您依自身情況斟酌食用,避免身體不適
    Judge 推理
    這個回答完整地涵蓋了所有關鍵點,並且提供了正確的資訊,符合用戶的需求。
  • 案例 6FB31253

    玫瑰花會不會因為天氣影響而附上?

    已完成
    第 1 次嘗試 · 已完成 29924ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER玫瑰花會不會因為天氣影響而附上?
    BOT稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 關於玫瑰花是否會因天氣影響而附上,我們所使用的玫瑰鮮花為可食用花材,但因產量容易受到天候與氣溫影響,若當次品質不佳,將會暫停附上玫瑰裝飾,以確保整體體驗與安全。 如果遇到沒有附上玫瑰的情況,我們會補償 NT$100 購物金。您只需聯繫客服,並提供蛋糕盒內「說明小紙條」背面的領取代碼,經核對無誤後,購物金會在 3–5 個工作日內匯入您的帳號。請登入會員後前往「購物金專區」查詢。 如有其他問題,也歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28147 · 會附上玫瑰花嗎?
      問題
      會附上玫瑰花嗎?
      回答
      我們所使用的玫瑰鮮花為可食用花材,但因產量易受天候與氣溫影響, 若當次品質不佳,將 暫停附上玫瑰裝飾,以確保整體體驗與安全。 為表歉意,我們將補償 NT$100 購物金,領取方式如下: 請洽客服,提供蛋糕盒內「說明小紙條」背面之領取代碼。 經核對無誤後,購物金將於 3–5 個工作日內匯入帳號。 請登入會員後前往「購物金專區」查詢。
    意料之外 (9)
    • ! know_28134 · 颱風天會配送嗎?
      問題
      颱風天會配送嗎?
      回答
      若您所在地區因天候影響而公告停班停課,為保障配送人員安全, 訂單將會自動順延至下一個工作日配送,還請您多加留意當地狀況唷。 感謝您的體諒與支持 !
    • ! know_28125 · 可以放幾天?
      問題
      可以放幾天?
      回答
      食用期限與保存建議: 請於收到後 3 日內食用完畢,才是最美味的黃金賞味期。 切勿冷凍保存:冷凍會破壞乳酪與新鮮水果的口感與品質,不建議使用。 所有水果皆經挑選與手工分切,無添加防腐劑或人工劑,因此若出現輕微氧化、褐變,屬於正常現象,請安心食用。 🌡 常溫注意事項: 建議不要將蛋糕放置於常溫超過 2 小時(炎熱天氣請縮短至 1 小時內)。 若需外出攜帶或長時間常溫擺放,建議加購保冷袋,並放入冰塊保冷,維持蛋糕口感品質。 💡 小秘訣: 蛋糕若退冰後,若回冰 2小時後再享用,風味更迷人!吃不完的蛋糕,記得放回冷藏唷!
    • ! know_28131 · 指定日期就能當天收到嗎?
      問題
      指定日期就能當天收到嗎?
      回答
      我們這邊都會準時出貨唷, 目前黑貓宅配整體狀況良好, 根據小編統計,當日準時送達率超過 99% , 絕大多數客人都能準時收到蛋糕! 不過實際配送仍會依照您所在地區的物流安排為主, 有時難免會遇到一些突發狀況~像是天氣不穩、交通壅塞, 甚至小編真的看過黑貓宅配車因違停被拖走的情況。 若您的蛋糕是要用來慶生或過節等重要時刻, 我們會強烈建議您提前一天到貨, 這樣能更安心準備、避免壓線風險。 若您對配送時間有進一步疑問, 也歡迎直接致電黑貓客服:02-412-8888 查詢狀況唷!
    • ! know_28153 · 可以單獨買一小塊嗎?
      問題
      可以單獨買一小塊嗎?
      回答
      您好,沒有販售單獨一小塊,因為最小尺寸就是雙拼(2入)組合唷!
    • ! know_28146 · 寶寶可以吃嗎?
      問題
      寶寶可以吃嗎?
      回答
      我們的蛋糕不含人工添加物,只要寶寶已具備良好吞嚥能力,適量食用是沒問題的唷!
    • ! know_28130 · 請問桃園六日可以取貨嗎?
      問題
      請問桃園六日可以取貨嗎?
      回答
      桃園取貨時間: 週一至週五|09:30 – 17:30(六日不開放)
    • ! know_28121 · 配送與取貨地點怎麼安排?
      問題
      配送與取貨地點怎麼安排?
      回答
      黑貓宅配|可預訂 60 天內的日期(黑貓週日/週一不配送,建議選擇提前一天或改至櫃位自取) 台北信義門市(新光A4)|可預訂 60 天內的取貨 台中歌劇院門市|可預訂 30 天內的取貨 桃園起司蛋糕壹廠|可預訂 60 天內的取貨 若您有超過上述時間的預約需求,歡迎私訊客服為您安排
    • ! know_28136 · 週日可以宅配嗎?
      問題
      週日可以宅配嗎?
      回答
      不好意思~ 目前我們週日與週一暫無提供宅配服務唷! (黑貓冷藏配送為週二至週六)
    • ! know_28152 · 乳糖不耐症 可以吃嗎?
      問題
      乳糖不耐症 可以吃嗎?
      回答
      您好,CheeseCake1 的蛋糕主要成分包含鮮奶油與乳酪,屬於乳製品甜點。 若您有乳糖不耐症,建議您依自身情況斟酌食用,避免身體不適。
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到玫瑰花的品質會受到天氣影響,這與來源中的信息一致,因此所有的事實陳述都是有根據的。

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    100.0% · w 30%
    III 補充
    0.0% · w 10%
    • 以確保整體體驗與安全
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 關於玫瑰花是否會因天氣影響而附上,我們所使用的玫瑰鮮花為可食用花材,但因產量容易受到天候與氣溫影響,若當次品質不佳,將會暫停附上玫瑰裝飾,以確保整體體驗與安全。 如果遇到沒有附上玫瑰的情況,我們會補償 NT$100 購物金。您只需聯繫客服,並提供蛋糕盒內「說明小紙條」背面的領取代碼,經核對無誤後,購物金會在 3–5 個工作日內匯入您的帳號。請登入會員後前往「購物金專區」查詢。 如有其他問題,也歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 我們所使用的玫瑰鮮花為可食用花材
    II 重要限制 w 30%
    • 若當次品質不佳,將暫停附上玫瑰裝飾
    III 補充說明 w 10%
    • 以確保整體體驗與安全
    Judge 推理
    這個回答針對用戶的問題提供了相關的資訊,並且涵蓋了主要的要點,但在補充部分缺少了「以確保整體體驗與安全」這句話,因此在完整性上稍有不足。
  • 案例 8A7926F5

    未加入會員怎麼查詢訂單明細?

    已完成
    第 1 次嘗試 · 已完成 37990ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER未加入會員怎麼查詢訂單明細?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 如果您未加入會員,也可以查詢訂單明細:請回到您下單時填寫的 Email 信箱,信件中會有完整的訂單明細可供查詢。如果需要查詢配送狀態,到貨日前一晚 20:00 後,您可以在訂單頁面點選「黑貓物流追蹤」查詢配送進度。 如有其他疑問,也歡迎隨時告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28154 · 怎麼查詢出貨了嗎?
      問題
      怎麼查詢出貨了嗎?
      回答
      若您有加入官網會員, 可以直接登入官網後台查詢訂單資訊與配送進度唷 💻 👉 https://www.cheesecake1.com.tw/users/sign_in 若您尚未加入會員, 也可以回到您訂購時填寫的 Email 信箱, 信件中會有完整的訂單明細可供查詢 📧 📦 提醒您: 到貨日前一晚 20:00(晚上 8 點)後, 即可於訂單頁面中點選「黑貓物流追蹤」查詢配送狀態。 若您對物流有任何進一步的疑問, 也可直接致電黑貓客服:02-412-8888
    意料之外 (9)
    • ! know_28143 · 請問可以更改付款方式嗎?
      問題
      請問可以更改付款方式嗎?
      回答
      您好,訂單未付款成功會自動取消,您可以重新下單就可以囉
    • ! know_28132 · 我要取消訂單
      問題
      我要取消訂單
      回答
      好的,請提供訂購人電話或訂單編號 退款款項會退款至您的原付款方式,處理時間約為 7 ~10個工作日左右,以下是各付款方式的退款方式說明: 1.信用卡 / LINE Pay:將原卡退刷,款項會自動回到您的帳戶 2. 匯款 / 超商付款:將匯入您提供的指定帳戶,退款時會酌收 $30 元匯款手續費喔
    • ! know_28155 · 如何加入會員 ?
      問題
      如何加入會員 ?
      回答
      請點擊官網右上角人物符號加入會員,支援FB、LINE管道註冊~
    • ! know_28119 · 如何訂購與付款?
      問題
      如何訂購與付款?
      回答
      您可以直接在官網下單,選擇「百貨專櫃自取」或「冷藏宅配」,並享有多元付款方式與彈性到貨日期選擇。 🔺實際到貨時間仍以您地址所屬區域的宅配業者配送狀況為準喔!
    • ! know_28137 · 付款方式有哪些?
      問題
      付款方式有哪些?
      回答
      您可以使用以下多種方式輕鬆付款唷: ✔ 信用卡線上刷卡(支援 Visa / MasterCard / JCB) ✔ LINE Pay ✔ ATM 轉帳 ✔ 超商代碼繳費(7-11 / 全家 / OK / 萊爾富)
    • ! know_28147 · 會附上玫瑰花嗎?
      問題
      會附上玫瑰花嗎?
      回答
      我們所使用的玫瑰鮮花為可食用花材,但因產量易受天候與氣溫影響, 若當次品質不佳,將 暫停附上玫瑰裝飾,以確保整體體驗與安全。 為表歉意,我們將補償 NT$100 購物金,領取方式如下: 請洽客服,提供蛋糕盒內「說明小紙條」背面之領取代碼。 經核對無誤後,購物金將於 3–5 個工作日內匯入帳號。 請登入會員後前往「購物金專區」查詢。
    • ! know_28126 · 如何更改訂單資訊?
      問題
      如何更改訂單資訊?
      回答
      麻煩您提供一下訂購人電話📞,客服這邊幫您查詢訂單狀況唷~💛
    • ! know_28122 · 門市註冊會員,要怎麼登入官網
      問題
      門市註冊會員,要怎麼登入官網
      回答
      1️⃣ 選好商品 → 點選「購物車」→ 按「會員登入」 2️⃣ 點「忘記密碼」→ 輸入手機號碼 → 收簡訊輸入驗證碼 3️⃣ 設定新密碼 → 輸入 email 完成重設 ✅ 從此之後登入就能自動累計會員消費啦!
    • ! know_28148 · 小編可以幫我訂嗎?
      問題
      小編可以幫我訂嗎?
      回答
      為了保障您的付款安全與個人資料,我們無法透過 LINE 接受訂單唷 🙇‍♀️ 我們希望每一筆訂單、每一顆蛋糕都能被好好對待與妥善照顧💛 您可以直接透過官網安心下單: 1.自由選擇蛋糕口味 2.指定您想要的取貨日期 3.選擇宅配 or 專櫃自取都沒問題!
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆完全符合來源資料中的資訊,並且所有的事實陳述都有來源支持,因此沒有任何虛構的聲明。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 如果您未加入會員,也可以查詢訂單明細:請回到您下單時填寫的 Email 信箱,信件中會有完整的訂單明細可供查詢。如果需要查詢配送狀態,到貨日前一晚 20:00 後,您可以在訂單頁面點選「黑貓物流追蹤」查詢配送進度。 如有其他疑問,也歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 可以回到訂購時填寫的 Email 信箱查詢訂單明細
    Judge 推理
    這個回答完全符合用戶的問題,提供了查詢訂單明細的正確方法,並且沒有錯誤的陳述。
  • 案例 60B6000C

    可以透過 LINE 訂蛋糕嗎?

    已完成
    第 1 次嘗試 · 已完成 31627ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER可以透過 LINE 訂蛋糕嗎?
    BOT稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 很抱歉,目前無法透過 LINE 訂購蛋糕。為了保障您的付款安全與個人資料,我們僅提供官網下單服務。您可以直接到 CheeseCake1 官網選擇蛋糕口味、指定取貨日期,並選擇宅配或專櫃自取,非常方便又安心。 官網連結如下: CheeseCake1 官網: https://www.cheesecake1.com.tw/ 如有其他訂購相關問題,也歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28148 · 小編可以幫我訂嗎?
      問題
      小編可以幫我訂嗎?
      回答
      為了保障您的付款安全與個人資料,我們無法透過 LINE 接受訂單唷 🙇‍♀️ 我們希望每一筆訂單、每一顆蛋糕都能被好好對待與妥善照顧💛 您可以直接透過官網安心下單: 1.自由選擇蛋糕口味 2.指定您想要的取貨日期 3.選擇宅配 or 專櫃自取都沒問題!
    意料之外 (9)
    • ! know_28120 · 乳酪蛋糕什麼時候會送到?
      問題
      乳酪蛋糕什麼時候會送到?
      回答
      我們採「接單現做」,確保每顆蛋糕都新鮮美味! 完成下單後約 3~5 個工作日內,就能收到精緻又新鮮的乳酪蛋糕。
    • ! know_28152 · 乳糖不耐症 可以吃嗎?
      問題
      乳糖不耐症 可以吃嗎?
      回答
      您好,CheeseCake1 的蛋糕主要成分包含鮮奶油與乳酪,屬於乳製品甜點。 若您有乳糖不耐症,建議您依自身情況斟酌食用,避免身體不適。
    • ! know_28125 · 可以放幾天?
      問題
      可以放幾天?
      回答
      食用期限與保存建議: 請於收到後 3 日內食用完畢,才是最美味的黃金賞味期。 切勿冷凍保存:冷凍會破壞乳酪與新鮮水果的口感與品質,不建議使用。 所有水果皆經挑選與手工分切,無添加防腐劑或人工劑,因此若出現輕微氧化、褐變,屬於正常現象,請安心食用。 🌡 常溫注意事項: 建議不要將蛋糕放置於常溫超過 2 小時(炎熱天氣請縮短至 1 小時內)。 若需外出攜帶或長時間常溫擺放,建議加購保冷袋,並放入冰塊保冷,維持蛋糕口感品質。 💡 小秘訣: 蛋糕若退冰後,若回冰 2小時後再享用,風味更迷人!吃不完的蛋糕,記得放回冷藏唷!
    • ! know_28124 · 蛋糕有哪些配件呢?
      問題
      蛋糕有哪些配件呢?
      回答
      🎁 購買《遇見,最對味的另一半》(雙拼)系列蛋糕 凡購買此系列任一款蛋糕,即享以下專屬包裝與贈禮: 品牌五入叉子組(適合二至四人甜蜜分享) 專屬 精美品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附有 產品說明卡,細節體現心意 🎁 購買其他任一款蛋糕(不含上述系列) 即贈送: 一支 大理石紋質感蛋糕鏟(實用又具收藏價值) 專屬 訂製品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附上 產品說明卡 蛋糕貼心附贈 五人份叉盤組,分享無負擔!
    • ! know_28141 · 蛋糕尺寸
      問題
      蛋糕尺寸
      回答
      ・🟠 圓形蛋糕為 6 吋 ・大 🟧 方形蛋糕為 8 吋(以斜對角計算) ・小 🟧+ 🟧 方形(雙拼)蛋糕為 4 吋
    • ! know_28157 · 有推薦口味嗎?
      問題
      有推薦口味嗎?
      回答
      第一次購買推薦: 1. 四個女生的故事 2. 奢侈藍莓乳酪 3. 雙倍經典 - 特濃超越重乳酪
    • ! know_28132 · 我要取消訂單
      問題
      我要取消訂單
      回答
      好的,請提供訂購人電話或訂單編號 退款款項會退款至您的原付款方式,處理時間約為 7 ~10個工作日左右,以下是各付款方式的退款方式說明: 1.信用卡 / LINE Pay:將原卡退刷,款項會自動回到您的帳戶 2. 匯款 / 超商付款:將匯入您提供的指定帳戶,退款時會酌收 $30 元匯款手續費喔
    • ! know_28129 · 素食可以食用嗎?
      問題
      素食可以食用嗎?
      回答
      ✅ 蛋奶素可食用: 經典1583|濃郁重乳酪 雙倍經典|特濃超越重乳酪 黑爵|三倍濃巧乳酪 ⚠️ 其他品項含動物性吉利丁(非素) 其他品項含有吉利丁(動物膠),非素食,敬請留意。
    • ! know_28127 · 可以直接到桃園起司蛋糕壹廠購買嗎?
      問題
      可以直接到桃園起司蛋糕壹廠購買嗎?
      回答
      目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,所以建議訂好再前往取蛋糕~ 因應衛生考量,桃園起士蛋糕壹廠不提供現金交易僅提供刷卡唷~
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆完全符合來源資料,明確指出無法透過 LINE 訂購蛋糕,並提供官網下單的資訊,因此所有的事實陳述都有來源支持。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 很抱歉,目前無法透過 LINE 訂購蛋糕。為了保障您的付款安全與個人資料,我們僅提供官網下單服務。您可以直接到 CheeseCake1 官網選擇蛋糕口味、指定取貨日期,並選擇宅配或專櫃自取,非常方便又安心。 官網連結如下: CheeseCake1 官網: https://www.cheesecake1.com.tw/ 如有其他訂購相關問題,也歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 我們無法透過 LINE 接受訂單
    • 您可以直接透過官網安心下單
    Judge 推理
    這個回答完全符合用戶的問題,清楚地說明了無法透過 LINE 訂購蛋糕的原因,並提供了官網的訂購方式,內容完整且正確。
項目 II.

情境調用與完成

scenario_funnel 10 cases

維度總表

各維度品質分 · 覆蓋率
走對流程 召回
scenario
80.0%
[50.0% – 100.0%] · n=10
F1 66.7% · 召回 80.0% · 精確 60.0%
10 / 10 適用
用對工具 召回
tool_usage
60.0%
[30.0% – 90.0%] · n=10
F1 60.0% · 召回 60.0% · 精確 60.0%
10 / 10 適用
答得到位 平均
answer_quality
72.7%
[46.3% – 92.3%] · n=10
10 / 10 適用
  • 案例 CFA3952B

    如何查詢訂單出貨狀態?

    已完成
    第 1 次嘗試 · 已完成 45349ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:query、keywords_or_codes
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    query 我想了解最新的智能手錶型號和功能 — (對話未走到)
    keywords_or_codes [] — (對話未走到)
    STEP
    03

    API 工具

    ○ 等待資訊收集完成
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    完整測試 4 個步驟
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER如何查詢訂單出貨狀態?
    BOT稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 查詢訂單出貨狀態的方法如下: - 若您有加入官網會員,可以直接登入官網後台查詢訂單資訊與配送進度: https://www.cheesecake1.com.tw/users/sign_in - 若您尚未加入會員,也可以回到您訂購時填寫的 Email 信箱,信件中會有完整的訂單明細可供查詢。 - 到貨日前一晚 20:00(晚上 8 點)後,您可以在訂單頁面點選「黑貓物流追蹤」查詢配送狀態。 如對物流有進一步疑問,也可直接致電黑貓客服:02-412-8888 如需其他協助,歡迎隨時告訴我!

    情境路由

    66.7%
    Precision
    50.0%
    Recall
    100.0%
    F1
    66.7%
    預期 (1)
    • 420 · 知識與產品查詢
    意料之外 (1)
    • ! 訂單查詢
    TP 1
    FP 1
    FN 0

    工具使用

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • search_unified
    TP 1
    FP 0
    FN 0

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 查詢訂單出貨狀態的方法如下: - 若您有加入官網會員,可以直接登入官網後台查詢訂單資訊與配送進度: https://www.cheesecake1.com.tw/users/sign_in - 若您尚未加入會員,也可以回到您訂購時填寫的 Email 信箱,信件中會有完整的訂單明細可供查詢。 - 到貨日前一晚 20:00(晚上 8 點)後,您可以在訂單頁面點選「黑貓物流追蹤」查詢配送狀態。 如對物流有進一步疑問,也可直接致電黑貓客服:02-412-8888 如需其他協助,歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 若您有加入官網會員,可以直接登入官網後台查詢訂單資訊與配送進度
    • 若尚未加入會員,您也可以回到訂購時填寫的 Email 信箱,查詢完整的訂單明細
    • 到貨日前一晚 20:00(晚上 8 點)後,可以於訂單頁面中點選「黑貓物流追蹤」查詢配送狀態
    III 補充說明 w 10%
    • 如有進一步的物流疑問,建議您直接致電黑貓客服:02-412-8888
    Judge 推理
    這個回答完全符合用戶的查詢,提供了查詢訂單出貨狀態的詳細步驟,並且包含了所有必要的資訊,沒有遺漏任何關鍵點。
  • 案例 14288978

    訂單查詢沒有相關紀錄怎麼辦?

    已完成
    第 1 次嘗試 · 已完成 25540ms
    腳本進度 · 訂單查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 訂單查詢
    腳本規則
    - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
    
    訂單查詢的 Agent 情景
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    ✗ 已呼叫 0 / 1 個工具
    未呼叫:shopline_search_orders
    腳本規則
    1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - Provide clear and concise answers based on order search results from tool messages
    - If multiple relevant orders found, combine them logically
    - If no relevant order found, acknowledge and offer to check with customer service
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER訂單查詢沒有相關紀錄怎麼辦?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服助理,很高興為您服務! 如果您在查詢訂單時沒有相關紀錄,建議您可以提供訂購人電話,讓客服協助查詢訂單狀況唷~💛 另外,若您有加入官網會員,可以直接登入官網後台查詢訂單資訊與配送進度:https://www.cheesecake1.com.tw/users/sign_in 如果還是找不到訂單,請確認您是否使用正確的 Email 或電話下單,或回到下單時填寫的 Email 信箱查看是否有收到訂單明細。 如仍有疑問,歡迎提供更多資訊,我會協助您進一步查詢!

    情境路由

    0.0%
    Precision
    0.0%
    Recall
    0.0%
    F1
    0.0%
    預期 (1)
    • 421 · 訂單查詢
    意料之外 (1)
    • ! 知識與產品查詢
    TP 0
    FP 1
    FN 1

    工具使用

    0.0%
    Precision
    0.0%
    Recall
    0.0%
    F1
    0.0%
    預期 (1)
    • shopline_search_orders
    意料之外 (1)
    • ! search_unified
    TP 0
    FP 1
    FN 1

    回答品質

    83.3%
    相關性
    90.0%
    完整性
    70.0%
    正確性
    90.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    50.0% · w 10%
    • 建議您聯繫客戶服務,以幫助解決您的問題
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服助理,很高興為您服務! 如果您在查詢訂單時沒有相關紀錄,建議您可以提供訂購人電話,讓客服協助查詢訂單狀況唷~💛 另外,若您有加入官網會員,可以直接登入官網後台查詢訂單資訊與配送進度:https://www.cheesecake1.com.tw/users/sign_in 如果還是找不到訂單,請確認您是否使用正確的 Email 或電話下單,或回到下單時填寫的 Email 信箱查看是否有收到訂單明細。 如仍有疑問,歡迎提供更多資訊,我會協助您進一步查詢!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 系統未找到相關訂單
    III 補充說明 w 10%
    • 建議您聯繫客戶服務,以幫助解決您的問題
    Judge 推理
    這個回覆的內容大致上符合用戶的查詢,但缺少了建議聯繫客服的關鍵點,導致完整性得分較低。
  • 案例 BF4AC073

    查詢我的訂單需要提供什麼資訊?

    已完成
    第 1 次嘗試 · 已完成 28505ms
    腳本進度 · 訂單查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 訂單查詢
    腳本規則
    - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
    
    訂單查詢的 Agent 情景
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    ✗ 已呼叫 0 / 1 個工具
    未呼叫:shopline_search_orders
    腳本規則
    1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - Provide clear and concise answers based on order search results from tool messages
    - If multiple relevant orders found, combine them logically
    - If no relevant order found, acknowledge and offer to check with customer service
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER查詢我的訂單需要提供什麼資訊?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服助理,很高興為您服務! 查詢訂單時,您可以提供「訂購人電話」或「訂單編號」,這樣我們就能協助您查詢訂單狀況。如果您有其他需求,也歡迎隨時告訴我!

    情境路由

    0.0%
    Precision
    0.0%
    Recall
    0.0%
    F1
    0.0%
    預期 (1)
    • 421 · 訂單查詢
    意料之外 (1)
    • ! 知識與產品查詢
    TP 0
    FP 1
    FN 1

    工具使用

    0.0%
    Precision
    0.0%
    Recall
    0.0%
    F1
    0.0%
    預期 (1)
    • shopline_search_orders
    意料之外 (1)
    • ! search_unified
    TP 0
    FP 1
    FN 1

    回答品質

    90.0%
    相關性
    100.0%
    完整性
    70.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    60.0% · w 60%
    • 需要提供您的訂購姓名
    II 重要
    III 補充
    10.0% · w 10%
    • 以便我們找到相關的訂單詳情
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服助理,很高興為您服務! 查詢訂單時,您可以提供「訂購人電話」或「訂單編號」,這樣我們就能協助您查詢訂單狀況。如果您有其他需求,也歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 需要提供您的訂購姓名、聯絡電話或訂單編號等個人資訊
    III 補充說明 w 10%
    • 以便我們找到相關的訂單詳情
    Judge 推理
    回覆中提到的查詢資訊不完整,缺少了訂購姓名這個必要項目,導致完整性得分降低。雖然回覆的內容正確且相關,但未能涵蓋所有關鍵點。
  • 案例 4E6AFE26

    如果有多個相關訂單,這些訂單會怎麼處理?

    已完成
    第 1 次嘗試 · 已完成 24972ms
    腳本進度 · 訂單查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 訂單查詢
    腳本規則
    - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
    
    訂單查詢的 Agent 情景
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    ✗ 已呼叫 0 / 1 個工具
    未呼叫:shopline_search_orders
    腳本規則
    1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - Provide clear and concise answers based on order search results from tool messages
    - If multiple relevant orders found, combine them logically
    - If no relevant order found, acknowledge and offer to check with customer service
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER如果有多個相關訂單,這些訂單會怎麼處理?
    BOT馬上為您找找看相關內容 📋 針對多個相關訂單的處理方式,若您需要查詢、修改或取消訂單,建議您提供訂購人電話或各自的訂單編號,客服可以協助查詢每一筆訂單的狀況。若需取消訂單,退款會依照您的原付款方式處理,時間約為7~10個工作日。若要更改訂單資訊,也請提供訂購人電話,客服會協助處理。 如果您想查詢出貨進度,可以登入官網會員後台查詢所有訂單資訊與配送進度;若未加入會員,也可透過下單時填寫的Email信箱查詢每筆訂單明細。 如需進一步協助,請告知您具體需要處理哪些訂單(可提供電話或編號),我會協助您後續流程。

    情境路由

    66.7%
    Precision
    50.0%
    Recall
    100.0%
    F1
    66.7%
    預期 (1)
    • 421 · 訂單查詢
    意料之外 (1)
    • ! 知識與產品查詢
    TP 1
    FP 1
    FN 0

    工具使用

    0.0%
    Precision
    0.0%
    Recall
    0.0%
    F1
    0.0%
    預期 (1)
    • shopline_search_orders
    意料之外 (1)
    • ! search_unified
    TP 0
    FP 1
    FN 1

    回答品質

    73.3%
    相關性
    80.0%
    完整性
    50.0%
    正確性
    90.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 系統會邏輯性地合併這些訂單的資訊
    • 提供清晰的查詢結果
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 針對多個相關訂單的處理方式,若您需要查詢、修改或取消訂單,建議您提供訂購人電話或各自的訂單編號,客服可以協助查詢每一筆訂單的狀況。若需取消訂單,退款會依照您的原付款方式處理,時間約為7~10個工作日。若要更改訂單資訊,也請提供訂購人電話,客服會協助處理。 如果您想查詢出貨進度,可以登入官網會員後台查詢所有訂單資訊與配送進度;若未加入會員,也可透過下單時填寫的Email信箱查詢每筆訂單明細。 如需進一步協助,請告知您具體需要處理哪些訂單(可提供電話或編號),我會協助您後續流程。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 系統會邏輯性地合併這些訂單的資訊
    • 提供清晰的查詢結果
    Judge 推理
    回覆中提到的訂單處理方式雖然相關,但未直接回答系統如何合併訂單資訊以提供查詢結果,因此在完整性上有所欠缺。
  • 案例 E4A9731F

    怎麼使用髮片?

    已完成
    第 1 次嘗試 · 已完成 24126ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:query、keywords_or_codes
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    query 我想了解最新的智能手機型號和功能 — (對話未走到)
    keywords_or_codes [] — (對話未走到)
    STEP
    03

    API 工具

    ○ 等待資訊收集完成
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    完整測試 4 個步驟
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER怎麼使用髮片?
    BOT馬上為您找找看相關內容 📋 很抱歉,目前沒有找到關於「髮片」使用方法的相關資訊。如果您需要更詳細的說明,建議您聯繫真人客服協助。

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 420 · 知識與產品查詢
    TP 1
    FP 0
    FN 0

    工具使用

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • search_unified
    TP 1
    FP 0
    FN 0

    回答品質

    0.0%
    相關性
    0.0%
    完整性
    0.0%
    正確性
    0.0%
    AI 回覆
    馬上為您找找看相關內容 📋 很抱歉,目前沒有找到關於「髮片」使用方法的相關資訊。如果您需要更詳細的說明,建議您聯繫真人客服協助。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 髮片可以直接夾在自然髮上
    • 確保位置固定
    • 可隨意調整角度以達到最佳效果
    II 重要限制 w 30%
    • 新手使用時,建議參考相關操作影片或詢問專業人士以獲得使用建議
    Judge 推理
    這個回答完全沒有針對使用髮片的問題提供任何相關資訊,且錯誤地聲稱沒有找到相關內容,未能遵循知識回應規則。
    遺漏要點 (4)
    • 髮片可以直接夾在自然髮上
    • 確保位置固定
    • 可隨意調整角度以達到最佳效果
    • 新手使用時,建議參考相關操作影片或詢問專業人士以獲得使用建議
    錯誤陳述 (1)
    • 目前沒有找到關於「髮片」使用方法的相關資訊
  • 案例 686F7D65

    發票什麼時候會寄到?

    已完成
    第 1 次嘗試 · 已完成 37011ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:query、keywords_or_codes
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    query 我想了解最新的智能手機型號和功能 — (對話未走到)
    keywords_or_codes [] — (對話未走到)
    STEP
    03

    API 工具

    ○ 等待資訊收集完成
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    完整測試 4 個步驟
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER發票什麼時候會寄到?
    BOT正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 關於發票寄送時間:我們的電子發票會在訂單付款完成後約 2 小時內,由系統自動寄送至您下單時填寫的 Email 信箱。如果您沒有在收件匣中看到,建議可以搜尋「泓晟國際股份有限公司」,或檢查是否被歸類到垃圾郵件或促銷分類。 如有其他疑問,也歡迎隨時告訴我!

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 420 · 知識與產品查詢
    TP 1
    FP 0
    FN 0

    工具使用

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • search_unified
    TP 1
    FP 0
    FN 0

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    100.0% · w 30%
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 關於發票寄送時間:我們的電子發票會在訂單付款完成後約 2 小時內,由系統自動寄送至您下單時填寫的 Email 信箱。如果您沒有在收件匣中看到,建議可以搜尋「泓晟國際股份有限公司」,或檢查是否被歸類到垃圾郵件或促銷分類。 如有其他疑問,也歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 發票會在訂單付款完成後約 2 小時內寄送至您下單時填寫的 Email 信箱
    II 重要限制 w 30%
    • 如果沒在收件匣中看到,建議搜尋關鍵字:「泓晟國際股份有限公司」
    Judge 推理
    這個回答完全符合用戶的問題,提供了發票寄送的具體時間和建議,並且沒有任何錯誤或遺漏。
  • 案例 81630A67

    出貨狀態怎麼查?

    已完成
    第 1 次嘗試 · 已完成 39589ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:query、keywords_or_codes
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    query 我想了解最新的智能手錶有哪些功能 — (對話未走到)
    keywords_or_codes [] — (對話未走到)
    STEP
    03

    API 工具

    ○ 等待資訊收集完成
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    完整測試 4 個步驟
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER出貨狀態怎麼查?
    BOT稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 查詢出貨狀態的方法如下: - 如果您有加入官網會員,可以直接登入官網後台查詢訂單資訊與配送進度: https://www.cheesecake1.com.tw/users/sign_in - 如果您尚未加入會員,也可以回到您訂購時填寫的 Email 信箱,信件中會有完整的訂單明細可供查詢。 - 到貨日前一晚 20:00(晚上 8 點)後,您可以在訂單頁面點選「黑貓物流追蹤」查詢配送狀態。 如有任何物流疑問,也可直接致電黑貓客服:02-412-8888 如需進一步協助,歡迎隨時告訴我!

    情境路由

    66.7%
    Precision
    50.0%
    Recall
    100.0%
    F1
    66.7%
    預期 (1)
    • 420 · 知識與產品查詢
    意料之外 (1)
    • ! 訂單查詢
    TP 1
    FP 1
    FN 0

    工具使用

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • search_unified
    TP 1
    FP 0
    FN 0

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 查詢出貨狀態的方法如下: - 如果您有加入官網會員,可以直接登入官網後台查詢訂單資訊與配送進度: https://www.cheesecake1.com.tw/users/sign_in - 如果您尚未加入會員,也可以回到您訂購時填寫的 Email 信箱,信件中會有完整的訂單明細可供查詢。 - 到貨日前一晚 20:00(晚上 8 點)後,您可以在訂單頁面點選「黑貓物流追蹤」查詢配送狀態。 如有任何物流疑問,也可直接致電黑貓客服:02-412-8888 如需進一步協助,歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 如果您有加入官網會員,可以直接登入官網後台查詢訂單資訊與配送進度
    • 若未加入會員,可以使用您訂購時填寫的 Email 來查詢訂單明細
    • 到貨日前一晚 20:00 後,您可以在訂單頁面中點選「黑貓物流追蹤」查詢配送狀態
    III 補充說明 w 10%
    • 如果有進一步的物流問題,您可以致電黑貓客服:02-412-8888
    Judge 推理
    這個回答完全符合用戶的查詢,提供了查詢出貨狀態的詳細步驟,並且包含了所有必要的資訊,沒有遺漏任何關鍵點。
  • 案例 6B3F9171

    你們的粉絲團和官網有什麼資訊?

    已完成
    第 1 次嘗試 · 已完成 43987ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:query、keywords_or_codes
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    query 我想了解最新的智能手錶型號和功能 — (對話未走到)
    keywords_or_codes [] — (對話未走到)
    STEP
    03

    API 工具

    ○ 等待資訊收集完成
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    完整測試 4 個步驟
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER你們的粉絲團和官網有什麼資訊?
    BOT稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 關於我們的粉絲團和官網資訊,以下是您可以在官網上獲得的主要內容: - 會員註冊與登入:可透過官網右上角人物符號加入會員,支援 Facebook、LINE 註冊。門市註冊會員也能在官網登入並累積消費。詳細步驟可參考:https://www.cheesecake1.com.tw/pages/login - 商品訂購:可於官網自由選擇蛋糕口味、指定取貨日期,並選擇宅配或專櫃自取。下單網址:https://www.cheesecake1.com.tw/ - 門市資訊:包含台北信義新光三越 A4 館 B2 專櫃、台中歌劇院門市及桃園起司蛋糕壹廠等據點,詳細地址與聯絡方式請見:https://www.cheesecake1.com.tw/pages/%E9%96%80%E5%B8%82%E6%93%9A%E9%BB%9E - 查詢訂單與配送進度:會員可登入官網後台查詢訂單狀態,也可透過訂購時的 Email 查詢明細。 - 外送服務:可於門市據點頁面查詢現貨、預約自取或外送服務。 - 蠟燭加購:如需蠟燭,可於「重要時刻加購區」加購:https://www.cheesecake1.com.tw/categories/%E9%87%8D%E8%A6%81%E6%99%82%E5%88%BB%E5%8A%A0%E8%B3%BC%E5%8D%80 如果您需要粉絲團(如 Facebook 或 Instagram)相關資訊,請再告知,我會協助您查詢!

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 420 · 知識與產品查詢
    TP 1
    FP 0
    FN 0

    工具使用

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • search_unified
    TP 1
    FP 0
    FN 0

    回答品質

    83.3%
    相關性
    90.0%
    完整性
    70.0%
    正確性
    90.0%
    加權拆解 · 三層 coverage
    I 核心
    60.0% · w 60%
    • 我們的粉絲團及官網會提供最新的活動資訊、產品更新及聯絡方式
    • 網址是: https://www.cheesecake1.com.tw
    II 重要
    III 補充
    10.0% · w 10%
    • 歡迎您加入我們的粉絲團,隨時掌握最新動態
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 關於我們的粉絲團和官網資訊,以下是您可以在官網上獲得的主要內容: - 會員註冊與登入:可透過官網右上角人物符號加入會員,支援 Facebook、LINE 註冊。門市註冊會員也能在官網登入並累積消費。詳細步驟可參考:https://www.cheesecake1.com.tw/pages/login - 商品訂購:可於官網自由選擇蛋糕口味、指定取貨日期,並選擇宅配或專櫃自取。下單網址:https://www.cheesecake1.com.tw/ - 門市資訊:包含台北信義新光三越 A4 館 B2 專櫃、台中歌劇院門市及桃園起司蛋糕壹廠等據點,詳細地址與聯絡方式請見:https://www.cheesecake1.com.tw/pages/%E9%96%80%E5%B8%82%E6%93%9A%E9%BB%9E - 查詢訂單與配送進度:會員可登入官網後台查詢訂單狀態,也可透過訂購時的 Email 查詢明細。 - 外送服務:可於門市據點頁面查詢現貨、預約自取或外送服務。 - 蠟燭加購:如需蠟燭,可於「重要時刻加購區」加購:https://www.cheesecake1.com.tw/categories/%E9%87%8D%E8%A6%81%E6%99%82%E5%88%BB%E5%8A%A0%E8%B3%BC%E5%8D%80 如果您需要粉絲團(如 Facebook 或 Instagram)相關資訊,請再告知,我會協助您查詢!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 我們的粉絲團及官網會提供最新的活動資訊、產品更新及聯絡方式
    • 網址是: https://www.cheesecake1.com.tw
    III 補充說明 w 10%
    • 歡迎您加入我們的粉絲團,隨時掌握最新動態
    Judge 推理
    回覆中提到的官網資訊雖然詳細,但未能完全涵蓋粉絲團的相關資訊,且未提供粉絲團的網址,導致完整性不足。
  • 案例 1D01CF98

    我想查詢我的訂單,如果找不到相關訂單怎麼辦?

    已完成
    第 1 次嘗試 · 已完成 37962ms
    腳本進度 · 訂單查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 訂單查詢
    腳本規則
    - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
    
    訂單查詢的 Agent 情景
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    ✗ 已呼叫 0 / 1 個工具
    未呼叫:shopline_search_orders
    腳本規則
    1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - Provide clear and concise answers based on order search results from tool messages
    - If multiple relevant orders found, combine them logically
    - If no relevant order found, acknowledge and offer to check with customer service
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER我想查詢我的訂單,如果找不到相關訂單怎麼辦?
    BOT正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 如果您查詢訂單時找不到相關訂單,建議您可以嘗試以下方式: 1. 若您有加入官網會員,可以直接登入官網後台查詢訂單資訊與配送進度: https://www.cheesecake1.com.tw/users/sign_in 2. 如果您不是會員,也可以回到下單時填寫的 Email 信箱,信件中會有完整的訂單明細可供查詢。 3. 若還是找不到訂單,請提供您的訂購人電話,客服這邊可以協助您查詢訂單狀況。 如有其他疑問,也歡迎隨時告訴我!

    情境路由

    66.7%
    Precision
    50.0%
    Recall
    100.0%
    F1
    66.7%
    預期 (1)
    • 421 · 訂單查詢
    意料之外 (1)
    • ! 知識與產品查詢
    TP 1
    FP 1
    FN 0

    工具使用

    0.0%
    Precision
    0.0%
    Recall
    0.0%
    F1
    0.0%
    預期 (1)
    • shopline_search_orders
    意料之外 (1)
    • ! search_unified
    TP 0
    FP 1
    FN 1

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    90.0% · w 60%
    • 如果未找到相關訂單,我們會確認並建議您聯繫客戶服務
    II 重要
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 如果您查詢訂單時找不到相關訂單,建議您可以嘗試以下方式: 1. 若您有加入官網會員,可以直接登入官網後台查詢訂單資訊與配送進度: https://www.cheesecake1.com.tw/users/sign_in 2. 如果您不是會員,也可以回到下單時填寫的 Email 信箱,信件中會有完整的訂單明細可供查詢。 3. 若還是找不到訂單,請提供您的訂購人電話,客服這邊可以協助您查詢訂單狀況。 如有其他疑問,也歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 如果未找到相關訂單,我們會確認並建議您聯繫客戶服務
    • 您可以透過您填寫的 Email 查詢訂單明細
    • 您可以直接登入官網後台進行查詢
    Judge 推理
    這個回答針對用戶的查詢提供了相關的解決方案,並且涵蓋了大部分的關鍵點,但缺少了建議聯繫客服的部分,因此在完整性上稍有不足。
  • 案例 5EA0EAF7

    如何使用你們的假髮?

    已完成
    第 1 次嘗試 · 已完成 25477ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:query、keywords_or_codes
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    query 我想了解最新的智能手錶有哪些功能 — (對話未走到)
    keywords_or_codes [] — (對話未走到)
    STEP
    03

    API 工具

    ○ 等待資訊收集完成
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    完整測試 4 個步驟
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER如何使用你們的假髮?
    BOT稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服助理,很高興為您服務! 目前查詢結果中沒有關於「假髮」的相關使用說明。CheeseCake1 主要專注於乳酪蛋糕與甜點產品,並未提供假髮相關商品或資訊。如果您有其他關於乳酪蛋糕、訂購、配送或保存等問題,歡迎隨時告訴我,我會很樂意協助您!

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 420 · 知識與產品查詢
    TP 1
    FP 0
    FN 0

    工具使用

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • search_unified
    TP 1
    FP 0
    FN 0

    回答品質

    0.0%
    相關性
    0.0%
    完整性
    0.0%
    正確性
    0.0%
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服助理,很高興為您服務! 目前查詢結果中沒有關於「假髮」的相關使用說明。CheeseCake1 主要專注於乳酪蛋糕與甜點產品,並未提供假髮相關商品或資訊。如果您有其他關於乳酪蛋糕、訂購、配送或保存等問題,歡迎隨時告訴我,我會很樂意協助您!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 使用假髮的方式包括將假髮小心地陳列,然後根據需要進行調整
    • 確保假髮合適並舒適地佩戴
    • 建議參考產品手冊以瞭解具體的使用步驟和技巧
    III 補充說明 w 10%
    • 若有任何問題,隨時可以詢問客服人員
    Judge 推理
    這個回覆完全沒有回答使用假髮的問題,並且錯誤地聲稱沒有相關資訊,這與用戶的查詢不符。回覆中缺乏所有關鍵的使用步驟和建議,導致不完整和不正確。
    遺漏要點 (4)
    • 使用假髮的方式包括將假髮小心地陳列,然後根據需要進行調整
    • 確保假髮合適並舒適地佩戴
    • 建議參考產品手冊以瞭解具體的使用步驟和技巧
    • 若有任何問題,隨時可以詢問客服人員
    錯誤陳述 (2)
    • 目前查詢結果中沒有關於「假髮」的相關使用說明
    • CheeseCake1 主要專注於乳酪蛋糕與甜點產品,並未提供假髮相關商品或資訊
項目 III.

對話素養(混合問答)

mixed_qa 10 cases

維度總表

各維度品質分 · 覆蓋率
找對資料 召回
retrieval
100.0%
[100.0% – 100.0%] · n=9
F1 18.2% · 相關率 13.3% · 精確 10.0%
9 / 10 適用
不亂編造 平均
faithfulness
90.0%
[70.0% – 100.0%] · n=10
10 / 10 適用
答得到位 平均
answer_quality
90.7%
[76.0% – 99.0%] · n=10
10 / 10 適用
  • 案例 C73D6842

    可以用信用卡付款嗎

    已完成
    第 1 次嘗試 · 已完成 31444ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER可以用信用卡付款嗎
    BOT正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 您可以使用信用卡線上刷卡付款,支援 Visa、MasterCard 及 JCB 卡別。此外,也提供 LINE Pay、ATM 轉帳與超商代碼繳費(7-11、全家、OK、萊爾富)等多種付款方式,讓您選擇最方便的方式完成訂購。若有其他付款相關問題,歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28137 · 付款方式有哪些?
      問題
      付款方式有哪些?
      回答
      您可以使用以下多種方式輕鬆付款唷: ✔ 信用卡線上刷卡(支援 Visa / MasterCard / JCB) ✔ LINE Pay ✔ ATM 轉帳 ✔ 超商代碼繳費(7-11 / 全家 / OK / 萊爾富)
    意料之外 (9)
    • ! know_28132 · 我要取消訂單
      問題
      我要取消訂單
      回答
      好的,請提供訂購人電話或訂單編號 退款款項會退款至您的原付款方式,處理時間約為 7 ~10個工作日左右,以下是各付款方式的退款方式說明: 1.信用卡 / LINE Pay:將原卡退刷,款項會自動回到您的帳戶 2. 匯款 / 超商付款:將匯入您提供的指定帳戶,退款時會酌收 $30 元匯款手續費喔
    • ! know_28143 · 請問可以更改付款方式嗎?
      問題
      請問可以更改付款方式嗎?
      回答
      您好,訂單未付款成功會自動取消,您可以重新下單就可以囉
    • ! know_28119 · 如何訂購與付款?
      問題
      如何訂購與付款?
      回答
      您可以直接在官網下單,選擇「百貨專櫃自取」或「冷藏宅配」,並享有多元付款方式與彈性到貨日期選擇。 🔺實際到貨時間仍以您地址所屬區域的宅配業者配送狀況為準喔!
    • ! know_28148 · 小編可以幫我訂嗎?
      問題
      小編可以幫我訂嗎?
      回答
      為了保障您的付款安全與個人資料,我們無法透過 LINE 接受訂單唷 🙇‍♀️ 我們希望每一筆訂單、每一顆蛋糕都能被好好對待與妥善照顧💛 您可以直接透過官網安心下單: 1.自由選擇蛋糕口味 2.指定您想要的取貨日期 3.選擇宅配 or 專櫃自取都沒問題!
    • ! know_28128 · 請問發票?
      問題
      請問發票?
      回答
      關於電子發票通知: 配合政府推動電子發票政策,CheeseCake1 也一同響應環保 ♻️ 我們的發票會在訂單付款完成後約 2 小時內, 由系統自動寄送至您下單時填寫的 Email 信箱 📧 🔍 若您沒在收件匣中看到, 建議您可以搜尋關鍵字:「泓晟國際股份有限公司」 或留意是否被歸類至「垃圾郵件」或「促銷分類」內唷 ✉️
    • ! know_28147 · 會附上玫瑰花嗎?
      問題
      會附上玫瑰花嗎?
      回答
      我們所使用的玫瑰鮮花為可食用花材,但因產量易受天候與氣溫影響, 若當次品質不佳,將 暫停附上玫瑰裝飾,以確保整體體驗與安全。 為表歉意,我們將補償 NT$100 購物金,領取方式如下: 請洽客服,提供蛋糕盒內「說明小紙條」背面之領取代碼。 經核對無誤後,購物金將於 3–5 個工作日內匯入帳號。 請登入會員後前往「購物金專區」查詢。
    • ! know_28142 · 可以代寫卡片嗎?
      問題
      可以代寫卡片嗎?
      回答
      可以唷~下單完成後,只要提供: 1.訂購人電話 2.想寫在卡片上的內容(限30字含標點符號) 我們會幫您一字一句用心寫下 ❤️
    • ! know_28126 · 如何更改訂單資訊?
      問題
      如何更改訂單資訊?
      回答
      麻煩您提供一下訂購人電話📞,客服這邊幫您查詢訂單狀況唷~💛
    • ! know_28145 · 運費多少?
      問題
      運費多少?
      回答
      CheeseCake1 全站使用 黑貓冷藏宅配 每筆訂單(單一地址)運費為 NT$80元。 單筆訂單滿 NT$3,900(以實際支付金額為準)即可享免運優惠!
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆中提到的信用卡付款方式及其他付款選項均有在來源中得到支持,因此所有的事實陳述都是有根據的,沒有虛構的內容。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 您可以使用信用卡線上刷卡付款,支援 Visa、MasterCard 及 JCB 卡別。此外,也提供 LINE Pay、ATM 轉帳與超商代碼繳費(7-11、全家、OK、萊爾富)等多種付款方式,讓您選擇最方便的方式完成訂購。若有其他付款相關問題,歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 可以使用信用卡線上刷卡付款
    • 支援 Visa、MasterCard 和 JCB
    Judge 推理
    這個回答完全符合用戶的問題,並且提供了所有必要的資訊,包括信用卡付款的可行性及支援的卡別,且沒有錯誤的陳述。
  • 案例 23973A6C

    這款髮片適合用在什麼場合?

    已完成
    第 1 次嘗試 · 已完成 25406ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:query、keywords_or_codes
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    query 我想了解最新的智能手錶型號和功能 — (對話未走到)
    keywords_or_codes [] — (對話未走到)
    STEP
    03

    API 工具

    ○ 等待資訊收集完成
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - All answers MUST be based on content output from <tool: search_knowledge_and_products>, NEVER fabricate
    - NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)
    - Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    - ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    - FIRST analyze user's intent before deciding whether to mention products:
    - • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, or issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    - • If user mentions specific product names/models → Provide product details
    - • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    - ## Conversation History Check (避免重複推薦) - CRITICAL:
    - ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    - • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    - • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    - • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    - • When user asks for general recommendations and tool outputs include previously mentioned products:
    -   - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
    -   - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
    -   - Always try to include additional products from tool outputs if available
    -   - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    - • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    - • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    - • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    - ## Knowledge Response Rules:
    - If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    - 🚫 CRITICAL URL RULE - MUST FOLLOW: Output URLs in plain text only. Format MUST be 'Topic名稱: URL地址' (example: 客服表單: https://example.com). ABSOLUTELY FORBIDDEN: markdown format [text](url). NEVER write [客服表單](url), ALWAYS write 客服表單: url
    - Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    - ## Product Response Rules (ONLY when user shows product interest):
    - IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    - DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    - If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    - When comparing products (only if user asks), focus on valuable aspects for consumers:
    - • Specifications
    - • Suitable use scenarios
    - • Price
    - ## Response Integration Rules:
    - If both knowledge and products found, prioritize based on user's actual question:
    - • Information-seeking questions → Answer with knowledge ONLY
    - • Product-seeking questions → Include both knowledge context and product recommendations
    - • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - NEVER force product recommendations into informational answers
    - ## No Results Handling:
    - If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    - If unable to answer at all, clearly explain and suggest transferring to human customer service
    - ## Language Style Rules:
    - MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    - NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    完整測試 4 個步驟
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER這款髮片適合用在什麼場合?
    BOT馬上為您找找看相關內容 📋 目前沒有找到關於「髮片」適合用在什麼場合的相關資訊。如果您需要更詳細的建議,建議您聯繫真人客服協助。
    PARTIAL
    忠實度——metric 尚未齊全 (缺:hallucination_rate, citation_grounding)

    回答品質

    26.7%
    相關性
    50.0%
    完整性
    30.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    0.0% · w 60%
    • 這款髮片適合在日常生活、派對或特別場合使用
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 目前沒有找到關於「髮片」適合用在什麼場合的相關資訊。如果您需要更詳細的建議,建議您聯繫真人客服協助。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 這款髮片適合在日常生活、派對或特別場合使用
    III 補充說明 w 10%
    • 能夠滿足不同的需求與用途
    Judge 推理
    回覆未能提供用戶所需的具體資訊,且錯誤地聲稱沒有相關資訊,這與正確答案相矛盾。
    錯誤陳述 (1)
    • 目前沒有找到關於「髮片」適合用在什麼場合的相關資訊
  • 案例 962D5193

    請問桃園起司蛋糕壹廠可以直接購買嗎?

    已完成
    第 1 次嘗試 · 已完成 28187ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER請問桃園起司蛋糕壹廠可以直接購買嗎?
    BOT正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 桃園起司蛋糕壹廠目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,因此建議您先在官網下單預約,再前往取貨會比較方便。現場不提供現金交易,只能刷卡付款。 如果您需要進一步的取貨資訊,桃園壹廠地址是:桃園市中壢區中園路 168-1 號 3 樓,電話:(02) 7723-1095 分機 9。取貨時間為週一至週五 09:30 – 17:30,六日不開放。 如需協助預約或有其他問題,歡迎隨時告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28127 · 可以直接到桃園起司蛋糕壹廠購買嗎?
      問題
      可以直接到桃園起司蛋糕壹廠購買嗎?
      回答
      目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,所以建議訂好再前往取蛋糕~ 因應衛生考量,桃園起士蛋糕壹廠不提供現金交易僅提供刷卡唷~
    意料之外 (9)
    • ! know_28121 · 配送與取貨地點怎麼安排?
      問題
      配送與取貨地點怎麼安排?
      回答
      黑貓宅配|可預訂 60 天內的日期(黑貓週日/週一不配送,建議選擇提前一天或改至櫃位自取) 台北信義門市(新光A4)|可預訂 60 天內的取貨 台中歌劇院門市|可預訂 30 天內的取貨 桃園起司蛋糕壹廠|可預訂 60 天內的取貨 若您有超過上述時間的預約需求,歡迎私訊客服為您安排
    • ! know_28151 · 門市資訊
      問題
      門市資訊
      回答
      📍 CheeseCake1|台北信義新光三越 A4 館 B2 專櫃 🧀 地址|台北市信義區松高路 19 號 B2(新光三越 A4 館) 📞 電話|02-7723-1095 # 13 📍 CheeseCake1|台中歌劇院門市 🧀 地址|台中市西屯區市政北二路 57 號 (聯聚仁愛大樓,台中歌劇院斜對面) 📞 電話|(02) 7723-1095 分機 14 📍 桃園起司蛋糕壹廠 取貨資訊 🏠 地址|桃園市中壢區中園路 168-1 號 3 樓 📞 電話|(02) 7723-1095 分機 9
    • ! know_28124 · 蛋糕有哪些配件呢?
      問題
      蛋糕有哪些配件呢?
      回答
      🎁 購買《遇見,最對味的另一半》(雙拼)系列蛋糕 凡購買此系列任一款蛋糕,即享以下專屬包裝與贈禮: 品牌五入叉子組(適合二至四人甜蜜分享) 專屬 精美品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附有 產品說明卡,細節體現心意 🎁 購買其他任一款蛋糕(不含上述系列) 即贈送: 一支 大理石紋質感蛋糕鏟(實用又具收藏價值) 專屬 訂製品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附上 產品說明卡 蛋糕貼心附贈 五人份叉盤組,分享無負擔!
    • ! know_28120 · 乳酪蛋糕什麼時候會送到?
      問題
      乳酪蛋糕什麼時候會送到?
      回答
      我們採「接單現做」,確保每顆蛋糕都新鮮美味! 完成下單後約 3~5 個工作日內,就能收到精緻又新鮮的乳酪蛋糕。
    • ! know_28141 · 蛋糕尺寸
      問題
      蛋糕尺寸
      回答
      ・🟠 圓形蛋糕為 6 吋 ・大 🟧 方形蛋糕為 8 吋(以斜對角計算) ・小 🟧+ 🟧 方形(雙拼)蛋糕為 4 吋
    • ! know_28130 · 請問桃園六日可以取貨嗎?
      問題
      請問桃園六日可以取貨嗎?
      回答
      桃園取貨時間: 週一至週五|09:30 – 17:30(六日不開放)
    • ! know_28148 · 小編可以幫我訂嗎?
      問題
      小編可以幫我訂嗎?
      回答
      為了保障您的付款安全與個人資料,我們無法透過 LINE 接受訂單唷 🙇‍♀️ 我們希望每一筆訂單、每一顆蛋糕都能被好好對待與妥善照顧💛 您可以直接透過官網安心下單: 1.自由選擇蛋糕口味 2.指定您想要的取貨日期 3.選擇宅配 or 專櫃自取都沒問題!
    • ! know_28125 · 可以放幾天?
      問題
      可以放幾天?
      回答
      食用期限與保存建議: 請於收到後 3 日內食用完畢,才是最美味的黃金賞味期。 切勿冷凍保存:冷凍會破壞乳酪與新鮮水果的口感與品質,不建議使用。 所有水果皆經挑選與手工分切,無添加防腐劑或人工劑,因此若出現輕微氧化、褐變,屬於正常現象,請安心食用。 🌡 常溫注意事項: 建議不要將蛋糕放置於常溫超過 2 小時(炎熱天氣請縮短至 1 小時內)。 若需外出攜帶或長時間常溫擺放,建議加購保冷袋,並放入冰塊保冷,維持蛋糕口感品質。 💡 小秘訣: 蛋糕若退冰後,若回冰 2小時後再享用,風味更迷人!吃不完的蛋糕,記得放回冷藏唷!
    • ! know_28131 · 指定日期就能當天收到嗎?
      問題
      指定日期就能當天收到嗎?
      回答
      我們這邊都會準時出貨唷, 目前黑貓宅配整體狀況良好, 根據小編統計,當日準時送達率超過 99% , 絕大多數客人都能準時收到蛋糕! 不過實際配送仍會依照您所在地區的物流安排為主, 有時難免會遇到一些突發狀況~像是天氣不穩、交通壅塞, 甚至小編真的看過黑貓宅配車因違停被拖走的情況。 若您的蛋糕是要用來慶生或過節等重要時刻, 我們會強烈建議您提前一天到貨, 這樣能更安心準備、避免壓線風險。 若您對配送時間有進一步疑問, 也歡迎直接致電黑貓客服:02-412-8888 查詢狀況唷!
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆完全符合來源資料,所有的事實陳述都有來源支持,因此沒有任何虛構的內容。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    100.0% · w 30%
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 桃園起司蛋糕壹廠目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,因此建議您先在官網下單預約,再前往取貨會比較方便。現場不提供現金交易,只能刷卡付款。 如果您需要進一步的取貨資訊,桃園壹廠地址是:桃園市中壢區中園路 168-1 號 3 樓,電話:(02) 7723-1095 分機 9。取貨時間為週一至週五 09:30 – 17:30,六日不開放。 如需協助預約或有其他問題,歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 目前僅提供官網預約自取
    • 現場有少量現貨但沒有展示蛋糕
    • 桃園起士蛋糕壹廠不提供現金交易僅提供刷卡
    II 重要限制 w 30%
    • 建議訂好再前往取蛋糕
    Judge 推理
    這個回答完全符合用戶的問題,提供了桃園起司蛋糕壹廠的購買方式及相關資訊,且所有關鍵點都被涵蓋,沒有錯誤的陳述。
  • 案例 1F2C4E82

    所有產品都可以素食食用嗎?

    已完成
    第 1 次嘗試 · 已完成 22755ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER所有產品都可以素食食用嗎?
    BOT正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 關於素食者是否可以食用我們的產品,以下提供詳細說明: - 蛋奶素可食用的品項有: - 經典1583|濃郁重乳酪 - 雙倍經典|特濃超越重乳酪 - 黑爵|三倍濃巧乳酪 - 其他品項則含有動物性吉利丁(動物膠),不適合素食者,請特別留意。 如果您有特定想詢問的口味或產品,也歡迎告訴我,我可以幫您確認是否適合素食者食用!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28129 · 素食可以食用嗎?
      問題
      素食可以食用嗎?
      回答
      ✅ 蛋奶素可食用: 經典1583|濃郁重乳酪 雙倍經典|特濃超越重乳酪 黑爵|三倍濃巧乳酪 ⚠️ 其他品項含動物性吉利丁(非素) 其他品項含有吉利丁(動物膠),非素食,敬請留意。
    意料之外 (9)
    • ! know_28146 · 寶寶可以吃嗎?
      問題
      寶寶可以吃嗎?
      回答
      我們的蛋糕不含人工添加物,只要寶寶已具備良好吞嚥能力,適量食用是沒問題的唷!
    • ! know_28152 · 乳糖不耐症 可以吃嗎?
      問題
      乳糖不耐症 可以吃嗎?
      回答
      您好,CheeseCake1 的蛋糕主要成分包含鮮奶油與乳酪,屬於乳製品甜點。 若您有乳糖不耐症,建議您依自身情況斟酌食用,避免身體不適。
    • ! know_28124 · 蛋糕有哪些配件呢?
      問題
      蛋糕有哪些配件呢?
      回答
      🎁 購買《遇見,最對味的另一半》(雙拼)系列蛋糕 凡購買此系列任一款蛋糕,即享以下專屬包裝與贈禮: 品牌五入叉子組(適合二至四人甜蜜分享) 專屬 精美品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附有 產品說明卡,細節體現心意 🎁 購買其他任一款蛋糕(不含上述系列) 即贈送: 一支 大理石紋質感蛋糕鏟(實用又具收藏價值) 專屬 訂製品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附上 產品說明卡 蛋糕貼心附贈 五人份叉盤組,分享無負擔!
    • ! know_28125 · 可以放幾天?
      問題
      可以放幾天?
      回答
      食用期限與保存建議: 請於收到後 3 日內食用完畢,才是最美味的黃金賞味期。 切勿冷凍保存:冷凍會破壞乳酪與新鮮水果的口感與品質,不建議使用。 所有水果皆經挑選與手工分切,無添加防腐劑或人工劑,因此若出現輕微氧化、褐變,屬於正常現象,請安心食用。 🌡 常溫注意事項: 建議不要將蛋糕放置於常溫超過 2 小時(炎熱天氣請縮短至 1 小時內)。 若需外出攜帶或長時間常溫擺放,建議加購保冷袋,並放入冰塊保冷,維持蛋糕口感品質。 💡 小秘訣: 蛋糕若退冰後,若回冰 2小時後再享用,風味更迷人!吃不完的蛋糕,記得放回冷藏唷!
    • ! know_28128 · 請問發票?
      問題
      請問發票?
      回答
      關於電子發票通知: 配合政府推動電子發票政策,CheeseCake1 也一同響應環保 ♻️ 我們的發票會在訂單付款完成後約 2 小時內, 由系統自動寄送至您下單時填寫的 Email 信箱 📧 🔍 若您沒在收件匣中看到, 建議您可以搜尋關鍵字:「泓晟國際股份有限公司」 或留意是否被歸類至「垃圾郵件」或「促銷分類」內唷 ✉️
    • ! know_28157 · 有推薦口味嗎?
      問題
      有推薦口味嗎?
      回答
      第一次購買推薦: 1. 四個女生的故事 2. 奢侈藍莓乳酪 3. 雙倍經典 - 特濃超越重乳酪
    • ! know_28147 · 會附上玫瑰花嗎?
      問題
      會附上玫瑰花嗎?
      回答
      我們所使用的玫瑰鮮花為可食用花材,但因產量易受天候與氣溫影響, 若當次品質不佳,將 暫停附上玫瑰裝飾,以確保整體體驗與安全。 為表歉意,我們將補償 NT$100 購物金,領取方式如下: 請洽客服,提供蛋糕盒內「說明小紙條」背面之領取代碼。 經核對無誤後,購物金將於 3–5 個工作日內匯入帳號。 請登入會員後前往「購物金專區」查詢。
    • ! know_28153 · 可以單獨買一小塊嗎?
      問題
      可以單獨買一小塊嗎?
      回答
      您好,沒有販售單獨一小塊,因為最小尺寸就是雙拼(2入)組合唷!
    • ! know_28139 · 可以客製化嗎?
      問題
      可以客製化嗎?
      回答
      我們目前配合專用精裝盒規格,僅提供固定尺寸與樣式!沒有客製化唷~
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆完全基於來源資料,所有提到的產品和素食者的適用性都有來源支持,因此沒有虛構的聲明。

    回答品質

    93.3%
    相關性
    100.0%
    完整性
    80.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    0.0% · w 10%
    • 敬請留意
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您好,我是 CheeseCake1 客服,很高興為您服務! 關於素食者是否可以食用我們的產品,以下提供詳細說明: - 蛋奶素可食用的品項有: - 經典1583|濃郁重乳酪 - 雙倍經典|特濃超越重乳酪 - 黑爵|三倍濃巧乳酪 - 其他品項則含有動物性吉利丁(動物膠),不適合素食者,請特別留意。 如果您有特定想詢問的口味或產品,也歡迎告訴我,我可以幫您確認是否適合素食者食用!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 其他品項含有動物性吉利丁
    III 補充說明 w 10%
    • 敬請留意
    Judge 推理
    這個回答針對用戶的問題提供了相關資訊,並且正確地指出了其他品項含有動物性吉利丁,符合核心必答的要求。然而,缺少了補充的敬請留意,導致完整性得分不高。
  • 案例 D09021D7

    大方形蛋糕的尺寸是多大?

    已完成
    第 1 次嘗試 · 已完成 27191ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER大方形蛋糕的尺寸是多大?
    BOT稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 大方形蛋糕的尺寸為8吋(以斜對角計算)。如果您還有其他尺寸需求,歡迎再告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28141 · 蛋糕尺寸
      問題
      蛋糕尺寸
      回答
      ・🟠 圓形蛋糕為 6 吋 ・大 🟧 方形蛋糕為 8 吋(以斜對角計算) ・小 🟧+ 🟧 方形(雙拼)蛋糕為 4 吋
    意料之外 (9)
    • ! know_28127 · 可以直接到桃園起司蛋糕壹廠購買嗎?
      問題
      可以直接到桃園起司蛋糕壹廠購買嗎?
      回答
      目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,所以建議訂好再前往取蛋糕~ 因應衛生考量,桃園起士蛋糕壹廠不提供現金交易僅提供刷卡唷~
    • ! know_28124 · 蛋糕有哪些配件呢?
      問題
      蛋糕有哪些配件呢?
      回答
      🎁 購買《遇見,最對味的另一半》(雙拼)系列蛋糕 凡購買此系列任一款蛋糕,即享以下專屬包裝與贈禮: 品牌五入叉子組(適合二至四人甜蜜分享) 專屬 精美品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附有 產品說明卡,細節體現心意 🎁 購買其他任一款蛋糕(不含上述系列) 即贈送: 一支 大理石紋質感蛋糕鏟(實用又具收藏價值) 專屬 訂製品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附上 產品說明卡 蛋糕貼心附贈 五人份叉盤組,分享無負擔!
    • ! know_28120 · 乳酪蛋糕什麼時候會送到?
      問題
      乳酪蛋糕什麼時候會送到?
      回答
      我們採「接單現做」,確保每顆蛋糕都新鮮美味! 完成下單後約 3~5 個工作日內,就能收到精緻又新鮮的乳酪蛋糕。
    • ! know_28125 · 可以放幾天?
      問題
      可以放幾天?
      回答
      食用期限與保存建議: 請於收到後 3 日內食用完畢,才是最美味的黃金賞味期。 切勿冷凍保存:冷凍會破壞乳酪與新鮮水果的口感與品質,不建議使用。 所有水果皆經挑選與手工分切,無添加防腐劑或人工劑,因此若出現輕微氧化、褐變,屬於正常現象,請安心食用。 🌡 常溫注意事項: 建議不要將蛋糕放置於常溫超過 2 小時(炎熱天氣請縮短至 1 小時內)。 若需外出攜帶或長時間常溫擺放,建議加購保冷袋,並放入冰塊保冷,維持蛋糕口感品質。 💡 小秘訣: 蛋糕若退冰後,若回冰 2小時後再享用,風味更迷人!吃不完的蛋糕,記得放回冷藏唷!
    • ! know_28148 · 小編可以幫我訂嗎?
      問題
      小編可以幫我訂嗎?
      回答
      為了保障您的付款安全與個人資料,我們無法透過 LINE 接受訂單唷 🙇‍♀️ 我們希望每一筆訂單、每一顆蛋糕都能被好好對待與妥善照顧💛 您可以直接透過官網安心下單: 1.自由選擇蛋糕口味 2.指定您想要的取貨日期 3.選擇宅配 or 專櫃自取都沒問題!
    • ! know_28139 · 可以客製化嗎?
      問題
      可以客製化嗎?
      回答
      我們目前配合專用精裝盒規格,僅提供固定尺寸與樣式!沒有客製化唷~
    • ! know_28153 · 可以單獨買一小塊嗎?
      問題
      可以單獨買一小塊嗎?
      回答
      您好,沒有販售單獨一小塊,因為最小尺寸就是雙拼(2入)組合唷!
    • ! know_28152 · 乳糖不耐症 可以吃嗎?
      問題
      乳糖不耐症 可以吃嗎?
      回答
      您好,CheeseCake1 的蛋糕主要成分包含鮮奶油與乳酪,屬於乳製品甜點。 若您有乳糖不耐症,建議您依自身情況斟酌食用,避免身體不適。
    • ! know_28146 · 寶寶可以吃嗎?
      問題
      寶寶可以吃嗎?
      回答
      我們的蛋糕不含人工添加物,只要寶寶已具備良好吞嚥能力,適量食用是沒問題的唷!
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆中提到的大方形蛋糕尺寸為8吋,這一點在來源中有明確支持,因此該回覆的所有事實陳述均為有根據的。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 大方形蛋糕的尺寸為8吋(以斜對角計算)。如果您還有其他尺寸需求,歡迎再告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 大方形蛋糕的尺寸為 8 吋
    Judge 推理
    這個回答完全符合用戶的問題,提供了大方形蛋糕的正確尺寸,且沒有遺漏任何關鍵資訊。
  • 案例 D6F8AB2C

    怎麼查詢我的訂單明細?

    已完成
    第 1 次嘗試 · 已完成 41738ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER怎麼查詢我的訂單明細?
    BOT馬上為您找找看相關內容 📋 您好,我是 CheeseCake1 客服,很高興為您服務! 查詢訂單明細有兩種方式: 1. 如果您有加入官網會員,請直接登入官網後台查詢您的訂單資訊與配送進度: 👉 https://www.cheesecake1.com.tw/users/sign_in 2. 如果您沒有加入會員,也可以回到您下單時填寫的 Email 信箱,信件中會有完整的訂單明細可供查詢。 另外,若您想查詢配送狀態,到貨日前一晚 20:00 後,可以在訂單頁面點選「黑貓物流追蹤」查詢配送進度。 如有其他疑問,也歡迎隨時告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28154 · 怎麼查詢出貨了嗎?
      問題
      怎麼查詢出貨了嗎?
      回答
      若您有加入官網會員, 可以直接登入官網後台查詢訂單資訊與配送進度唷 💻 👉 https://www.cheesecake1.com.tw/users/sign_in 若您尚未加入會員, 也可以回到您訂購時填寫的 Email 信箱, 信件中會有完整的訂單明細可供查詢 📧 📦 提醒您: 到貨日前一晚 20:00(晚上 8 點)後, 即可於訂單頁面中點選「黑貓物流追蹤」查詢配送狀態。 若您對物流有任何進一步的疑問, 也可直接致電黑貓客服:02-412-8888
    意料之外 (9)
    • ! know_28126 · 如何更改訂單資訊?
      問題
      如何更改訂單資訊?
      回答
      麻煩您提供一下訂購人電話📞,客服這邊幫您查詢訂單狀況唷~💛
    • ! know_28132 · 我要取消訂單
      問題
      我要取消訂單
      回答
      好的,請提供訂購人電話或訂單編號 退款款項會退款至您的原付款方式,處理時間約為 7 ~10個工作日左右,以下是各付款方式的退款方式說明: 1.信用卡 / LINE Pay:將原卡退刷,款項會自動回到您的帳戶 2. 匯款 / 超商付款:將匯入您提供的指定帳戶,退款時會酌收 $30 元匯款手續費喔
    • ! know_28123 · 如何查詢當日現貨?
      問題
      如何查詢當日現貨?
      回答
      您可以直接到官網上→門市據點→各門市底下都有【查詢門市現貨/預約自取/外送】連結,可從上面查詢到當日門市現貨唷!
    • ! know_28143 · 請問可以更改付款方式嗎?
      問題
      請問可以更改付款方式嗎?
      回答
      您好,訂單未付款成功會自動取消,您可以重新下單就可以囉
    • ! know_28137 · 付款方式有哪些?
      問題
      付款方式有哪些?
      回答
      您可以使用以下多種方式輕鬆付款唷: ✔ 信用卡線上刷卡(支援 Visa / MasterCard / JCB) ✔ LINE Pay ✔ ATM 轉帳 ✔ 超商代碼繳費(7-11 / 全家 / OK / 萊爾富)
    • ! know_28119 · 如何訂購與付款?
      問題
      如何訂購與付款?
      回答
      您可以直接在官網下單,選擇「百貨專櫃自取」或「冷藏宅配」,並享有多元付款方式與彈性到貨日期選擇。 🔺實際到貨時間仍以您地址所屬區域的宅配業者配送狀況為準喔!
    • ! know_28138 · 請問可以外送嗎?
      問題
      請問可以外送嗎?
      回答
      可以哦!您可以直接到官網上→門市據點→各門市底下都有【查詢門市現貨/預約自取/外送】連結
    • ! know_28135 · 可以指定到貨時間嗎?
      問題
      可以指定到貨時間嗎?
      回答
      目前宅配服務尚無法指定到貨時段,配送時間都是依照當地黑貓司機路線安排為主唷! 若當天要查詢到貨時間需撥打黑貓客服02-4128888詢問,謝謝!
    • ! know_28147 · 會附上玫瑰花嗎?
      問題
      會附上玫瑰花嗎?
      回答
      我們所使用的玫瑰鮮花為可食用花材,但因產量易受天候與氣溫影響, 若當次品質不佳,將 暫停附上玫瑰裝飾,以確保整體體驗與安全。 為表歉意,我們將補償 NT$100 購物金,領取方式如下: 請洽客服,提供蛋糕盒內「說明小紙條」背面之領取代碼。 經核對無誤後,購物金將於 3–5 個工作日內匯入帳號。 請登入會員後前往「購物金專區」查詢。
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆內容完全符合來源資料,所有的事實陳述都有來源支持,因此沒有虛構的聲明。

    回答品質

    93.3%
    相關性
    100.0%
    完整性
    80.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 您好,我是 CheeseCake1 客服,很高興為您服務! 查詢訂單明細有兩種方式: 1. 如果您有加入官網會員,請直接登入官網後台查詢您的訂單資訊與配送進度: 👉 https://www.cheesecake1.com.tw/users/sign_in 2. 如果您沒有加入會員,也可以回到您下單時填寫的 Email 信箱,信件中會有完整的訂單明細可供查詢。 另外,若您想查詢配送狀態,到貨日前一晚 20:00 後,可以在訂單頁面點選「黑貓物流追蹤」查詢配送進度。 如有其他疑問,也歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 可以回到您訂購時填寫的 Email 信箱查詢訂單明細
    Judge 推理
    回覆內容針對查詢訂單明細的問題提供了完整的解答,並且涵蓋了核心要點。雖然提供了額外的查詢方式,但未違反任何規則。
  • 案例 A160FE56

    購買其他款蛋糕會附贈什麼配件?

    已完成
    第 1 次嘗試 · 已完成 37770ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER購買其他款蛋糕會附贈什麼配件?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 購買「遇見,最對味的另一半」(雙拼)系列蛋糕時,會附贈: - 品牌五入叉子組(適合二至四人分享) - 專屬精美品牌紙盒包裝 - 綁上品牌緞帶與提袋 - 外盒附有產品說明卡 購買其他任一款蛋糕(不含上述雙拼系列)則會附贈: - 一支大理石紋質感蛋糕鏟 - 專屬訂製品牌紙盒包裝 - 綁上品牌緞帶與提袋 - 外盒附上產品說明卡 - 蛋糕貼心附贈五人份叉盤組 如果您有特定想詢問的蛋糕款式,也歡迎告訴我,我可以幫您確認更詳細的配件內容!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28124 · 蛋糕有哪些配件呢?
      問題
      蛋糕有哪些配件呢?
      回答
      🎁 購買《遇見,最對味的另一半》(雙拼)系列蛋糕 凡購買此系列任一款蛋糕,即享以下專屬包裝與贈禮: 品牌五入叉子組(適合二至四人甜蜜分享) 專屬 精美品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附有 產品說明卡,細節體現心意 🎁 購買其他任一款蛋糕(不含上述系列) 即贈送: 一支 大理石紋質感蛋糕鏟(實用又具收藏價值) 專屬 訂製品牌紙盒 包裝 綁上品牌 緞帶與提袋 外盒附上 產品說明卡 蛋糕貼心附贈 五人份叉盤組,分享無負擔!
    意料之外 (9)
    • ! know_28120 · 乳酪蛋糕什麼時候會送到?
      問題
      乳酪蛋糕什麼時候會送到?
      回答
      我們採「接單現做」,確保每顆蛋糕都新鮮美味! 完成下單後約 3~5 個工作日內,就能收到精緻又新鮮的乳酪蛋糕。
    • ! know_28127 · 可以直接到桃園起司蛋糕壹廠購買嗎?
      問題
      可以直接到桃園起司蛋糕壹廠購買嗎?
      回答
      目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,所以建議訂好再前往取蛋糕~ 因應衛生考量,桃園起士蛋糕壹廠不提供現金交易僅提供刷卡唷~
    • ! know_28131 · 指定日期就能當天收到嗎?
      問題
      指定日期就能當天收到嗎?
      回答
      我們這邊都會準時出貨唷, 目前黑貓宅配整體狀況良好, 根據小編統計,當日準時送達率超過 99% , 絕大多數客人都能準時收到蛋糕! 不過實際配送仍會依照您所在地區的物流安排為主, 有時難免會遇到一些突發狀況~像是天氣不穩、交通壅塞, 甚至小編真的看過黑貓宅配車因違停被拖走的情況。 若您的蛋糕是要用來慶生或過節等重要時刻, 我們會強烈建議您提前一天到貨, 這樣能更安心準備、避免壓線風險。 若您對配送時間有進一步疑問, 也歡迎直接致電黑貓客服:02-412-8888 查詢狀況唷!
    • ! know_28141 · 蛋糕尺寸
      問題
      蛋糕尺寸
      回答
      ・🟠 圓形蛋糕為 6 吋 ・大 🟧 方形蛋糕為 8 吋(以斜對角計算) ・小 🟧+ 🟧 方形(雙拼)蛋糕為 4 吋
    • ! know_28148 · 小編可以幫我訂嗎?
      問題
      小編可以幫我訂嗎?
      回答
      為了保障您的付款安全與個人資料,我們無法透過 LINE 接受訂單唷 🙇‍♀️ 我們希望每一筆訂單、每一顆蛋糕都能被好好對待與妥善照顧💛 您可以直接透過官網安心下單: 1.自由選擇蛋糕口味 2.指定您想要的取貨日期 3.選擇宅配 or 專櫃自取都沒問題!
    • ! know_28156 · 慶生組合裡面有什麼
      問題
      慶生組合裡面有什麼
      回答
      Happy Birthday 立牌+金色質感蠟燭一支哦!
    • ! know_28147 · 會附上玫瑰花嗎?
      問題
      會附上玫瑰花嗎?
      回答
      我們所使用的玫瑰鮮花為可食用花材,但因產量易受天候與氣溫影響, 若當次品質不佳,將 暫停附上玫瑰裝飾,以確保整體體驗與安全。 為表歉意,我們將補償 NT$100 購物金,領取方式如下: 請洽客服,提供蛋糕盒內「說明小紙條」背面之領取代碼。 經核對無誤後,購物金將於 3–5 個工作日內匯入帳號。 請登入會員後前往「購物金專區」查詢。
    • ! know_28157 · 有推薦口味嗎?
      問題
      有推薦口味嗎?
      回答
      第一次購買推薦: 1. 四個女生的故事 2. 奢侈藍莓乳酪 3. 雙倍經典 - 特濃超越重乳酪
    • ! know_28125 · 可以放幾天?
      問題
      可以放幾天?
      回答
      食用期限與保存建議: 請於收到後 3 日內食用完畢,才是最美味的黃金賞味期。 切勿冷凍保存:冷凍會破壞乳酪與新鮮水果的口感與品質,不建議使用。 所有水果皆經挑選與手工分切,無添加防腐劑或人工劑,因此若出現輕微氧化、褐變,屬於正常現象,請安心食用。 🌡 常溫注意事項: 建議不要將蛋糕放置於常溫超過 2 小時(炎熱天氣請縮短至 1 小時內)。 若需外出攜帶或長時間常溫擺放,建議加購保冷袋,並放入冰塊保冷,維持蛋糕口感品質。 💡 小秘訣: 蛋糕若退冰後,若回冰 2小時後再享用,風味更迷人!吃不完的蛋糕,記得放回冷藏唷!
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆完全符合來源資料中的內容,所有提到的配件都能在來源中找到支持,因此沒有任何虛構的聲明。

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    90.0% · w 60%
    II 重要
    III 補充
    0.0% · w 10%
    • 分享無負擔
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 購買「遇見,最對味的另一半」(雙拼)系列蛋糕時,會附贈: - 品牌五入叉子組(適合二至四人分享) - 專屬精美品牌紙盒包裝 - 綁上品牌緞帶與提袋 - 外盒附有產品說明卡 購買其他任一款蛋糕(不含上述雙拼系列)則會附贈: - 一支大理石紋質感蛋糕鏟 - 專屬訂製品牌紙盒包裝 - 綁上品牌緞帶與提袋 - 外盒附上產品說明卡 - 蛋糕貼心附贈五人份叉盤組 如果您有特定想詢問的蛋糕款式,也歡迎告訴我,我可以幫您確認更詳細的配件內容!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 購買其他任一款蛋糕,即贈送一支大理石紋質感蛋糕鏟
    • 專屬訂製品牌紙盒包裝
    • 附贈五人份叉盤組
    III 補充說明 w 10%
    • 分享無負擔
    Judge 推理
    回覆內容針對用戶詢問的蛋糕配件做了詳細說明,涵蓋了所有必要的配件資訊,但缺少了補充的 CTA "分享無負擔",因此在完整性上稍有不足。
  • 案例 48AED420

    請問可以直接透過官網下單嗎?

    已完成
    第 1 次嘗試 · 已完成 32287ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER請問可以直接透過官網下單嗎?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 您可以直接透過官網安心下單,操作方式如下: - 自由選擇蛋糕口味 - 指定您想要的取貨日期 - 可選擇宅配或專櫃自取 下單網址: https://www.cheesecake1.com.tw/ 如果還有其他訂購相關問題,也歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28148 · 小編可以幫我訂嗎?
      問題
      小編可以幫我訂嗎?
      回答
      為了保障您的付款安全與個人資料,我們無法透過 LINE 接受訂單唷 🙇‍♀️ 我們希望每一筆訂單、每一顆蛋糕都能被好好對待與妥善照顧💛 您可以直接透過官網安心下單: 1.自由選擇蛋糕口味 2.指定您想要的取貨日期 3.選擇宅配 or 專櫃自取都沒問題!
    意料之外 (9)
    • ! know_28138 · 請問可以外送嗎?
      問題
      請問可以外送嗎?
      回答
      可以哦!您可以直接到官網上→門市據點→各門市底下都有【查詢門市現貨/預約自取/外送】連結
    • ! know_28119 · 如何訂購與付款?
      問題
      如何訂購與付款?
      回答
      您可以直接在官網下單,選擇「百貨專櫃自取」或「冷藏宅配」,並享有多元付款方式與彈性到貨日期選擇。 🔺實際到貨時間仍以您地址所屬區域的宅配業者配送狀況為準喔!
    • ! know_28143 · 請問可以更改付款方式嗎?
      問題
      請問可以更改付款方式嗎?
      回答
      您好,訂單未付款成功會自動取消,您可以重新下單就可以囉
    • ! know_28127 · 可以直接到桃園起司蛋糕壹廠購買嗎?
      問題
      可以直接到桃園起司蛋糕壹廠購買嗎?
      回答
      目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,所以建議訂好再前往取蛋糕~ 因應衛生考量,桃園起士蛋糕壹廠不提供現金交易僅提供刷卡唷~
    • ! know_28123 · 如何查詢當日現貨?
      問題
      如何查詢當日現貨?
      回答
      您可以直接到官網上→門市據點→各門市底下都有【查詢門市現貨/預約自取/外送】連結,可從上面查詢到當日門市現貨唷!
    • ! know_28122 · 門市註冊會員,要怎麼登入官網
      問題
      門市註冊會員,要怎麼登入官網
      回答
      1️⃣ 選好商品 → 點選「購物車」→ 按「會員登入」 2️⃣ 點「忘記密碼」→ 輸入手機號碼 → 收簡訊輸入驗證碼 3️⃣ 設定新密碼 → 輸入 email 完成重設 ✅ 從此之後登入就能自動累計會員消費啦!
    • ! know_28154 · 怎麼查詢出貨了嗎?
      問題
      怎麼查詢出貨了嗎?
      回答
      若您有加入官網會員, 可以直接登入官網後台查詢訂單資訊與配送進度唷 💻 👉 https://www.cheesecake1.com.tw/users/sign_in 若您尚未加入會員, 也可以回到您訂購時填寫的 Email 信箱, 信件中會有完整的訂單明細可供查詢 📧 📦 提醒您: 到貨日前一晚 20:00(晚上 8 點)後, 即可於訂單頁面中點選「黑貓物流追蹤」查詢配送狀態。 若您對物流有任何進一步的疑問, 也可直接致電黑貓客服:02-412-8888
    • ! know_28155 · 如何加入會員 ?
      問題
      如何加入會員 ?
      回答
      請點擊官網右上角人物符號加入會員,支援FB、LINE管道註冊~
    • ! know_28144 · 有附蠟燭嗎?
      問題
      有附蠟燭嗎?
      回答
      您好,蠟燭都需要加購唷!您可以到官網「重要時刻加購區」加購唷~謝謝
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆完全符合來源資料,並且所有的事實陳述都有來源支持,因此沒有任何虛構的聲明。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 您可以直接透過官網安心下單,操作方式如下: - 自由選擇蛋糕口味 - 指定您想要的取貨日期 - 可選擇宅配或專櫃自取 下單網址: https://www.cheesecake1.com.tw/ 如果還有其他訂購相關問題,也歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 可以直接透過官網安心下單
    • 自由選擇蛋糕口味
    • 指定您想要的取貨日期
    • 選擇宅配或專櫃自取都沒問題
    Judge 推理
    這個回答完全符合用戶的問題,並且涵蓋了所有關鍵點,提供了詳細的下單步驟和網址,且沒有任何錯誤的陳述。
  • 案例 DBED4150

    桃園取貨時間是什麼時候?

    已完成
    第 1 次嘗試 · 已完成 35619ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER桃園取貨時間是什麼時候?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 桃園起司蛋糕壹廠的取貨時間為:週一至週五 09:30 – 17:30,六日不開放取貨。如果您需要預約取貨,可以在官網上選擇日期,桃園地點可預訂 60 天內的取貨。 如需更詳細的安排或有特殊需求,也歡迎您聯繫客服協助安排。

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28130 · 請問桃園六日可以取貨嗎?
      問題
      請問桃園六日可以取貨嗎?
      回答
      桃園取貨時間: 週一至週五|09:30 – 17:30(六日不開放)
    意料之外 (9)
    • ! know_28121 · 配送與取貨地點怎麼安排?
      問題
      配送與取貨地點怎麼安排?
      回答
      黑貓宅配|可預訂 60 天內的日期(黑貓週日/週一不配送,建議選擇提前一天或改至櫃位自取) 台北信義門市(新光A4)|可預訂 60 天內的取貨 台中歌劇院門市|可預訂 30 天內的取貨 桃園起司蛋糕壹廠|可預訂 60 天內的取貨 若您有超過上述時間的預約需求,歡迎私訊客服為您安排
    • ! know_28127 · 可以直接到桃園起司蛋糕壹廠購買嗎?
      問題
      可以直接到桃園起司蛋糕壹廠購買嗎?
      回答
      目前僅提供官網預約自取,現場有少量現貨但沒有展示蛋糕,所以建議訂好再前往取蛋糕~ 因應衛生考量,桃園起士蛋糕壹廠不提供現金交易僅提供刷卡唷~
    • ! know_28135 · 可以指定到貨時間嗎?
      問題
      可以指定到貨時間嗎?
      回答
      目前宅配服務尚無法指定到貨時段,配送時間都是依照當地黑貓司機路線安排為主唷! 若當天要查詢到貨時間需撥打黑貓客服02-4128888詢問,謝謝!
    • ! know_28151 · 門市資訊
      問題
      門市資訊
      回答
      📍 CheeseCake1|台北信義新光三越 A4 館 B2 專櫃 🧀 地址|台北市信義區松高路 19 號 B2(新光三越 A4 館) 📞 電話|02-7723-1095 # 13 📍 CheeseCake1|台中歌劇院門市 🧀 地址|台中市西屯區市政北二路 57 號 (聯聚仁愛大樓,台中歌劇院斜對面) 📞 電話|(02) 7723-1095 分機 14 📍 桃園起司蛋糕壹廠 取貨資訊 🏠 地址|桃園市中壢區中園路 168-1 號 3 樓 📞 電話|(02) 7723-1095 分機 9
    • ! know_28131 · 指定日期就能當天收到嗎?
      問題
      指定日期就能當天收到嗎?
      回答
      我們這邊都會準時出貨唷, 目前黑貓宅配整體狀況良好, 根據小編統計,當日準時送達率超過 99% , 絕大多數客人都能準時收到蛋糕! 不過實際配送仍會依照您所在地區的物流安排為主, 有時難免會遇到一些突發狀況~像是天氣不穩、交通壅塞, 甚至小編真的看過黑貓宅配車因違停被拖走的情況。 若您的蛋糕是要用來慶生或過節等重要時刻, 我們會強烈建議您提前一天到貨, 這樣能更安心準備、避免壓線風險。 若您對配送時間有進一步疑問, 也歡迎直接致電黑貓客服:02-412-8888 查詢狀況唷!
    • ! know_28148 · 小編可以幫我訂嗎?
      問題
      小編可以幫我訂嗎?
      回答
      為了保障您的付款安全與個人資料,我們無法透過 LINE 接受訂單唷 🙇‍♀️ 我們希望每一筆訂單、每一顆蛋糕都能被好好對待與妥善照顧💛 您可以直接透過官網安心下單: 1.自由選擇蛋糕口味 2.指定您想要的取貨日期 3.選擇宅配 or 專櫃自取都沒問題!
    • ! know_28132 · 我要取消訂單
      問題
      我要取消訂單
      回答
      好的,請提供訂購人電話或訂單編號 退款款項會退款至您的原付款方式,處理時間約為 7 ~10個工作日左右,以下是各付款方式的退款方式說明: 1.信用卡 / LINE Pay:將原卡退刷,款項會自動回到您的帳戶 2. 匯款 / 超商付款:將匯入您提供的指定帳戶,退款時會酌收 $30 元匯款手續費喔
    • ! know_28125 · 可以放幾天?
      問題
      可以放幾天?
      回答
      食用期限與保存建議: 請於收到後 3 日內食用完畢,才是最美味的黃金賞味期。 切勿冷凍保存:冷凍會破壞乳酪與新鮮水果的口感與品質,不建議使用。 所有水果皆經挑選與手工分切,無添加防腐劑或人工劑,因此若出現輕微氧化、褐變,屬於正常現象,請安心食用。 🌡 常溫注意事項: 建議不要將蛋糕放置於常溫超過 2 小時(炎熱天氣請縮短至 1 小時內)。 若需外出攜帶或長時間常溫擺放,建議加購保冷袋,並放入冰塊保冷,維持蛋糕口感品質。 💡 小秘訣: 蛋糕若退冰後,若回冰 2小時後再享用,風味更迷人!吃不完的蛋糕,記得放回冷藏唷!
    • ! know_28123 · 如何查詢當日現貨?
      問題
      如何查詢當日現貨?
      回答
      您可以直接到官網上→門市據點→各門市底下都有【查詢門市現貨/預約自取/外送】連結,可從上面查詢到當日門市現貨唷!
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆完全符合來源資料,取貨時間和預約資訊均有明確的支持,沒有任何虛構的內容。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 CheeseCake1 客服,很高興為您服務! 桃園起司蛋糕壹廠的取貨時間為:週一至週五 09:30 – 17:30,六日不開放取貨。如果您需要預約取貨,可以在官網上選擇日期,桃園地點可預訂 60 天內的取貨。 如需更詳細的安排或有特殊需求,也歡迎您聯繫客服協助安排。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 桃園取貨時間為週一至週五,09:30 – 17:30
    • 六日不開放
    Judge 推理
    回覆完整地提供了桃園取貨時間的資訊,並且沒有錯誤的陳述,符合用戶的查詢需求。
  • 案例 20C3DAF5

    外島可以配送嗎?

    已完成
    第 1 次嘗試 · 已完成 32294ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER外島可以配送嗎?
    BOT稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 目前我們的配送範圍為全台本島,以及外島的小琉球。其他外島地區暫時無法配送,敬請見諒。如有其他配送需求或疑問,歡迎隨時告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_28149 · 外島有配送嗎?
      問題
      外島有配送嗎?
      回答
      全台本島皆可配送,外島只有小琉球唷
    意料之外 (9)
    • ! know_28134 · 颱風天會配送嗎?
      問題
      颱風天會配送嗎?
      回答
      若您所在地區因天候影響而公告停班停課,為保障配送人員安全, 訂單將會自動順延至下一個工作日配送,還請您多加留意當地狀況唷。 感謝您的體諒與支持 !
    • ! know_28136 · 週日可以宅配嗎?
      問題
      週日可以宅配嗎?
      回答
      不好意思~ 目前我們週日與週一暫無提供宅配服務唷! (黑貓冷藏配送為週二至週六)
    • ! know_28119 · 如何訂購與付款?
      問題
      如何訂購與付款?
      回答
      您可以直接在官網下單,選擇「百貨專櫃自取」或「冷藏宅配」,並享有多元付款方式與彈性到貨日期選擇。 🔺實際到貨時間仍以您地址所屬區域的宅配業者配送狀況為準喔!
    • ! know_28121 · 配送與取貨地點怎麼安排?
      問題
      配送與取貨地點怎麼安排?
      回答
      黑貓宅配|可預訂 60 天內的日期(黑貓週日/週一不配送,建議選擇提前一天或改至櫃位自取) 台北信義門市(新光A4)|可預訂 60 天內的取貨 台中歌劇院門市|可預訂 30 天內的取貨 桃園起司蛋糕壹廠|可預訂 60 天內的取貨 若您有超過上述時間的預約需求,歡迎私訊客服為您安排
    • ! know_28154 · 怎麼查詢出貨了嗎?
      問題
      怎麼查詢出貨了嗎?
      回答
      若您有加入官網會員, 可以直接登入官網後台查詢訂單資訊與配送進度唷 💻 👉 https://www.cheesecake1.com.tw/users/sign_in 若您尚未加入會員, 也可以回到您訂購時填寫的 Email 信箱, 信件中會有完整的訂單明細可供查詢 📧 📦 提醒您: 到貨日前一晚 20:00(晚上 8 點)後, 即可於訂單頁面中點選「黑貓物流追蹤」查詢配送狀態。 若您對物流有任何進一步的疑問, 也可直接致電黑貓客服:02-412-8888
    • ! know_28131 · 指定日期就能當天收到嗎?
      問題
      指定日期就能當天收到嗎?
      回答
      我們這邊都會準時出貨唷, 目前黑貓宅配整體狀況良好, 根據小編統計,當日準時送達率超過 99% , 絕大多數客人都能準時收到蛋糕! 不過實際配送仍會依照您所在地區的物流安排為主, 有時難免會遇到一些突發狀況~像是天氣不穩、交通壅塞, 甚至小編真的看過黑貓宅配車因違停被拖走的情況。 若您的蛋糕是要用來慶生或過節等重要時刻, 我們會強烈建議您提前一天到貨, 這樣能更安心準備、避免壓線風險。 若您對配送時間有進一步疑問, 也歡迎直接致電黑貓客服:02-412-8888 查詢狀況唷!
    • ! know_28135 · 可以指定到貨時間嗎?
      問題
      可以指定到貨時間嗎?
      回答
      目前宅配服務尚無法指定到貨時段,配送時間都是依照當地黑貓司機路線安排為主唷! 若當天要查詢到貨時間需撥打黑貓客服02-4128888詢問,謝謝!
    • ! know_28138 · 請問可以外送嗎?
      問題
      請問可以外送嗎?
      回答
      可以哦!您可以直接到官網上→門市據點→各門市底下都有【查詢門市現貨/預約自取/外送】連結
    • ! know_28140 · 可以請Lalamove取嗎?
      問題
      可以請Lalamove取嗎?
      回答
      當然可以唷!我們櫃上夥伴會與外送夥伴核對訂購人及收件人資訊唷^^
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆完全符合來源資料,提到的配送範圍和外島配送的限制都有來源支持,因此沒有虛構的聲明。

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    90.0% · w 60%
    • 外島只有小琉球可配送
    II 重要
    III 補充
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是 CheeseCake1 客服,很高興為您服務! 目前我們的配送範圍為全台本島,以及外島的小琉球。其他外島地區暫時無法配送,敬請見諒。如有其他配送需求或疑問,歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 全台本島皆可配送
    • 外島只有小琉球可配送
    Judge 推理
    這個回答針對用戶的問題提供了相關資訊,並且在正確性上沒有問題。不過,回答中提到的配送範圍有一點不完整,未明確指出外島只有小琉球可配送,因此在完整性上稍有扣分。