產出 #521
env=production · 寶雅 (c009b19a-a14c-4a52-b447-993acaa08a10) · eval_kind=scenario_funnel
已完成
10 / 10
10
1 / 2
$0.0163
↑121082 / ↓4396
MISSED
1 個 scenario 未被任何 case 涵蓋:
5890。可以重新派發、增加 N 來補。
SUITE
✅ 已寫入 EvalSuite auto-c009b19a-r1-054000061。
案例明細(23 筆 — 含已寫入、被拒、retry 軌跡)
-
語氣不像真人 chat(被 Stage E 拒絕) scenario_focused來源素材(點擊查看完整內容)
-
• 對話流程:知識與產品查詢 5891
知識與產品查詢 ## 1. 觸發條件 - 當用戶提出問題或查詢需求時觸發 統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊 ## 2. 資訊收集 ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數 - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content) - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none ## 3. API 工具 1. search_unified — 進階統一搜尋:跨知識庫、產品與連結資料,支援自適應三通道重排序 ## 4. 回覆規則 - 資訊類問題 → 僅回答知識內容,不主動推薦產品 - 用戶明確要求推薦時 → 僅提供名稱、價格、特色
Q那你們可以告訴我關於你們的產品有哪些資訊嗎A我們提供的產品資訊和知識查詢可以回答各種問題,但不會主動推薦產品。如果你有具體的查詢內容,可以告訴我。原因- chat-realism: formal_chinese (The phrase '關於你們的產品有哪些資訊' uses a formal construction that a real customer wouldn't typically use in chat.)
-
-
已寫入 EvalSuite scenario_focused 第 2 次嘗試來源素材(點擊查看完整內容)
-
• 對話流程:知識與產品查詢 5891
知識與產品查詢 ## 1. 觸發條件 - 當用戶提出問題或查詢需求時觸發 統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊 ## 2. 資訊收集 ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數 - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content) - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none ## 3. API 工具 1. search_unified — 進階統一搜尋:跨知識庫、產品與連結資料,支援自適應三通道重排序 ## 4. 回覆規則 - 資訊類問題 → 僅回答知識內容,不主動推薦產品 - 用戶明確要求推薦時 → 僅提供名稱、價格、特色
Q你們的系統是怎麼處理知識查詢的?A對於資訊類問題,系統僅回答知識內容,不會主動推薦產品。 -
-
已寫入 EvalSuite scenario_focused來源素材(點擊查看完整內容)
-
• 對話流程:知識與產品查詢 5891
知識與產品查詢 ## 1. 觸發條件 - 當用戶提出問題或查詢需求時觸發 統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊 ## 2. 資訊收集 ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數 - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content) - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none ## 3. API 工具 1. search_unified — 進階統一搜尋:跨知識庫、產品與連結資料,支援自適應三通道重排序 ## 4. 回覆規則 - 資訊類問題 → 僅回答知識內容,不主動推薦產品 - 用戶明確要求推薦時 → 僅提供名稱、價格、特色
Q你們的產品推薦是什麼?A當用戶明確要求推薦時,我們會提供產品名稱、價格和特色。你有特定的產品或需求嗎? -