執行 #215

Service Client Intelligent - Rhino (bulk R1) → production-baseline

狀態
已完成
案例
28
開始時間
16 May 12:22
耗時
507.5s
¶ Economics · Bot-side N=28 attempts

Cost & Tokens

$0.2403
Total Bot Cost · USD
59.4%
Prompt Cache Hit
cost per case
$0.0086
cost per 1k tokens
$0.0013
input tokens
182,105
output tokens
4,787
cached tokens — prompt-cache hit
108,160
Total Tokens
186,892
economic efficiency
cost per correct
$0.0013
pass rate
67.9%
19 / 28
judge cost
$0.0249
設定快照(reproducibility) 1 個 bot 已捕捉 · Judge:gpt-4o-mini

Bot 設定快照

  • e2abf68d-eac9-40ab-9535-1b538aaf95ed 338 筆 KB
    SystemPrompt: sha256:b57994de KBContent: sha256:2822837e Tools: sha256:4a6a05b0 Scenarios: sha256:526e5110 AI: gpt-4.1-2025-04-14 (T=0.0, max=2048)

Judge 設定快照

model: gpt-4o-mini T=0.0 max=4096 prompt: v1
已完成
28 / 28
錯誤
0
失敗維度
5
首字延遲 p95
6669 ms
Bot 成本(Neptune)
$0.2403
Bot Tokens(Neptune)
186,892
Judge 成本(Eris)
$0.0249
Judge Tokens(Eris)
189,472
項目 I.

知識庫精準度

kb_accuracy 10 cases

維度總表

各維度品質分 · 覆蓋率
找對資料 召回
retrieval
80.0%
[50.0% – 100.0%] · n=10
F1 26.7% · 相關率 17.1% · 精確 36.0%
10 / 10 適用 · 5 提示
不亂編造 平均
faithfulness
93.8%
[81.3% – 100.0%] · n=8
10 / 10 適用
答得到位 平均
answer_quality
85.0%
[70.0% – 97.3%] · n=10
10 / 10 適用
  • 案例 A0283982

    Janice Sung 的作品主題是什麼?

    已完成
    第 1 次嘗試 · 已完成 3285ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ✗ 已呼叫 0 / 2 個工具
    未呼叫:search_knowledges、search_products
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USERJanice Sung 的作品主題是什麼?
    BOT能否請您再說明一下具體的問題?這樣我可以為您提供更準確的回答。

    產品檢索

    0.0%
    Precision
    Recall
    0.0%
    F1
    0.0%
    預期 (1)
    • prod_978571
    TP 0
    FP 0
    FN 1

    回答品質

    56.7%
    相關性
    50.0%
    完整性
    30.0%
    正確性
    90.0%
    加權拆解 · 三層 coverage
    I 核心
    0.0% · w 60%
    • Janice Sung 的作品以女性與自然元素交織的幻想畫作為主題
    II 重要
    III 補充
    AI 回覆
    能否請您再說明一下具體的問題?這樣我可以為您提供更準確的回答。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Janice Sung 的作品以女性與自然元素交織的幻想畫作為主題
    Judge 推理
    這個回答未能直接回答使用者的問題,反而要求進一步的說明,導致相關性和完整性得分較低。雖然沒有錯誤的事實陳述,但未能提供所需的具體資訊。
  • 案例 59105728

    One Piece 手機殼是跟誰合作推出的?

    已完成
    第 1 次嘗試 · 已完成 16806ms
    腳本進度 · 知識與產品查詢 ◐ 進行中
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ◐ 已呼叫 1 / 2 個工具
    已呼叫:search_knowledges 未呼叫:search_products
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges
    USEROne Piece 手機殼是跟誰合作推出的?
    BOT讓我幫您查詢一下相關資訊 🔍 目前沒有查到關於 One Piece 手機殼合作對象的相關資訊。如果您需要更詳細的合作品牌或授權資訊,建議您聯繫專人客服協助確認。 請你完整填寫以下客服表單,我們的客服團隊會根據你提供的資訊快速於服務時間內協助你: https://url.rhinoshield.fr/fr-chatbot 感謝你的配合!

    產品檢索

    0.0%
    Precision
    Recall
    0.0%
    F1
    0.0%
    預期 (1)
    • prod_978680
    TP 0
    FP 0
    FN 1

    回答品質

    26.7%
    相關性
    50.0%
    完整性
    30.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    0.0% · w 60%
    • One Piece 手機殼是與 RHINOSHIELD 合作推出的
    II 重要
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 目前沒有查到關於 One Piece 手機殼合作對象的相關資訊。如果您需要更詳細的合作品牌或授權資訊,建議您聯繫專人客服協助確認。 請你完整填寫以下客服表單,我們的客服團隊會根據你提供的資訊快速於服務時間內協助你: https://url.rhinoshield.fr/fr-chatbot 感謝你的配合!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • One Piece 手機殼是與 RHINOSHIELD 合作推出的
    Judge 推理
    回覆未能提供正確的合作品牌資訊,且未回答用戶的問題,導致相關性和完整性得分偏低。
  • 案例 C8D05B58

    SKY STORY 的手機殼適用於什麼手機?

    已完成
    第 1 次嘗試 · 已完成 24880ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_knowledges、search_products
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges → search_products
    USERSKY STORY 的手機殼適用於什麼手機?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! 根據目前查詢結果,SKY STORY 的手機殼適用於 iPhone 和 Android 手機,但沒有提供更詳細的支援型號清單。如果您需要確認是否支援您的特定手機型號,建議您可以直接到以下連結查看商品詳情: SKY STORY 手機殼商品頁: https://rhinoshield.fr/design-studio/collections/suda-kana 如需更精確的型號資訊,也歡迎告訴我您的手機型號,我可以再協助您查詢!

    產品檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • prod_978666
    意料之外 (4)
    • ! prod_978636
    • ! prod_978720
    • ! prod_978546
    • ! prod_978665
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    0.0%
    越高越好
    Judge 推理
    AI 的回覆中提到 SKY STORY 的手機殼適用於 iPhone 和 Android 手機,但來源中並未提供任何具體的手機型號或適用性資訊,因此無法確認這些聲明的真實性。由於來源資料與用戶查詢無關,回覆的內容無法被支持。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! 根據目前查詢結果,SKY STORY 的手機殼適用於 iPhone 和 Android 手機,但沒有提供更詳細的支援型號清單。如果您需要確認是否支援您的特定手機型號,建議您可以直接到以下連結查看商品詳情: SKY STORY 手機殼商品頁: https://rhinoshield.fr/design-studio/collections/suda-kana 如需更精確的型號資訊,也歡迎告訴我您的手機型號,我可以再協助您查詢!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • SKY STORY 的手機殼適用於 iPhone 和 Android 手機
    Judge 推理
    這個回答完全符合用戶的問題,提供了SKY STORY手機殼適用的手機類型,並且沒有錯誤的陳述。回覆也包含了額外的查詢選項,顯示出良好的服務態度。
  • 案例 B6F6BEF2

    CircularBlue配備了什麼技術來檢測海洋垃圾?

    已完成
    第 1 次嘗試 · 已完成 27247ms
    腳本進度 · 知識與產品查詢 ◐ 進行中
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ◐ 已呼叫 1 / 2 個工具
    已呼叫:search_knowledges 未呼叫:search_products
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges
    USERCircularBlue配備了什麼技術來檢測海洋垃圾?
    BOT正在為您搜尋最新資料 ⏳ CircularBlue 配備了多項先進技術來檢測與回收海洋垃圾,包括: - 太陽能供電系統:利用屋頂太陽能板,確保平台全天候自給自足運作。 - 智慧AI偵測網路:AI 無人機進行空中巡邏,精準偵測並定位海洋垃圾。 - 自動化回收系統:水面船隻根據指令自動導航,精確回收垃圾。 - 多功能作業平台:中央甲板整合水質監控、維護與人員操作。 - 海洋實驗室:內建儀器持續監控水質變化與生態健康。 - 穩定模組結構:六柱設計,提升平台在各種海況下的穩定性與耐候性。 此外,CircularBlue 採用伯努力原理,透過底部噴射系統創造水流速度差異,產生壓力差,自動將垃圾推送至收集袋。這種設計兼顧能源效率、生態友善與高度自動化。 詳細介紹可參考: CircularBlue 專案說明:https://rhinoshield.fr/sustainability/rhino-stories/circularblue-introduction 伯努力原理應用:https://rhinoshield.fr/sustainability/rhino-stories/circularblue-bernoulli-principle

    知識檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • know_368060
    意料之外 (4)
    • ! know_368058
    • ! know_368059
    • ! know_368063
    • ! know_368054
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆內容完全符合來源資料,所有提到的技術和原理都有來源支持,因此沒有虛構的聲明。

    回答品質

    83.3%
    相關性
    100.0%
    完整性
    50.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 能夠精確識別海洋垃圾
    II 重要
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ CircularBlue 配備了多項先進技術來檢測與回收海洋垃圾,包括: - 太陽能供電系統:利用屋頂太陽能板,確保平台全天候自給自足運作。 - 智慧AI偵測網路:AI 無人機進行空中巡邏,精準偵測並定位海洋垃圾。 - 自動化回收系統:水面船隻根據指令自動導航,精確回收垃圾。 - 多功能作業平台:中央甲板整合水質監控、維護與人員操作。 - 海洋實驗室:內建儀器持續監控水質變化與生態健康。 - 穩定模組結構:六柱設計,提升平台在各種海況下的穩定性與耐候性。 此外,CircularBlue 採用伯努力原理,透過底部噴射系統創造水流速度差異,產生壓力差,自動將垃圾推送至收集袋。這種設計兼顧能源效率、生態友善與高度自動化。 詳細介紹可參考: CircularBlue 專案說明:https://rhinoshield.fr/sustainability/rhino-stories/circularblue-introduction 伯努力原理應用:https://rhinoshield.fr/sustainability/rhino-stories/circularblue-bernoulli-principle
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • CircularBlue配備了智能AI檢測網絡
    • 能夠精確識別海洋垃圾
    Judge 推理
    回覆中提到CircularBlue的多項技術,但未明確指出其能夠精確識別海洋垃圾,導致完整性不足。
  • 案例 3335FEB0

    6:Siege 是什麼產品?

    已完成
    第 1 次嘗試 · 已完成 24680ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_knowledges、search_products
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges → search_products
    USER6:Siege 是什麼產品?
    BOT馬上為您找找看相關內容 📋 6:Siege 是 RHINOSHIELD 與 Ubisoft 合作推出的官方聯名手機殼系列,主題來自知名遊戲《Rainbow Six: Siege》。這款系列專為遊戲迷設計,將遊戲元素融入手機殼設計中,兼具保護力與收藏價值。 商品詳情與購買請參考: 6:Siege 官方聯名手機殼系列 https://rhinoshield.fr/design-studio/collections/rainbow-six-siege 如需了解更多細節或有其他需求,歡迎隨時告訴我!

    產品檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • prod_978518
    意料之外 (4)
    • ! prod_978733
    • ! prod_978506
    • ! prod_978689
    • ! prod_978714
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆中提到的 6:Siege 產品資訊完全來自於來源資料,並且沒有任何虛構的內容,因此所有的事實陳述都是有根據的。

    回答品質

    93.3%
    相關性
    100.0%
    完整性
    80.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 專注於遊戲的世界
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 6:Siege 是 RHINOSHIELD 與 Ubisoft 合作推出的官方聯名手機殼系列,主題來自知名遊戲《Rainbow Six: Siege》。這款系列專為遊戲迷設計,將遊戲元素融入手機殼設計中,兼具保護力與收藏價值。 商品詳情與購買請參考: 6:Siege 官方聯名手機殼系列 https://rhinoshield.fr/design-studio/collections/rainbow-six-siege 如需了解更多細節或有其他需求,歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Siege 是與 Ubisoft 合作的官方產品系列
    • 專注於遊戲的世界
    Judge 推理
    回覆中提到6:Siege是與Ubisoft合作的手機殼系列,並且強調了其設計與遊戲元素的結合,但未明確提到專注於遊戲的世界,因此在完整性上有所缺失。
  • 案例 745A5273

    Antique Housing Art 手機保護殼是什麼?

    已完成
    第 1 次嘗試 · 已完成 22286ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_knowledges、search_products
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges → search_products
    USERAntique Housing Art 手機保護殼是什麼?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! Antique Housing Art 手機保護殼是 RHINOSHIELD 與「Old House Face」工作室合作推出的設計款手機殼。這個系列以台灣各地的建築元素為靈感,將馬賽克、磁磚、玻璃等老屋特色融入設計,讓您在保護手機的同時,也能感受到台灣建築文化的故事與美感。 商品介紹與購買資訊請參考: Antique Housing Art 手機保護殼 https://rhinoshield.fr/design-studio/collections/oldhouseface 如需了解更多細節或有其他需求,歡迎隨時告訴我!

    產品檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • prod_978679
    意料之外 (4)
    • ! prod_978727
    • ! prod_978578
    • ! prod_978726
    • ! prod_978673
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆完全基於來源資料,所有的事實陳述都有相應的支持,因此沒有虛構的內容。回覆中的每個事實陳述都可以引用來源,符合來源的內容。

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    90.0% · w 60%
    • 屬於 Old House Face 系列
    II 重要
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! Antique Housing Art 手機保護殼是 RHINOSHIELD 與「Old House Face」工作室合作推出的設計款手機殼。這個系列以台灣各地的建築元素為靈感,將馬賽克、磁磚、玻璃等老屋特色融入設計,讓您在保護手機的同時,也能感受到台灣建築文化的故事與美感。 商品介紹與購買資訊請參考: Antique Housing Art 手機保護殼 https://rhinoshield.fr/design-studio/collections/oldhouseface 如需了解更多細節或有其他需求,歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Antique Housing Art 是一款手機保護殼
    • 屬於 Old House Face 系列
    • 設計靈感來自於台灣的建築藝術
    Judge 推理
    這個回答針對用戶的問題提供了詳細的資訊,並且正確描述了產品的設計靈感和背景。不過,雖然提到了系列名稱,但沒有明確指出它屬於 Old House Face 系列,因此在完整性上略有不足。
  • 案例 7C54E0C6

    RHINOSHIELD RhinoBuff 外殼有含 BPA 嗎?

    已完成
    第 1 次嘗試 · 已完成 10699ms
    腳本進度 · 知識與產品查詢 ◐ 進行中
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ◐ 已呼叫 1 / 2 個工具
    已呼叫:search_knowledges 未呼叫:search_products
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges
    USERRHINOSHIELD RhinoBuff 外殼有含 BPA 嗎?
    BOT馬上為您找找看相關內容 📋 RHINOSHIELD RhinoBuff 外殼不含 BPA、BPF 或 BPS,請您安心使用。如有其他疑問歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • know_367824
    意料之外 (4)
    • ! know_367817
    • ! know_368042
    • ! know_367823
    • ! know_368033
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆中提到 RHINOSHIELD RhinoBuff 外殼不含 BPA、BPF 或 BPS,這一點在來源中得到了支持,因此該回覆的所有事實聲明都是有根據的。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 RHINOSHIELD RhinoBuff 外殼不含 BPA、BPF 或 BPS,請您安心使用。如有其他疑問歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • RHINOSHIELD RhinoBuff 外殼不含任何 BPA/BPF/BPS
    • 您的健康與安全是我們的首要考量
    Judge 推理
    這個回答完全符合用戶的問題,並且提供了正確且完整的資訊,強調了產品不含 BPA/BPF/BPS,並且提到健康與安全是首要考量。
  • 案例 C793BBD8

    Le Tour de France 手機殼有什麼樣的設計?

    已完成
    第 1 次嘗試 · 已完成 25701ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_knowledges、search_products
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges → search_products
    USERLe Tour de France 手機殼有什麼樣的設計?
    BOT稍等一下我來幫您查詢 💡 RHINOSHIELD Le Tour de France 系列手機殼擁有多款設計,靈感來自經典賽事的標誌元素,包括法國經典風景、黃衫(maillot jaune)以及官方授權的圖案。這些設計不僅展現自行車賽的精神,也結合了RHINOSHIELD高規格防護力,適用於多款 iPhone、Samsung、Google Pixel、Xiaomi 及 ASUS Zenfone 機型,還有 AirPods 與 GRIP O 配件。 您可以在這裡瀏覽所有 Le Tour de France 官方授權設計與支援機型: Le Tour de France: https://rhinoshield.fr/design-studio/collections/tour-de-france 如果您有特定手機型號或想了解某一款設計,歡迎告訴我,我可以幫您查詢更詳細的資訊!

    產品檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • prod_978585
    意料之外 (4)
    • ! prod_978553
    • ! prod_978523
    • ! prod_978615
    • ! prod_978517
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到的設計元素和產品特性均有來源支持,因此沒有虛構的聲明。所有的事實陳述都能夠找到相應的來源,並且符合查詢的主題。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    稍等一下我來幫您查詢 💡 RHINOSHIELD Le Tour de France 系列手機殼擁有多款設計,靈感來自經典賽事的標誌元素,包括法國經典風景、黃衫(maillot jaune)以及官方授權的圖案。這些設計不僅展現自行車賽的精神,也結合了RHINOSHIELD高規格防護力,適用於多款 iPhone、Samsung、Google Pixel、Xiaomi 及 ASUS Zenfone 機型,還有 AirPods 與 GRIP O 配件。 您可以在這裡瀏覽所有 Le Tour de France 官方授權設計與支援機型: Le Tour de France: https://rhinoshield.fr/design-studio/collections/tour-de-france 如果您有特定手機型號或想了解某一款設計,歡迎告訴我,我可以幫您查詢更詳細的資訊!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Le Tour de France 提供多種設計靈感來自標誌性風景、黃衫以及官方的 Tour 問題
    • 可以選擇適合 iPhone、Android 和 AirPods 的款式
    Judge 推理
    這個回答完全符合用戶的查詢,詳細描述了 Le Tour de France 手機殼的設計靈感和適用機型,並且提供了額外的查詢選項,顯示出完整性和正確性。
  • 案例 E9BF8411

    AquaStand RHINOSHIELD 有 DGCCRF 認證嗎

    已完成
    第 1 次嘗試 · 已完成 23768ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_knowledges、search_products
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges → search_products
    USERAquaStand RHINOSHIELD 有 DGCCRF 認證嗎
    BOT稍等一下我來幫您查詢 💡 您好,我是犀牛盾智能客服,很高興為您服務! 根據目前資訊,AquaStand RHINOSHIELD 已通過 DGCCRF(Direction générale de la Concurrence, de la Consommation et de la Répression des fraudes)認證,同時也獲得 FDA 及 LFGB 認證,確保產品安全無毒,讓您可以安心使用。 如果您還有其他關於 AquaStand 或 RHINOSHIELD 產品的問題,歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • know_367834
    意料之外 (4)
    • ! know_367888
    • ! know_367827
    • ! know_367892
    • ! know_368067
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆中提到 AquaStand RHINOSHIELD 確實獲得 DGCCRF 認證,這一點在來源中有明確支持,因此該回覆的所有事實陳述均為正確且有根據。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是犀牛盾智能客服,很高興為您服務! 根據目前資訊,AquaStand RHINOSHIELD 已通過 DGCCRF(Direction générale de la Concurrence, de la Consommation et de la Répression des fraudes)認證,同時也獲得 FDA 及 LFGB 認證,確保產品安全無毒,讓您可以安心使用。 如果您還有其他關於 AquaStand 或 RHINOSHIELD 產品的問題,歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • AquaStand RHINOSHIELD 經過 DGCCRF 認證
    Judge 推理
    該回覆完整回答了用戶的問題,並且提供了正確的資訊,符合預期的回覆風格。
  • 案例 3B797558

    這款透明 iPhone 保護殼能自訂嗎

    已完成
    第 1 次嘗試 · 已完成 31801ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_knowledges、search_products
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges → search_products
    USER這款透明 iPhone 保護殼能自訂嗎
    BOT馬上為您找找看相關內容 📋 您好,我是犀牛盾智能客服,很高興為您服務! RHINOSHIELD 的透明 iPhone 保護殼「Clear」系列確實支援一定程度的自訂。您可以透過更換不同顏色的按鍵(Boutons)和鏡頭保護圈(Contour Objectif Photo)來打造專屬風格。這些配件皆可單獨購買並安裝於您的 Clear 保護殼上,讓您的手機殼更具個人特色。 - Clear 透明保護殼介紹與購買: https://rhinoshield.fr/products/clear/buy - 可更換按鍵(Boutons): https://rhinoshield.fr/products/button/buy - 可更換鏡頭保護圈(Contour Objectif Photo): https://rhinoshield.fr/products/camera-ring/buy 如果您有特定型號需求或想了解更多自訂細節,歡迎告訴我您的iPhone型號,我可以幫您確認配件的適用性!

    產品檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • prod_978486
    意料之外 (4)
    • ! prod_978514
    • ! prod_978515
    • ! prod_978487
    • ! prod_978493
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆中提到的自訂功能和可更換配件均有來源支持,因此沒有虛構的聲明。所有的事實陳述都能夠引用來源,符合查詢的要求。

    回答品質

    93.3%
    相關性
    100.0%
    完整性
    80.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    80.0% · w 60%
    • 提供個性化選擇
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 您好,我是犀牛盾智能客服,很高興為您服務! RHINOSHIELD 的透明 iPhone 保護殼「Clear」系列確實支援一定程度的自訂。您可以透過更換不同顏色的按鍵(Boutons)和鏡頭保護圈(Contour Objectif Photo)來打造專屬風格。這些配件皆可單獨購買並安裝於您的 Clear 保護殼上,讓您的手機殼更具個人特色。 - Clear 透明保護殼介紹與購買: https://rhinoshield.fr/products/clear/buy - 可更換按鍵(Boutons): https://rhinoshield.fr/products/button/buy - 可更換鏡頭保護圈(Contour Objectif Photo): https://rhinoshield.fr/products/camera-ring/buy 如果您有特定型號需求或想了解更多自訂細節,歡迎告訴我您的iPhone型號,我可以幫您確認配件的適用性!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Clear 是一款透明且可自訂的 iPhone 保護殼
    • 提供個性化選擇
    Judge 推理
    這個回答針對用戶的問題提供了相關資訊,並且正確描述了產品的自訂功能,但未完全涵蓋所有核心要點,特別是缺少了「提供個性化選擇」這一點。
項目 II.

情境調用與完成

scenario_funnel 10 cases

維度總表

各維度品質分 · 覆蓋率
走對流程 召回
scenario
100.0%
[100.0% – 100.0%] · n=10
F1 83.3% · 召回 100.0% · 精確 75.0%
10 / 10 適用
用對工具 召回
tool_usage
0.0%
[0.0% – 0.0%] · n=3
F1 66.7% · 召回 50.0% · 精確 100.0%
3 / 10 適用
答得到位 平均
answer_quality
71.0%
[52.0% – 87.3%] · n=10
10 / 10 適用
  • 案例 2723FEFE

    請問如果產品有刮傷的情況,我該怎麼處理?

    已完成
    第 1 次嘗試 · 已完成 22176ms
    腳本進度 · 產品異常 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 產品異常
    腳本規則
    - 當消費者提到「產品+異常原因」,例如圖案剝落、產品刮傷、按鈕脫落、產品斷裂、殼變形、保護貼浮邊或是觸控不良等等
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - Nous sommes désolés que vous rencontriez des difficultés avec notre produit. Nous ferons de notre mieux pour vous aider rapidement.
    Merci de remplir notre formulaire de service client en sélectionnant【Demande d'informations après achat>Support produit】 et de fournir toutes les informations nécessaires (numéro de commande, détails du produit) ainsi que des photos ou vidéos montrant le problème afin que nous puissions vous assister au plus vite. Merci de votre coopération.
    
    Formulaire service client : https://url.rhinoshield.fr/fr-chatbot
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER請問如果產品有刮傷的情況,我該怎麼處理?
    BOT您好,我是犀牛盾智能客服,很高興為您服務! 很抱歉聽到您的產品有刮傷的情況。我們會盡快協助您處理。請您填寫我們的客服表單,選擇【購買後諮詢 > 產品支援】,並提供相關資訊(如訂單編號、產品細節),同時附上能清楚顯示刮傷狀況的照片或影片,這樣我們才能更有效率地協助您。 客服表單連結:https://url.rhinoshield.fr/fr-chatbot 感謝您的配合!如果還有其他問題,也歡迎隨時告訴我。

    情境路由

    66.7%
    Precision
    50.0%
    Recall
    100.0%
    F1
    66.7%
    預期 (1)
    • 1218 · 產品異常
    意料之外 (1)
    • ! 知識與產品查詢
    TP 1
    FP 1
    FN 0

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    75.0% · w 60%
    • 請您提供詳細的問題描述,例如刮傷的部位
    • 請附上相關的照片
    II 重要
    100.0% · w 30%
    III 補充
    100.0% · w 10%
    AI 回覆
    您好,我是犀牛盾智能客服,很高興為您服務! 很抱歉聽到您的產品有刮傷的情況。我們會盡快協助您處理。請您填寫我們的客服表單,選擇【購買後諮詢 > 產品支援】,並提供相關資訊(如訂單編號、產品細節),同時附上能清楚顯示刮傷狀況的照片或影片,這樣我們才能更有效率地協助您。 客服表單連結:https://url.rhinoshield.fr/fr-chatbot 感謝您的配合!如果還有其他問題,也歡迎隨時告訴我。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 請您提供詳細的問題描述,例如刮傷的部位
    • 請附上相關的照片
    • 您可以填寫客戶服務表單
    II 重要限制 w 30%
    • 選擇「購入後的資訊需求>產品支援」來提供所有必要的資訊
    III 補充說明 w 10%
    • 謝謝您的合作
    Judge 推理
    這個回覆的內容與用戶的問題相關,並且提供了填寫客服表單的指示,但缺少了要求用戶提供刮傷部位的描述和附上照片的具體要求,因此在完整性上有所欠缺。
  • 案例 61AF13D1

    可以問一下你們的產品容量是幾公升嗎?

    已完成
    第 1 次嘗試 · 已完成 16631ms
    腳本進度 · 詢問各型號重量尺寸 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 詢問各型號重量尺寸
    腳本規則
    - 當客人問到產品的以下資訊「
    1. 尺寸與體積相關
    -尺寸、大小、size、體積
    -長度、寬度、高度、深度、厚度
    -多大、多小、多長、多寬、多高
    -規格、dimensions、measurements
    
    2. 重量相關
    -重量、重、多重、幾公斤、幾克
    -淨重、毛重、weight
    -輕重、份量
    
    3. 容量與數量相關
    -容量、capacity、容積、幾公升、幾毫升
    -數量、份量、內容量
    -可容納、可裝、可放
    
    」
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - 回覆以下訊息:
    「Merci pour votre demande.
    Veuillez remplir le formulaire d’assistance et fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter. Nous vous répondrons dans les plus brefs délais pendant nos heures de service: https://url.rhinoshield.fr/fr-chatbot 」
    
    並根據客人原本輸入的語言回答
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER可以問一下你們的產品容量是幾公升嗎?
    BOTMerci pour votre demande. Veuillez remplir le formulaire d’assistance et fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter. Nous vous répondrons dans les plus brefs délais pendant nos heures de service: https://url.rhinoshield.fr/fr-chatbot 您好,感謝您的詢問! 為了更精確地協助您,請您填寫我們的客服表單,並提供您想查詢的產品系列、型號或規格。我們會在服務時間內盡快回覆您:https://url.rhinoshield.fr/fr-chatbot 謝謝您的配合!

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 912 · 詢問各型號重量尺寸
    TP 1
    FP 0
    FN 0

    回答品質

    26.7%
    相關性
    50.0%
    完整性
    30.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    60.0% · w 60%
    • Fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    Merci pour votre demande. Veuillez remplir le formulaire d’assistance et fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter. Nous vous répondrons dans les plus brefs délais pendant nos heures de service: https://url.rhinoshield.fr/fr-chatbot 您好,感謝您的詢問! 為了更精確地協助您,請您填寫我們的客服表單,並提供您想查詢的產品系列、型號或規格。我們會在服務時間內盡快回覆您:https://url.rhinoshield.fr/fr-chatbot 謝謝您的配合!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Veuillez remplir le formulaire d’assistance
    • Fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter
    • Nous vous répondrons dans les plus brefs délais pendant nos heures de service
    III 補充說明 w 10%
    • https://url.rhinoshield.fr/fr-chatbot
    Judge 推理
    回覆的內容雖然包含了大部分的核心要素,但未能完全符合客戶的要求,且回覆的語言不符合客戶的原本輸入語言,這導致了正確性得分為零。
    錯誤陳述 (1)
    • 回覆的語言不符合客戶的原本輸入語言
  • 案例 8409C19B

    各型號的重量跟尺寸是多少?

    已完成
    第 1 次嘗試 · 已完成 10085ms
    腳本進度 · 詢問各型號重量尺寸 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 詢問各型號重量尺寸
    腳本規則
    - 當客人問到產品的以下資訊「
    1. 尺寸與體積相關
    -尺寸、大小、size、體積
    -長度、寬度、高度、深度、厚度
    -多大、多小、多長、多寬、多高
    -規格、dimensions、measurements
    
    2. 重量相關
    -重量、重、多重、幾公斤、幾克
    -淨重、毛重、weight
    -輕重、份量
    
    3. 容量與數量相關
    -容量、capacity、容積、幾公升、幾毫升
    -數量、份量、內容量
    -可容納、可裝、可放
    
    」
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - 回覆以下訊息:
    「Merci pour votre demande.
    Veuillez remplir le formulaire d’assistance et fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter. Nous vous répondrons dans les plus brefs délais pendant nos heures de service: https://url.rhinoshield.fr/fr-chatbot 」
    
    並根據客人原本輸入的語言回答
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER各型號的重量跟尺寸是多少?
    BOT感謝您的詢問! 請您填寫客服表單,並提供您想查詢的產品系列/型號/規格,我們會在服務時間內盡快回覆您:https://url.rhinoshield.fr/fr-chatbot 謝謝您的配合!

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 912 · 詢問各型號重量尺寸
    TP 1
    FP 0
    FN 0

    回答品質

    60.0%
    相關性
    50.0%
    完整性
    30.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • Veuillez remplir le formulaire d’assistance
    • Fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter
    • Nous vous répondrons dans les plus brefs délais pendant nos heures de service
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    感謝您的詢問! 請您填寫客服表單,並提供您想查詢的產品系列/型號/規格,我們會在服務時間內盡快回覆您:https://url.rhinoshield.fr/fr-chatbot 謝謝您的配合!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Veuillez remplir le formulaire d’assistance
    • Fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter
    • Nous vous répondrons dans les plus brefs délais pendant nos heures de service
    III 補充說明 w 10%
    • https://url.rhinoshield.fr/fr-chatbot
    Judge 推理
    回覆的內容雖然符合規範,但未能直接回答用戶的問題,且缺少了多個核心要點,導致完整性分數偏低。
  • 案例 F7FDBE69

    如果我的付款失敗了,該怎麼辦嗎?

    已完成
    第 1 次嘗試 · 已完成 18363ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:query、keywords_or_codes
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    query 我想了解最新的智能手錶有哪些功能 — (對話未走到)
    keywords_or_codes [] — (對話未走到)
    STEP
    03

    API 工具

    ○ 等待資訊收集完成
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    完整測試 4 個步驟
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges
    USER如果我的付款失敗了,該怎麼辦嗎?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! 如果您的付款失敗,您可以嘗試以下幾個步驟: 1. 確認您的銀行卡是否有足夠餘額,或是否已達到刷卡上限。 2. 付款時會需要進行「3D驗證」,請確認您有正確輸入銀行發送的驗證碼(通常會以簡訊或Email發送)。 3. 建議清除瀏覽器的快取與Cookies,然後重新嘗試付款。 4. 若瀏覽器在交易時意外關閉,也可以重新操作一次。 5. 若以上方法都無法解決,建議您改用PayPal付款(即使沒有PayPal帳號,也可以透過PayPal以信用卡結帳)。 如果還是無法順利付款,請您聯繫我們的客服團隊,我們會協助您處理: https://url.rhinoshield.fr/fr-chatbot 感謝您的耐心與配合!

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 2131 · 知識與產品查詢
    TP 1
    FP 0
    FN 0

    工具使用

    66.7%
    Precision
    100.0%
    Recall
    50.0%
    F1
    66.7%
    預期 (2)
    • search_knowledges
    • search_products
    TP 1
    FP 0
    FN 1

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    80.0% · w 60%
    • 確認是否已達到信用卡的上限
    II 重要
    100.0% · w 30%
    III 補充
    100.0% · w 10%
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! 如果您的付款失敗,您可以嘗試以下幾個步驟: 1. 確認您的銀行卡是否有足夠餘額,或是否已達到刷卡上限。 2. 付款時會需要進行「3D驗證」,請確認您有正確輸入銀行發送的驗證碼(通常會以簡訊或Email發送)。 3. 建議清除瀏覽器的快取與Cookies,然後重新嘗試付款。 4. 若瀏覽器在交易時意外關閉,也可以重新操作一次。 5. 若以上方法都無法解決,建議您改用PayPal付款(即使沒有PayPal帳號,也可以透過PayPal以信用卡結帳)。 如果還是無法順利付款,請您聯繫我們的客服團隊,我們會協助您處理: https://url.rhinoshield.fr/fr-chatbot 感謝您的耐心與配合!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 確認您的銀行賬戶是否有足夠的餘額
    • 確認是否已達到信用卡的上限
    • 建議您清除瀏覽器的快取和 Cookies,然後再試一次
    • 可以考慮使用 PayPal 進行付款,無需創建賬戶即可使用您的信用卡
    II 重要限制 w 30%
    • 有時候因網站技術故障造成付款失敗
    III 補充說明 w 10%
    • 若問題持續存在,請聯繫我們的客戶服務尋求進一步協助
    Judge 推理
    該回覆針對用戶的問題提供了相關的解決步驟,並且大部分內容符合正確答案,但缺少了確認信用卡上限的步驟,因此在完整性上有所扣分。
  • 案例 79728264

    請問你們的產品有什麼重量和尺寸的資訊?

    已完成
    第 1 次嘗試 · 已完成 12618ms
    腳本進度 · 詢問各型號重量尺寸 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 詢問各型號重量尺寸
    腳本規則
    - 當客人問到產品的以下資訊「
    1. 尺寸與體積相關
    -尺寸、大小、size、體積
    -長度、寬度、高度、深度、厚度
    -多大、多小、多長、多寬、多高
    -規格、dimensions、measurements
    
    2. 重量相關
    -重量、重、多重、幾公斤、幾克
    -淨重、毛重、weight
    -輕重、份量
    
    3. 容量與數量相關
    -容量、capacity、容積、幾公升、幾毫升
    -數量、份量、內容量
    -可容納、可裝、可放
    
    」
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - 回覆以下訊息:
    「Merci pour votre demande.
    Veuillez remplir le formulaire d’assistance et fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter. Nous vous répondrons dans les plus brefs délais pendant nos heures de service: https://url.rhinoshield.fr/fr-chatbot 」
    
    並根據客人原本輸入的語言回答
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER請問你們的產品有什麼重量和尺寸的資訊?
    BOT感謝您的詢問! 請您填寫客服表單,並提供您想查詢的產品系列/型號/規格,我們會在服務時間內盡快回覆您相關的重量與尺寸資訊:https://url.rhinoshield.fr/fr-chatbot 謝謝您的配合!

    情境路由

    66.7%
    Precision
    50.0%
    Recall
    100.0%
    F1
    66.7%
    預期 (1)
    • 912 · 詢問各型號重量尺寸
    意料之外 (1)
    • ! 知識與產品查詢
    TP 1
    FP 1
    FN 0

    回答品質

    40.0%
    相關性
    70.0%
    完整性
    50.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • Merci pour votre demande.
    • Nous vous répondrons dans les plus brefs délais pendant nos heures de service
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    感謝您的詢問! 請您填寫客服表單,並提供您想查詢的產品系列/型號/規格,我們會在服務時間內盡快回覆您相關的重量與尺寸資訊:https://url.rhinoshield.fr/fr-chatbot 謝謝您的配合!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Veuillez remplir le formulaire d’assistance
    • Fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter
    • Nous vous répondrons dans les plus brefs délais pendant nos heures de service
    III 補充說明 w 10%
    • https://url.rhinoshield.fr/fr-chatbot
    Judge 推理
    回覆未完全符合規定的格式,缺少了開頭的感謝語和結尾的回覆時間說明,且未使用法語回覆,導致正確性得分為0。
    錯誤陳述 (1)
    • 回覆的內容未依照規定的格式提供
  • 案例 60EC2982

    如果我在付款時遇到問題,我應該怎麼做?

    已完成
    第 1 次嘗試 · 已完成 21420ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:query、keywords_or_codes
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    query 我想了解最新的智能手錶有哪些功能 — (對話未走到)
    keywords_or_codes [] — (對話未走到)
    STEP
    03

    API 工具

    ○ 等待資訊收集完成
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    完整測試 4 個步驟
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges
    USER如果我在付款時遇到問題,我應該怎麼做?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! 如果您在付款時遇到問題,建議您可以嘗試以下幾個步驟: 1. 請確認您的銀行卡餘額是否足夠,或是否已達到刷卡上限。 2. 若使用信用卡付款,網站會啟用「3D secure」驗證,請確保正確輸入銀行發送的驗證碼(通常會以簡訊或Email發送)。 3. 建議清除瀏覽器的快取與Cookies後重新嘗試付款。 4. 若瀏覽器在交易過程中意外關閉,也可以重新操作一次。 5. 若仍無法順利付款,建議您改用PayPal(即使沒有PayPal帳號,也可透過PayPal以信用卡付款)。 如果以上方法都無法解決您的問題,請您提供遇到的錯誤訊息(如有截圖更佳)、使用的裝置與系統資訊,並透過以下客服表單聯繫我們,我們會盡快協助您處理: https://url.rhinoshield.fr/fr-chatbot 感謝您的耐心與配合!

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 2131 · 知識與產品查詢
    TP 1
    FP 0
    FN 0

    工具使用

    66.7%
    Precision
    100.0%
    Recall
    50.0%
    F1
    66.7%
    預期 (2)
    • search_knowledges
    • search_products
    TP 1
    FP 0
    FN 1

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    90.0% · w 60%
    • 確認你的銀行卡是否開啟了 3D secure 驗證
    II 重要
    100.0% · w 30%
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! 如果您在付款時遇到問題,建議您可以嘗試以下幾個步驟: 1. 請確認您的銀行卡餘額是否足夠,或是否已達到刷卡上限。 2. 若使用信用卡付款,網站會啟用「3D secure」驗證,請確保正確輸入銀行發送的驗證碼(通常會以簡訊或Email發送)。 3. 建議清除瀏覽器的快取與Cookies後重新嘗試付款。 4. 若瀏覽器在交易過程中意外關閉,也可以重新操作一次。 5. 若仍無法順利付款,建議您改用PayPal(即使沒有PayPal帳號,也可透過PayPal以信用卡付款)。 如果以上方法都無法解決您的問題,請您提供遇到的錯誤訊息(如有截圖更佳)、使用的裝置與系統資訊,並透過以下客服表單聯繫我們,我們會盡快協助您處理: https://url.rhinoshield.fr/fr-chatbot 感謝您的耐心與配合!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 確認你的銀行卡是否開啟了 3D secure 驗證
    • 檢查你的帳戶餘額是否足夠或是否已達到信用卡的上限
    • 建議你清除瀏覽器的快取和 cookies,然後再試一次
    • 可以考慮使用 PayPal 進行付款
    II 重要限制 w 30%
    • 如果問題仍然存在,請聯繫我們的客服以獲得更進一步的幫助
    Judge 推理
    回覆內容針對用戶的問題提供了詳細的解決步驟,涵蓋了大部分的關鍵點,但缺少了確認銀行卡是否開啟3D secure驗證的步驟,因此在完整性上有所扣分。
  • 案例 A2487ECB

    請問如何查詢產品的使用方法和教學呢?

    已完成
    第 1 次嘗試 · 已完成 12659ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - #核心觸發原則
    -通用疑問詞與符號 (ABSOLUTE PRIORITY):「?、嗎、呢、嗎?、如何、怎麼、什麼、哪裡、哪個、多少、為什麼」
    -只要出現上述任何關鍵字,或輸入內容少於 10 字,強制觸發知識庫與產品搜尋。
    
    #觸發關鍵字
    1.購買意圖與需求:商品、產品、物品、購買、買、訂購、我想要、我需要、我在找
    
    2.推薦與建議:推薦、介紹、建議、功能、特色、優點、特性、詳細說明、詳細介紹、補充說明
    
    3.規格與比較:規格、尺寸、容量、技術規格、比較、對比、差異、區別、哪個好、哪個適合、優缺點、好壞、性價比、CP值、划算
    
    4.組合與優惠:搭配、組合、配對、一起用、同時使用、套餐、套組、加購、加買、相關商品、升級、活動、報名、參加、優惠、折扣、促銷、抽獎、贈品、獎品
    
    5.適用場景:用途、目的、需求、場合、情境、環境、適用範圍、適用對象、預算、限制條件、
    
    6.操作與教學:怎麼用、如何使用、使用方法、使用方式、操作方式、使用步驟、安裝、設定、配置、第一次使用、新手使用、初次使用、使用技巧、使用訣竅、使用須知、注意事項
    
    7.維護與保養:保養、維護、清潔、保存、存放、收藏、壽命、使用期限、保固期、更換、替換、更新
    
    8.配送與金流:配送、運費、到貨時間、地址、付款方式、分期、發票、收據、證明
    
    9.售後服務:退換貨、退款、退費、保固、維修、售後、聯絡方式、電話、信箱、登入、註冊、密碼、無法、不能、不行、錯誤、異常、問題、當機、卡住
    
    10.會員權益:會員、積分、紅利、政策、規定、條款、隱私、個資、資料、安全、保障、保護、責任、義務、權利
    
    11.公司與社群資訊:粉絲團、粉專、FB、Facebook、臉書、Instagram、IG、社群、官網、網站、LINE、Youtube、YT、影片、頻道、公司、品牌、關於我們、服務時間、營業時間、上班時間
    
    12.產品規格資訊:手機殼、AirX、SolidX、SolidSuit、CircularNext、Clear、Mod、壯撞貼、玻璃貼、保護貼、Apple Watch 編織錶帶、水壺隨行環、掛繩、磁吸環、充電線
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:query、keywords_or_codes
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [text] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [text] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    query 請問最新的無線耳機有哪些推薦? — (對話未走到)
    keywords_or_codes [] — (對話未走到)
    STEP
    03

    API 工具

    ○ 等待資訊收集完成
    腳本規則
    1. search_knowledges — 從知識庫中搜尋與使用者查詢相關的知識
    2. search_products — 根據使用者需求從產品庫中搜尋並推薦相關產品
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ##Priciples
    -All answers MUST be based on content output from api tool, NEVER fabricate
    -NEVER fabricate ANY information about: Product/service details • Policies • Promotional offers • Pre-sales/after-sales services • Real-time data (availability, pricing, inventory)•website Interface Location
    -Strictly prohibit referencing, rewriting, or mixing content outside of <tool: search_knowledge_and_products> outputs
    -Each URL should be on a separate line and should not be combined with Chinese characters.
    
    ## User Intent Analysis (CRITICAL - MUST FOLLOW):
    FIRST analyze user's intent before deciding whether to mention products:
    • If user is asking INFORMATIONAL questions (how/why/what/when/where questions about concepts, processes, product shipment, or product issues) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    • If user explicitly asks for product recommendations/suggestions/comparisons → Provide product information
    • If user mentions specific product names/models or asks about a particular series, BEFORE recommending, CAREFULLY review tool outputs for the specific series' availability/support; If there is NO clear mention or support for the series or its models in the tool outputs, DO NOT recommend any products of that series to the user.
    • If user expresses purchase intent (我想買/推薦給我/有什麼產品/需要購買) → Recommend products
    
    ## CRITICAL PRODUCT VERIFICATION STEPS - MUST FOLLOW:
    ⚠️ MANDATORY: When user asks about a specific device series (e.g., S23, iPhone 15), you MUST:
    1. FIRST identify the exact series mentioned by user
    2. THEN check each product's compatibility list in tool outputs
    3. CRITICAL: model names are SPECIFIC - 'S20+' ≠ 'S23', 'S24' ≠ 'S23'
    4. ONLY recommend products that EXPLICITLY list the user's exact series
    5. If a product's compatibility list does NOT include the user's series,  (e.g., 'S20, S20+, S21' but NOT 'S23') → DO NOT recommend it
    6. If compatibility list is empty or missing → DO NOT recommend
    7. Example verification:
       - User asks: 'S23 手機殼'
       - Product shows: 'S25, S24 FE' → ❌ DO NOT recommend (no S23)
       - Product shows: 'S23 Ultra, S23+, S23' → ✅ CAN recommend (has S23)
    
    ## Conversation History Check (避免重複推薦) - CRITICAL:
    ⚠️  MANDATORY: BEFORE recommending any products, review conversation history for already mentioned products
    • If products were previously recommended but user showed NO strong interest (沒有詢問細節、比較、或表達購買意願), DO NOT repeat those products
    • If user actively asked follow-up questions about previously mentioned products, it indicates strong interest - you MAY mention them again
    • ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent for specific items
    • When user asks for general recommendations and tool outputs include previously mentioned products:
      - If the previously mentioned product is highly relevant to current query, you MAY mention it again with NEW information or different perspective
      - Use phrases like '剛才提到的商品A,根據您現在的需求...' to acknowledge previous mention
      - Always try to include additional products from tool outputs if available
      - Focus on providing new value (different use cases, updated info, comparisons) rather than repeating identical information
    • CRITICAL: All product recommendations must still come ONLY from <tool: search_knowledge_and_products> outputs - NEVER create or assume products not in tool results
    • 🚫 CRITICAL: If no new products available in tool outputs (when user asks for 'other options', 'alternatives', '別的型號', '其他選擇'), explain the limitation clearly using phrases like '目前BenQ只有這三款螢幕支架可選擇' rather than repeating previous recommendations
    • Exception: If user explicitly requests comparison with previously mentioned products, include them in comparison
    ## Knowledge Response Rules:
    If knowledge results found in tool messages: Provide accurate answers strictly based on knowledge outputs
    📌 MANDATORY URL FORMAT: Always use plain text format '[Topic]: [URL]' - NEVER use markdown links like [text](url), NEVER use brackets or parentheses for links
    Include ALL images with exact format: \n\n![](image_url)\n\n (Use ONLY image links from tool messages)
    ## Product Response Rules (ONLY when user shows product interest):
    IMPORTANT: Only mention products if user explicitly asks for products OR shows clear purchase intent
    DO NOT say '不過我可以為您推薦一些產品' or similar phrases when user is just asking informational questions
    If user wants product recommendations: Provide details: name, price, specifications, reason of recommendation
    When comparing products (only if user asks), focus on valuable aspects for consumers:
    • Specifications
    • Suitable use scenarios
    • Price
    ## Response Integration Rules:
    If both knowledge and products found, prioritize based on user's actual question:
    • Information-seeking questions → Answer with knowledge ONLY
    • Product-seeking questions → Include both knowledge context and product recommendations
    • Mixed intent → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    NEVER force product recommendations into informational answers
    ## No Results Handling:
    If NOT found in tool messages, use this EXACT format: Begin with 'Based on general understanding,' → provide general answer → End with 'For accuracy, please confirm with a human customer service agent.'
    If unable to answer at all, clearly explain and suggest transferring to human customer service
    ## Language Style Rules:
    MUST NOT mention or imply: 'knowledge base', 'database', 'system records', 'internal data', 'documentation', or similar sources
    NEVER use robotic phrases: 「根據我們的資料」,「依照知識庫」,「知識庫中沒有找到資訊」,「系統記錄沒有相關資料」,'database shows', 'knowledge base entry'
    Always rephrase naturally, making responses sound like a helpful human assistant
    完整測試 4 個步驟
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges
    USER請問如何查詢產品的使用方法和教學呢?
    BOT稍等一下我來幫您查詢 💡 您好,我是犀牛盾智能客服,很高興為您服務! 如果您想查詢產品的使用方法和教學,建議您可以先觀看我們的教學影片,裡面有詳細的安裝與拆卸說明。請點擊以下連結查看: https://rhinoshield.fr/support/product-support 如果您有特定產品需要操作教學,也歡迎告訴我產品名稱,我可以幫您找到更精確的資訊!

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 2131 · 知識與產品查詢
    TP 1
    FP 0
    FN 0

    工具使用

    66.7%
    Precision
    100.0%
    Recall
    50.0%
    F1
    66.7%
    預期 (2)
    • search_knowledges
    • search_products
    TP 1
    FP 0
    FN 1

    回答品質

    76.7%
    相關性
    80.0%
    完整性
    60.0%
    正確性
    90.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 您可以透過我們的客服系統來查詢產品的使用方法與教學
    • 我將協助您找到相關的操作資訊和教學內容
    II 重要
    III 補充
    0.0% · w 10%
    • 如果您提供具體的產品名稱或模型
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是犀牛盾智能客服,很高興為您服務! 如果您想查詢產品的使用方法和教學,建議您可以先觀看我們的教學影片,裡面有詳細的安裝與拆卸說明。請點擊以下連結查看: https://rhinoshield.fr/support/product-support 如果您有特定產品需要操作教學,也歡迎告訴我產品名稱,我可以幫您找到更精確的資訊!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 您可以透過我們的客服系統來查詢產品的使用方法與教學
    • 我將協助您找到相關的操作資訊和教學內容
    III 補充說明 w 10%
    • 如果您提供具體的產品名稱或模型
    Judge 推理
    回覆中提到的教學影片連結雖然有助於查詢產品使用方法,但未完全符合用戶的需求,且缺少了客服系統的提及,導致核心內容不完整。
  • 案例 064935B8

    我看到我的保護殼有刮傷,這算產品異常嗎?

    已完成
    第 1 次嘗試 · 已完成 16492ms
    腳本進度 · 產品異常 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 產品異常
    腳本規則
    - 當消費者提到「產品+異常原因」,例如圖案剝落、產品刮傷、按鈕脫落、產品斷裂、殼變形、保護貼浮邊或是觸控不良等等
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - Nous sommes désolés que vous rencontriez des difficultés avec notre produit. Nous ferons de notre mieux pour vous aider rapidement.
    Merci de remplir notre formulaire de service client en sélectionnant【Demande d'informations après achat>Support produit】 et de fournir toutes les informations nécessaires (numéro de commande, détails du produit) ainsi que des photos ou vidéos montrant le problème afin que nous puissions vous assister au plus vite. Merci de votre coopération.
    
    Formulaire service client : https://url.rhinoshield.fr/fr-chatbot
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER我看到我的保護殼有刮傷,這算產品異常嗎?
    BOT您好,我是犀牛盾智能客服,很高興為您服務! 關於您提到保護殼有刮傷的情況,是否屬於產品異常會依據實際狀況判斷。如果刮傷是在您收到商品時就已經存在,這可能屬於出廠瑕疵;但如果是在使用過程中產生的刮痕,則屬於正常使用下的耗損。 為了更精確協助您,建議您可以拍攝清楚的照片(包含刮傷部位及整體商品),並提供訂單號碼等相關資訊。請您填寫我們的客服表單,選擇【購後諮詢 > 產品支援】,上傳照片或影片,我們的專人會盡快協助您處理: 客服表單連結:https://url.rhinoshield.fr/fr-chatbot 感謝您的配合!如有其他問題也歡迎隨時詢問。

    情境路由

    66.7%
    Precision
    50.0%
    Recall
    100.0%
    F1
    66.7%
    預期 (1)
    • 1218 · 產品異常
    意料之外 (1)
    • ! 知識與產品查詢
    TP 1
    FP 1
    FN 0

    回答品質

    93.3%
    相關性
    100.0%
    完整性
    80.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    50.0% · w 10%
    • 感謝您的配合
    AI 回覆
    您好,我是犀牛盾智能客服,很高興為您服務! 關於您提到保護殼有刮傷的情況,是否屬於產品異常會依據實際狀況判斷。如果刮傷是在您收到商品時就已經存在,這可能屬於出廠瑕疵;但如果是在使用過程中產生的刮痕,則屬於正常使用下的耗損。 為了更精確協助您,建議您可以拍攝清楚的照片(包含刮傷部位及整體商品),並提供訂單號碼等相關資訊。請您填寫我們的客服表單,選擇【購後諮詢 > 產品支援】,上傳照片或影片,我們的專人會盡快協助您處理: 客服表單連結:https://url.rhinoshield.fr/fr-chatbot 感謝您的配合!如有其他問題也歡迎隨時詢問。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 當產品出現異常情況,如刮傷、按鈕脫落、產品斷裂等,都算是產品異常
    III 補充說明 w 10%
    • 請提供更多資訊,以便我們幫您處理此問題
    • 感謝您的配合
    Judge 推理
    這個回答針對用戶的問題提供了相關的解釋,並且正確地指出了刮傷是否屬於產品異常的情況。雖然涵蓋了核心內容,但缺少了要求提供更多資訊的具體說明,導致完整性稍有不足。
  • 案例 43FFF280

    我有個產品皮膚出現剝落的情況,這算異常嗎?

    已完成
    第 1 次嘗試 · 已完成 17418ms
    腳本進度 · 產品異常 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 產品異常
    腳本規則
    - 當消費者提到「產品+異常原因」,例如圖案剝落、產品刮傷、按鈕脫落、產品斷裂、殼變形、保護貼浮邊或是觸控不良等等
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - Nous sommes désolés que vous rencontriez des difficultés avec notre produit. Nous ferons de notre mieux pour vous aider rapidement.
    Merci de remplir notre formulaire de service client en sélectionnant【Demande d'informations après achat>Support produit】 et de fournir toutes les informations nécessaires (numéro de commande, détails du produit) ainsi que des photos ou vidéos montrant le problème afin que nous puissions vous assister au plus vite. Merci de votre coopération.
    
    Formulaire service client : https://url.rhinoshield.fr/fr-chatbot
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER我有個產品皮膚出現剝落的情況,這算異常嗎?
    BOT您好,我是犀牛盾智能客服,很高興為您服務! 關於您提到產品皮膚出現剝落的情況,這確實屬於異常狀況。為了協助您更快處理這個問題,請您填寫我們的客服表單,並選擇【購後諮詢 > 產品支援】,同時提供您的訂單編號、產品細節,以及清楚顯示問題的照片或影片,這樣我們的專人可以更有效率地協助您。 客服表單連結:https://url.rhinoshield.fr/fr-chatbot 感謝您的配合!如果還有其他疑問,也歡迎隨時告訴我。

    情境路由

    66.7%
    Precision
    50.0%
    Recall
    100.0%
    F1
    66.7%
    預期 (1)
    • 1218 · 產品異常
    意料之外 (1)
    • ! 知識與產品查詢
    TP 1
    FP 1
    FN 0

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    67.0% · w 30%
    • 提供相關的產品資訊以及照片或影片
    III 補充
    100.0% · w 10%
    AI 回覆
    您好,我是犀牛盾智能客服,很高興為您服務! 關於您提到產品皮膚出現剝落的情況,這確實屬於異常狀況。為了協助您更快處理這個問題,請您填寫我們的客服表單,並選擇【購後諮詢 > 產品支援】,同時提供您的訂單編號、產品細節,以及清楚顯示問題的照片或影片,這樣我們的專人可以更有效率地協助您。 客服表單連結:https://url.rhinoshield.fr/fr-chatbot 感謝您的配合!如果還有其他疑問,也歡迎隨時告訴我。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 產品異常的情況包括圖案剝落
    II 重要限制 w 30%
    • 請填寫我們的服務客戶表單
    • 提供相關的產品資訊以及照片或影片
    III 補充說明 w 10%
    • 以便我們能夠儘快協助您
    Judge 推理
    回覆中提到產品異常的情況,並提供了填寫客服表單的指示,符合用戶的需求。然而,回覆中未明確提到需要提供相關的產品資訊,導致在關鍵限制的完整性上有所缺失。
  • 案例 14839ABA

    產品的重量尺寸是多少?

    已完成
    第 1 次嘗試 · 已完成 11019ms
    腳本進度 · 詢問各型號重量尺寸 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 詢問各型號重量尺寸
    腳本規則
    - 當客人問到產品的以下資訊「
    1. 尺寸與體積相關
    -尺寸、大小、size、體積
    -長度、寬度、高度、深度、厚度
    -多大、多小、多長、多寬、多高
    -規格、dimensions、measurements
    
    2. 重量相關
    -重量、重、多重、幾公斤、幾克
    -淨重、毛重、weight
    -輕重、份量
    
    3. 容量與數量相關
    -容量、capacity、容積、幾公升、幾毫升
    -數量、份量、內容量
    -可容納、可裝、可放
    
    」
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - 回覆以下訊息:
    「Merci pour votre demande.
    Veuillez remplir le formulaire d’assistance et fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter. Nous vous répondrons dans les plus brefs délais pendant nos heures de service: https://url.rhinoshield.fr/fr-chatbot 」
    
    並根據客人原本輸入的語言回答
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER產品的重量尺寸是多少?
    BOTMerci pour votre demande. 請填寫客服表單,並提供您想查詢的產品系列/型號/規格,我們會在服務時間內盡快回覆您:https://url.rhinoshield.fr/fr-chatbot

    情境路由

    66.7%
    Precision
    50.0%
    Recall
    100.0%
    F1
    66.7%
    預期 (1)
    • 912 · 詢問各型號重量尺寸
    意料之外 (1)
    • ! 知識與產品查詢
    TP 1
    FP 1
    FN 0

    回答品質

    26.7%
    相關性
    50.0%
    完整性
    30.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    0.0% · w 60%
    • Veuillez remplir le formulaire d’assistance
    • Fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter
    • Nous vous répondrons dans les plus brefs délais pendant nos heures de service
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    Merci pour votre demande. 請填寫客服表單,並提供您想查詢的產品系列/型號/規格,我們會在服務時間內盡快回覆您:https://url.rhinoshield.fr/fr-chatbot
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Veuillez remplir le formulaire d’assistance
    • Fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter
    • Nous vous répondrons dans les plus brefs délais pendant nos heures de service
    III 補充說明 w 10%
    • https://url.rhinoshield.fr/fr-chatbot
    Judge 推理
    回覆未能正確回答產品的重量尺寸,且未遵循規則要求的內容,導致相關資訊缺失。
項目 III.

對話素養(混合問答)

mixed_qa 8 cases

維度總表

各維度品質分 · 覆蓋率
找對資料 召回
retrieval
83.3%
[50.0% – 100.0%] · n=6
F1 27.8% · 相關率 23.3% · 精確 16.7%
6 / 8 適用
不亂編造 平均
faithfulness
83.3%
[50.0% – 100.0%] · n=6
8 / 8 適用
答得到位 平均
answer_quality
68.8%
[42.9% – 95.8%] · n=8
8 / 8 適用
  • 案例 28DC4056

    get_file_resource 是用來做什麼的?

    已完成
    第 1 次嘗試 · 已完成 10735ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    ✗ 已呼叫 0 / 1 個工具
    未呼叫:get_file_resource
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges
    USERget_file_resource 是用來做什麼的?
    BOT讓我幫您查詢一下相關資訊 🔍 很抱歉,目前沒有找到關於「get_file_resource」用途的相關說明。如果您需要更詳細的資訊,建議您聯繫專人客服協助。請問是否需要我提供客服聯絡方式?

    回答品質

    0.0%
    相關性
    0.0%
    完整性
    0.0%
    正確性
    0.0%
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 很抱歉,目前沒有找到關於「get_file_resource」用途的相關說明。如果您需要更詳細的資訊,建議您聯繫專人客服協助。請問是否需要我提供客服聯絡方式?
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • get_file_resource 用來檢索公司特定的檔案資源
    • 可以檢索分支清單、尺寸表、價格表、政策等
    III 補充說明 w 10%
    • 當使用者詢問有關可能在上傳的公司文件中的結構化數據時,可以呼叫這個功能
    Judge 推理
    這個回答完全沒有針對使用者的問題進行解答,且錯誤地表示沒有相關資訊,導致無法提供任何正確的內容。
    遺漏要點 (3)
    • get_file_resource 用來檢索公司特定的檔案資源
    • 可以檢索分支清單、尺寸表、價格表、政策等
    • 當使用者詢問有關可能在上傳的公司文件中的結構化數據時,可以呼叫這個功能
    錯誤陳述 (1)
    • 目前沒有找到關於「get_file_resource」用途的相關說明
  • 案例 31CD6AAD

    你們的不同型號重多少、尺寸有多大?

    已完成
    第 1 次嘗試 · 已完成 10359ms
    腳本進度 · 詢問各型號重量尺寸 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 詢問各型號重量尺寸
    腳本規則
    - 當客人問到產品的以下資訊「
    1. 尺寸與體積相關
    -尺寸、大小、size、體積
    -長度、寬度、高度、深度、厚度
    -多大、多小、多長、多寬、多高
    -規格、dimensions、measurements
    
    2. 重量相關
    -重量、重、多重、幾公斤、幾克
    -淨重、毛重、weight
    -輕重、份量
    
    3. 容量與數量相關
    -容量、capacity、容積、幾公升、幾毫升
    -數量、份量、內容量
    -可容納、可裝、可放
    
    」
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - 回覆以下訊息:
    「Merci pour votre demande.
    Veuillez remplir le formulaire d’assistance et fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter. Nous vous répondrons dans les plus brefs délais pendant nos heures de service: https://url.rhinoshield.fr/fr-chatbot 」
    
    並根據客人原本輸入的語言回答
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER你們的不同型號重多少、尺寸有多大?
    BOT感謝您的詢問! 請您填寫客服表單,並提供您想查詢的產品系列/型號/規格,我們會在服務時間內盡快回覆您相關資訊:https://url.rhinoshield.fr/fr-chatbot 謝謝您的配合!
    PARTIAL
    忠實度——metric 尚未齊全 (缺:hallucination_rate, citation_grounding)

    回答品質

    26.7%
    相關性
    50.0%
    完整性
    30.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    30.0% · w 60%
    • Merci pour votre demande.
    • Nous vous répondrons dans les plus brefs délais pendant nos heures de service
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    感謝您的詢問! 請您填寫客服表單,並提供您想查詢的產品系列/型號/規格,我們會在服務時間內盡快回覆您相關資訊:https://url.rhinoshield.fr/fr-chatbot 謝謝您的配合!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Veuillez remplir le formulaire d’assistance
    • Fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter
    • Nous vous répondrons dans les plus brefs délais pendant nos heures de service
    III 補充說明 w 10%
    • https://url.rhinoshield.fr/fr-chatbot
    Judge 推理
    回覆未能完全遵循規則,缺少了必要的開頭和結尾語句,且未能正確使用客戶原本的語言。
    錯誤陳述 (1)
    • 回覆以下訊息: 「Merci pour votre demande. Veuillez remplir le formulaire d’assistance et fournir la gamme de produits / le modèle / les spécifications que vous souhaitez consulter. Nous vous répondrons dans les plus brefs délais pendant nos heures de service: https://url.rhinoshield.fr/fr-chatbot 」
  • 案例 8706CE5A

    AquaStand可以讓冷飲保持多久涼?

    已完成
    第 1 次嘗試 · 已完成 17616ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges
    USERAquaStand可以讓冷飲保持多久涼?
    BOT讓我幫您查詢一下相關資訊 🔍 目前沒有找到AquaStand可以讓冷飲保持涼爽的具體時間資訊。如果您需要更詳細的保冷效能說明,建議您聯繫RHINOSHIELD客服專員協助確認。 看來這個問題需要專人為您服務!✨ 讓我馬上幫您呼叫救援~ 請你完整填寫以下客服表單,我們的客服團隊會根據你提供的資訊快速於服務時間內協助你: https://url.rhinoshield.fr/fr-chatbot 感謝你的配合!

    知識檢索

    0.0%
    Precision
    0.0%
    Recall
    0.0%
    F1
    0.0%
    預期 (1)
    • know_367828
    意料之外 (5)
    • ! know_367888
    • ! know_367829
    • ! know_367889
    • ! know_367832
    • ! know_368067
    TP 0
    FP 5
    FN 1

    回答品質

    36.7%
    相關性
    80.0%
    完整性
    30.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    0.0% · w 60%
    • AquaStand可以讓冷飲保持涼爽8小時
    II 重要
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 目前沒有找到AquaStand可以讓冷飲保持涼爽的具體時間資訊。如果您需要更詳細的保冷效能說明,建議您聯繫RHINOSHIELD客服專員協助確認。 看來這個問題需要專人為您服務!✨ 讓我馬上幫您呼叫救援~ 請你完整填寫以下客服表單,我們的客服團隊會根據你提供的資訊快速於服務時間內協助你: https://url.rhinoshield.fr/fr-chatbot 感謝你的配合!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • AquaStand可以讓冷飲保持涼爽8小時
    Judge 推理
    回覆未提供AquaStand的保冷時間,且未滿足具體回答的要求。雖然有詢問客服的建議,但未直接回答用戶的問題,導致完整性和正確性得分低。
  • 案例 897017EC

    Apple Watch 編織手環有含 BPS 嗎

    已完成
    第 1 次嘗試 · 已完成 17998ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges
    USERApple Watch 編織手環有含 BPS 嗎
    BOT馬上為您找找看相關內容 📋 RHINOSHIELD 的 Apple Watch 編織手環(法文稱 bracelet tressé Apple Watch RHINOSHIELD)不含 BPS、BPA 或 BPF。您的健康與安全是 RHINOSHIELD 的首要考量,因此這款編織手環完全不含這些物質。 如果您有其他關於材質或安全性的疑問,也歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • know_367967
    意料之外 (4)
    • ! know_367874
    • ! know_367968
    • ! know_367870
    • ! know_367947
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆中提到的編織手環不含 BPS、BPA 或 BPF 的資訊,與來源中的內容完全一致,因此所有的事實陳述都得到了支持。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 RHINOSHIELD 的 Apple Watch 編織手環(法文稱 bracelet tressé Apple Watch RHINOSHIELD)不含 BPS、BPA 或 BPF。您的健康與安全是 RHINOSHIELD 的首要考量,因此這款編織手環完全不含這些物質。 如果您有其他關於材質或安全性的疑問,也歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 這款 Apple Watch 編織手環不含任何 BPA/BPF/BPS
    Judge 推理
    這個回答完全符合用戶的問題,清楚地指出 Apple Watch 編織手環不含 BPS、BPA 或 BPF,並且提供了額外的安全性考量,顯示出完整性和正確性。
  • 案例 A861C9D1

    RHINOSHIELD SolidX/ SolidSuit 有沒有 BPA/BPF/BPS?

    已完成
    第 1 次嘗試 · 已完成 20349ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges → search_products
    USERRHINOSHIELD SolidX/ SolidSuit 有沒有 BPA/BPF/BPS?
    BOT正在為您搜尋最新資料 ⏳ 您好,我是犀牛盾智能客服,很高興為您服務! 根據目前資訊,RHINOSHIELD SolidX 與 SolidSuit 手機殼皆不含 BPA、BPF、BPS。您的健康與安全是我們的首要考量,因此這兩款產品在設計時已排除這些常見於塑膠中的化學物質,請您可以安心使用。 如果還有其他疑問,歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • know_367810
    意料之外 (4)
    • ! know_367813
    • ! know_367980
    • ! know_368033
    • ! know_368042
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到RHINOSHIELD SolidX和SolidSuit不含BPA、BPF、BPS,這一點在來源中有明確支持,因此所有的事實陳述都是有根據的。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您好,我是犀牛盾智能客服,很高興為您服務! 根據目前資訊,RHINOSHIELD SolidX 與 SolidSuit 手機殼皆不含 BPA、BPF、BPS。您的健康與安全是我們的首要考量,因此這兩款產品在設計時已排除這些常見於塑膠中的化學物質,請您可以安心使用。 如果還有其他疑問,歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • RHINOSHIELD SolidX/ SolidSuit 不含任何 BPA/BPF/BPS
    III 補充說明 w 10%
    • 您的健康與安全是我們的優先考量
    Judge 推理
    這個回答完全符合用戶的問題,並且提供了正確的資訊,確認了產品不含 BPA/BPF/BPS,並且強調了健康與安全的考量,完整性和正確性都達到滿分。
  • 案例 A8D940E0

    要怎麼刪除我的會員帳號?

    已完成
    第 1 次嘗試 · 已完成 26181ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges
    USER要怎麼刪除我的會員帳號?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! 若您想刪除您的會員帳號,請您完整填寫以下客服表單並提供您的會員帳號資訊,我們會在服務時間內盡快協助您處理: https://url.rhinoshield.fr/fr-chatbot 感謝您的配合!

    知識檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • know_368097
    意料之外 (4)
    • ! know_368000
    • ! know_368002
    • ! know_368078
    • ! know_368112
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆內容完全符合來源資料,並且提供了正確的刪除會員帳號的步驟和連結,因此沒有任何虛構的聲明。

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    80.0% · w 60%
    • 提供完整的會員帳號資訊
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! 若您想刪除您的會員帳號,請您完整填寫以下客服表單並提供您的會員帳號資訊,我們會在服務時間內盡快協助您處理: https://url.rhinoshield.fr/fr-chatbot 感謝您的配合!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 請填寫服務客戶表單
    • 提供完整的會員帳號資訊
    III 補充說明 w 10%
    • 我們會在服務時間內儘快回覆您
    Judge 推理
    回覆內容針對刪除會員帳號的問題提供了正確的指引,並且包含了客服表單的連結。雖然提到需要提供會員帳號資訊,但未明確指出要提供完整的會員帳號資訊,因此在完整性上扣了一些分數。
  • 案例 CBD6417C

    Apple Watch 的外殼能吸收多少衝擊力?

    已完成
    第 1 次嘗試 · 已完成 26713ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges
    USERApple Watch 的外殼能吸收多少衝擊力?
    BOT馬上為您找找看相關內容 📋 RHINOSHIELD 的 Apple Watch 保護殼經過測試,能夠承受超過2公尺的跌落,並可吸收90%的衝擊力。這代表它的防護力超越美國軍規標準,非常適合需要高防護等級的使用者。 如果您有其他關於 Apple Watch 保護殼的問題,也歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • know_367873
    意料之外 (4)
    • ! know_367890
    • ! know_367872
    • ! know_367870
    • ! know_367874
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆中提到的衝擊力吸收能力和跌落高度均有來源支持,且符合來源中的描述,因此沒有虛構的聲明。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 RHINOSHIELD 的 Apple Watch 保護殼經過測試,能夠承受超過2公尺的跌落,並可吸收90%的衝擊力。這代表它的防護力超越美國軍規標準,非常適合需要高防護等級的使用者。 如果您有其他關於 Apple Watch 保護殼的問題,也歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Apple Watch 的外殼能吸收 90% 的衝擊力
    • 能抵抗超過 2 米的跌落
    Judge 推理
    這個回答完全符合用戶的問題,提供了 Apple Watch 外殼能吸收的衝擊力和抵抗的跌落高度,且所有資訊都是正確的。
  • 案例 0531AA00

    請問 RHINOSHIELD AirX 的殼子可以回收嗎?還有 Jujutsu Kaisen 的系列可以選擇嗎?

    已完成
    第 1 次嘗試 · 已完成 45672ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    ✗ 已呼叫 0 / 1 個工具
    未呼叫:get_history
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_knowledges → search_products
    USER請問 RHINOSHIELD AirX 的殼子可以回收嗎?還有 Jujutsu Kaisen 的系列可以選擇嗎?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! 1. 關於 RHINOSHIELD AirX 手機殼是否可以回收: AirX 手機殼是採用單一可回收材質製成,100% 可回收。這代表您的 AirX 殼子在使用後可以被回收再製,對環境更加友善。 2. 關於 Jujutsu Kaisen(咒術迴戰)系列: 目前 RHINOSHIELD 有推出 Jujutsu Kaisen 咒術迴戰聯名系列,包含多款角色設計的手機殼與配件,您可以挑選喜歡的角色與設計。 更多資訊與選購請參考: Jujutsu Kaisen 咒術迴戰系列 https://rhinoshield.fr/design-studio/collections/jujutsu-kaisen 如果您有特定手機型號或想了解更多細節,歡迎再告訴我!

    知識檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • know_367812
    意料之外 (4)
    • ! know_367814
    • ! know_367813
    • ! know_368090
    • ! know_367799
    TP 1
    FP 4
    FN 0

    產品檢索

    100.0%
    Precision
    20.0%
    Recall
    100.0%
    F1
    33.3%
    預期 (1)
    • prod_978574
    意料之外 (4)
    • ! prod_978569
    • ! prod_978683
    • ! prod_978566
    • ! prod_978733
    TP 1
    FP 4
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆中提到的 RHINOSHIELD AirX 手機殼可回收的資訊與來源一致,且 Jujutsu Kaisen 系列的存在也有來源支持,因此所有的事實陳述都是有根據的。

    回答品質

    90.0%
    相關性
    100.0%
    完整性
    70.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    75.0% · w 60%
    • 符合可持續發展的原則
    • 可以選擇包含角色如 Yuji、Megumi、Nobara 和 Gojo 的各種殼子及配件
    II 重要
    III 補充
    10.0% · w 10%
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是犀牛盾智能客服,很高興為您服務! 1. 關於 RHINOSHIELD AirX 手機殼是否可以回收: AirX 手機殼是採用單一可回收材質製成,100% 可回收。這代表您的 AirX 殼子在使用後可以被回收再製,對環境更加友善。 2. 關於 Jujutsu Kaisen(咒術迴戰)系列: 目前 RHINOSHIELD 有推出 Jujutsu Kaisen 咒術迴戰聯名系列,包含多款角色設計的手機殼與配件,您可以挑選喜歡的角色與設計。 更多資訊與選購請參考: Jujutsu Kaisen 咒術迴戰系列 https://rhinoshield.fr/design-studio/collections/jujutsu-kaisen 如果您有特定手機型號或想了解更多細節,歡迎再告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • RHINOSHIELD AirX 的殼子是由 100% 可回收的單一材料製成
    • 符合可持續發展的原則
    • 可以選擇包含角色如 Yuji、Megumi、Nobara 和 Gojo 的各種殼子及配件
    III 補充說明 w 10%
    • 希望這些資訊能幫助到您
    Judge 推理
    AI 的回覆在相關性和正確性上表現良好,但在完整性上缺少了幾個關鍵點,包括可持續發展的原則和具體角色選擇。