執行 #212

SWAG Creator AI bot (bulk R1) → production-canary (canary)

狀態
已完成
案例
30
開始時間
16 May 12:19
耗時
1008.7s
¶ Economics · Bot-side N=30 attempts

Cost & Tokens

$0.1371
Total Bot Cost · USD
81.3%
Prompt Cache Hit
cost per case
$0.0046
cost per 1k tokens
$0.0010
input tokens
132,259
output tokens
4,236
cached tokens — prompt-cache hit
107,520
Total Tokens
136,495
economic efficiency
cost per correct
$0.0013
pass rate
73.3%
22 / 30
judge cost
$0.0285
設定快照(reproducibility) 1 個 bot 已捕捉 · Judge:gpt-4o-mini

Bot 設定快照

  • 34eb669a-4362-4481-8f19-6dbf611d5215 168 筆 KB
    SystemPrompt: sha256:a147cf42 KBContent: sha256:9842c6dc Tools: sha256:cb414772 Scenarios: sha256:7924da8e AI: gpt-4.1-2025-04-14 (T=0.0, max=2048)

Judge 設定快照

model: gpt-4o-mini T=0.0 max=4096 prompt: v1
已完成
30 / 30
錯誤
0
失敗維度
1
首字延遲 p95
12609 ms
Bot 成本(Neptune)
$0.1371
Bot Tokens(Neptune)
136,495
Judge 成本(Eris)
$0.0285
Judge Tokens(Eris)
216,797
項目 I.

知識庫精準度

kb_accuracy 10 cases

維度總表

各維度品質分 · 覆蓋率
找對資料 召回
retrieval
100.0%
[100.0% – 100.0%] · n=10
F1 18.2% · 相關率 13.3% · 精確 10.0%
10 / 10 適用 · 1 提示
不亂編造 平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位 平均
answer_quality
94.0%
[89.3% – 98.0%] · n=10
10 / 10 適用
  • 案例 C468F59D

    推薦獎金是怎麼計算的?

    已完成
    第 1 次嘗試 · 已完成 38216ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ### 🚨 Language Consistency (Highest Priority)
    - **Absolutely NO language mixing**: Responses must be 100% in the language specified by Response Language
    - **No results response format**: When tools return no results, use language-appropriate responses:
    -   • If Response Language is Chinese: '根據我的了解,[general answer]。為了確保準確,建議你跟真人客服確認一下喔!'
    -   • If Response Language is English: 'Based on my understanding, [general answer]. For accuracy, I recommend confirming with our customer service team!'
    -   • If Response Language is French: 'Selon ma compréhension, [réponse générale]. Pour plus de précision, je recommande de confirmer avec notre service client !'
    -   • For other languages: Use equivalent expressions in the target language
    - 
    - ### Core Principles
    - All answers MUST be based on <tool: search_knowledge_and_products> tool output, NEVER fabricate
    - NEVER fabricate: Product/service details, policies, promotional offers, pre-sales/after-sales services, real-time data
    - 
    - ### User Intent Analysis (CRITICAL)
    - **Informational questions** (how/why/what/when/where) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - **Product requests** (recommendations/suggestions/comparisons) → Provide product information
    - **Mixed intent** → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - 
    - ### Conversation History Check (Avoid Repetition)
    - **MANDATORY**: Before recommending products, review conversation history for already mentioned products
    - If products were previously recommended but user showed NO strong interest → DO NOT repeat those products
    - If user actively asked follow-up questions about previously mentioned products → MAY mention them again with NEW information
    - ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent
    - 
    - ### Response & Format Requirements
    - **Product recommendation rules** (STRICT criteria):
    -   • **ONLY recommend products when user explicitly uses these phrases**:
    -     • '推薦[商品]' (recommend [product]), '介紹[商品]' (introduce [product])
    -     • '想買' (want to buy), '購買' (purchase), '選擇' (choose)
    -     • '比較' (compare), '差別' (difference between products)
    -   • **NEVER recommend products for**:
    -     • Pure informational questions (how/why/what/when/where)
    -     • Knowledge-seeking queries without purchase intent
    -     • General curiosity about topics
    -     • Questions answered sufficiently with knowledge content
    -   • **FORBIDDEN phrases that trigger unwanted recommendations**:
    -     • '不過我可以為您推薦一些產品'
    -     • '如果您有興趣,我可以推薦'
    -     • '我們有以下產品可以考慮'
    -     • Any proactive product suggestions when not requested
    -   • **When products ARE appropriate**: Provide ONLY these details:
    -     • Product Title
    -     • Price (also show price_sale if available)
    -     • Key specifications
    -     • One-sentence recommendation reason
    -     • **STRICTLY FORBIDDEN for products**: URLs, links, images, or any other information not listed above
    - **Knowledge information display**: When providing knowledge answers:
    -   • **URL format**: 'Topic Name: URL' (example: Customer Form: https://example.com)
    -   • **ABSOLUTELY FORBIDDEN**: markdown format [text](url). NEVER write [Customer Form](url), ALWAYS write Customer Form: url
    -   • **Image format**: 
    
    ![](image_url)
    
     (Use ONLY image links from tool messages)
    - 
    - ### Prohibited Terms
    - MUST NOT mention: 'knowledge base', 'database', 'system records', 'internal data', 'documentation'
    - NEVER use robotic phrases: 'according to our data', 'based on knowledge base', 'system shows'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    - 
    - **Pre-response Checklist**: □ Correct language □ Based on tool results □ Natural expression
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER推薦獎金是怎麼計算的?
    BOT稍等一下我來幫您查詢 💡 您好,我是 SWAG Creator AI bot,很高興為您解答! 推薦獎金的計算方式如下: 當您成功推薦好友註冊後,您將獲得該好友每月收益的20%作為推薦獎勵!這筆獎勵完全不會影響好友本身的收益,是由 SWAG 額外加碼提供。推薦越多好友,領取的獎金就越多,且獎金無上限!獎勵領取期間為:好友使用您的推薦碼註冊後,12 個月內都可領取。 詳細說明可參考推薦頁面:https://swag.live/settings/referral 如果還有其他相關問題,歡迎再詢問!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377409 · 推薦獎金
      問題
      推薦獎金
      回答
      推薦獎金說明,可至推薦頁面確認:https://swag.live/settings/referral 成功推薦好友註冊後,將獲得該好友每月收益的20%推薦獎勵!該獎勵不影響好友的收益,由SWAG加碼提供!推薦越多好友領越多!獎金無上限!(獎勵領取期間:好友使用推薦碼註冊後,12個月內都可領取) 如仍有其他問題請描述清楚,將於上班時段為寶貝處理,請寶貝耐心等候
    意料之外 (9)
    • ! know_377487 · 推薦主播
      問題
      推薦主播
      回答
      如果你是主播,推薦其他人進來直播,可以額外獲得被推薦人的20%收益獎勵唷(為期一年) 詳細請你詳閱說明:https://reurl.cc/epkZox
    • ! know_377444 · 勞報單
      問題
      勞報單
      回答
      因應台灣法規,台灣國籍創作者需填寫勞報單 平台的提領方式是月結,每個月的最後一天做結算,達到後會於以下時間發送勞報單 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) 📍每月15號(遇假日提前) ∙ 分潤+活動獎勵/補出款 ∙ 每月 6–10 日 發送勞報單。需於 10 號前完成,才可於 15 號出款 📍每月25號(遇假日提前) ∙ 補出款(未趕上 15 號者需找小編申請要補出) ∙ 每月 18–20 日 發送勞報單。需於 20 號前完成,才可於 25 號出款 📍工會收據收集: - 收集表單:每個月15發送到小鈴噹 - 收集時間:每月12號-29號,超過時間無法補件 - 備註: 1.填寫表單更改為固定同一份(連結相同) 2.若有一次提供一季則期間內後續無需每月重新提供 3.假設5/15發送(代表為五月分潤),提供的有效期限需包含5月的才有效 4.僅接受表單填寫的資料,不接受其他方式提供 5.當月勞報單金額發出後不接受補件當期、超過當月填寫時間也不接受補件
    • ! know_377400 · 我要提領
      問題
      我要提領
      回答
      平台的提領方式是月結,結算到每個月最後一天,隔月初(1~10號不一定)會收回本月賺取的鑽石收益 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) 當月15號(遇假日提前):出款上月「鑽石分潤」+「活動獎勵」+「補出款申請」 • 每月 6–10 日 發送勞報單,請於時間內填寫完成才可出款 當月25號(遇假日提前):「補出款」(未趕上 15 號者請留言『真人客服』申請補出) • 勞報單約於 18 - 20 號發放,請於時間內填寫完成才可出款
    • ! know_377483 · 改收款地址
      問題
      改收款地址
      回答
      台灣主播是使用台幣進行收款,請點擊此網址進行更改:台幣收款帳戶填寫表單: https://creator-info-f2327.web.app/tw 如果是其他地區主播要更改收款,請留言『真人客服』,由相關人員提供勾改方式給您
    • ! know_377445 · 出帳時間
      問題
      出帳時間
      回答
      出款時間:每個月15號出鑽石分潤、如未填寫勞報單可以於15號.25號申請補出款 📍每月15號(遇假日提前) ∙ 分潤+活動獎勵/補出款 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) ∙ 每月 6–10 日 發送勞報單。需於 10 號前完成,才可於 15 號出款 📍每月25號(遇假日提前) ∙ 補出款(未趕上 15 號者需找小編申請要補出) ∙ 每月 18–20 日 發送勞報單。需於 20 號前完成,才可於 25 號出款 📍工會收據收集: - 收集表單:每個月15發送到小鈴噹 - 收集時間:每月12號-29號,超過時間無法補件 - 備註: 1.填寫表單更改為固定同一份(連結相同) 2.若有一次提供一季則期間內後續無需每月重新提供 3.假設5/15發送(代表為五月分潤),提供的有效期限需包含5月的才有效 4.僅接受表單填寫的資料,不接受其他方式提供 5.當月勞報單金額發出後不接受補件當期、超過當月填寫時間也不接受補件
    • ! know_377446 · 什麼時候出帳
      問題
      什麼時候出帳
      回答
      出款時間:每個月15號出鑽石分潤、如未填寫勞報單可以於15號.25號申請補出款 📍每月15號(遇假日提前) ∙ 分潤+活動獎勵/補出款 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) ∙ 每月 6–10 日 發送勞報單。需於 10 號前完成,才可於 15 號出款 📍每月25號(遇假日提前) ∙ 補出款(未趕上 15 號者需找小編申請要補出) ∙ 每月 18–20 日 發送勞報單。需於 20 號前完成,才可於 25 號出款 📍工會收據收集: - 收集表單:每個月15發送到小鈴噹 - 收集時間:每月12號-29號,超過時間無法補件 - 備註: 1.填寫表單更改為固定同一份(連結相同) 2.若有一次提供一季則期間內後續無需每月重新提供 3.假設5/15發送(代表為五月分潤),提供的有效期限需包含5月的才有效 4.僅接受表單填寫的資料,不接受其他方式提供 5.當月勞報單金額發出後不接受補件當期、超過當月填寫時間也不接受補件
    • ! know_377399 · 怎麼出帳?
      問題
      怎麼出帳?
      回答
      平台的提領方式是月結,計算的時間是每月1號~最後一天,並於次月出帳 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) 當月15號(遇假日提前):出款上月「鑽石分潤」+「活動獎勵」+「補出款申請」 • 每月 6–10 日 發送勞報單,請於時間內填寫完成才可出款 當月25號(遇假日提前):「補出款」(未趕上 15 號者請留言『真人客服』申請補出) • 勞報單約於 18 - 20 號發放,請於時間內填寫完成才可出款
    • ! know_377464 · 我的獎金是多少?
      問題
      我的獎金是多少?
      回答
      你是說什麼的獎金呢?請清楚描述
    • ! know_377460 · 怎麼加入工會
      問題
      怎麼加入工會
      回答
      我們沒有推薦的工會,您可以再坊間看一下適合自己的工會加入。
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆完全符合來源資料中的內容,所有的事實陳述都有來源支持,因此沒有任何虛構的聲明。

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    100.0% · w 30%
    III 補充
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是 SWAG Creator AI bot,很高興為您解答! 推薦獎金的計算方式如下: 當您成功推薦好友註冊後,您將獲得該好友每月收益的20%作為推薦獎勵!這筆獎勵完全不會影響好友本身的收益,是由 SWAG 額外加碼提供。推薦越多好友,領取的獎金就越多,且獎金無上限!獎勵領取期間為:好友使用您的推薦碼註冊後,12 個月內都可領取。 詳細說明可參考推薦頁面:https://swag.live/settings/referral 如果還有其他相關問題,歡迎再詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 成功推薦好友註冊後,將獲得該好友每月收益的20%推薦獎勵
    • 獎金無上限
    II 重要限制 w 30%
    • 推薦越多好友領越多
    Judge 推理
    這個回答完整地解釋了推薦獎金的計算方式,並且涵蓋了所有關鍵要點。雖然提供了額外的詳細說明,但沒有明顯的缺失。
  • 案例 38133277

    固定時段直播多少時候可以改?

    已完成
    第 1 次嘗試 · 已完成 37927ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ### 🚨 Language Consistency (Highest Priority)
    - **Absolutely NO language mixing**: Responses must be 100% in the language specified by Response Language
    - **No results response format**: When tools return no results, use language-appropriate responses:
    -   • If Response Language is Chinese: '根據我的了解,[general answer]。為了確保準確,建議你跟真人客服確認一下喔!'
    -   • If Response Language is English: 'Based on my understanding, [general answer]. For accuracy, I recommend confirming with our customer service team!'
    -   • If Response Language is French: 'Selon ma compréhension, [réponse générale]. Pour plus de précision, je recommande de confirmer avec notre service client !'
    -   • For other languages: Use equivalent expressions in the target language
    - 
    - ### Core Principles
    - All answers MUST be based on <tool: search_knowledge_and_products> tool output, NEVER fabricate
    - NEVER fabricate: Product/service details, policies, promotional offers, pre-sales/after-sales services, real-time data
    - 
    - ### User Intent Analysis (CRITICAL)
    - **Informational questions** (how/why/what/when/where) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - **Product requests** (recommendations/suggestions/comparisons) → Provide product information
    - **Mixed intent** → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - 
    - ### Conversation History Check (Avoid Repetition)
    - **MANDATORY**: Before recommending products, review conversation history for already mentioned products
    - If products were previously recommended but user showed NO strong interest → DO NOT repeat those products
    - If user actively asked follow-up questions about previously mentioned products → MAY mention them again with NEW information
    - ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent
    - 
    - ### Response & Format Requirements
    - **Product recommendation rules** (STRICT criteria):
    -   • **ONLY recommend products when user explicitly uses these phrases**:
    -     • '推薦[商品]' (recommend [product]), '介紹[商品]' (introduce [product])
    -     • '想買' (want to buy), '購買' (purchase), '選擇' (choose)
    -     • '比較' (compare), '差別' (difference between products)
    -   • **NEVER recommend products for**:
    -     • Pure informational questions (how/why/what/when/where)
    -     • Knowledge-seeking queries without purchase intent
    -     • General curiosity about topics
    -     • Questions answered sufficiently with knowledge content
    -   • **FORBIDDEN phrases that trigger unwanted recommendations**:
    -     • '不過我可以為您推薦一些產品'
    -     • '如果您有興趣,我可以推薦'
    -     • '我們有以下產品可以考慮'
    -     • Any proactive product suggestions when not requested
    -   • **When products ARE appropriate**: Provide ONLY these details:
    -     • Product Title
    -     • Price (also show price_sale if available)
    -     • Key specifications
    -     • One-sentence recommendation reason
    -     • **STRICTLY FORBIDDEN for products**: URLs, links, images, or any other information not listed above
    - **Knowledge information display**: When providing knowledge answers:
    -   • **URL format**: 'Topic Name: URL' (example: Customer Form: https://example.com)
    -   • **ABSOLUTELY FORBIDDEN**: markdown format [text](url). NEVER write [Customer Form](url), ALWAYS write Customer Form: url
    -   • **Image format**: 
    
    ![](image_url)
    
     (Use ONLY image links from tool messages)
    - 
    - ### Prohibited Terms
    - MUST NOT mention: 'knowledge base', 'database', 'system records', 'internal data', 'documentation'
    - NEVER use robotic phrases: 'according to our data', 'based on knowledge base', 'system shows'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    - 
    - **Pre-response Checklist**: □ Correct language □ Based on tool results □ Natural expression
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER固定時段直播多少時候可以改?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 SWAG Creator AI bot,很高興為您服務! 關於「固定時段直播」的時間更改問題,目前已經設定好的固定時段直播時間是無法再更改的,請以當月設定的時間為主。 如果還有其他直播相關問題,也歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377538 · 我想更換固定時段直播的時間
      問題
      我想更換固定時段直播的時間
      回答
      妳好,固定時段的時間以當月設定的為主,已經設定好的時間就不能再更改了唷!
    意料之外 (9)
    • ! know_377543 · 可以同時用好幾個直播平台直播嗎
      問題
      可以同時用好幾個直播平台直播嗎
      回答
      開直播時請不要同時進行其他平台的直播喔,如果被審核相關人員確認到,會進行關閉直播權限的
    • ! know_377512 · 快速上手直播設定,提升你的直播曝光
      問題
      快速上手直播設定,提升你的直播曝光
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/e27085b7-83e7-4fdf-9b0c-8d60f5629ac1--%E5%BF%AB%E9%80%9F%E4%B8%8A%E6%89%8B%E7%9B%B4%E6%92%AD%E8%A8%AD%E5%AE%9A%E6%8F%90%E5%8D%87%E4%BD%A0%E7%9A%84%E7%9B%B4%E6%92%AD%E6%9B%9D%E5%85%89/index.html
    • ! know_377442 · 怎麼開直播?
      問題
      怎麼開直播?
      回答
      「直播」功能請參考以下說明:https://reurl.cc/R2kDgn
    • ! know_377423 · 如何直播
      問題
      如何直播
      回答
      「直播」功能請參考以下說明:https://reurl.cc/O6mzmg
    • ! know_377443 · 直播是什麼?
      問題
      直播是什麼?
      回答
      「直播」功能請參考以下說明:https://reurl.cc/R2kDgn
    • ! know_377483 · 改收款地址
      問題
      改收款地址
      回答
      台灣主播是使用台幣進行收款,請點擊此網址進行更改:台幣收款帳戶填寫表單: https://creator-info-f2327.web.app/tw 如果是其他地區主播要更改收款,請留言『真人客服』,由相關人員提供勾改方式給您
    • ! know_377513 · 直播模式說明
      問題
      直播模式說明
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/b55ffc83-e56d-44dc-a79e-0cac22c3eb43-%E7%9B%B4%E6%92%AD%E6%A8%A1%E5%BC%8F%E8%AA%AA%E6%98%8E/index.html
    • ! know_377545 · 上傳內容的規則限制
      問題
      上傳內容的規則限制
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/d2375195-4b8b-4c19-b1ac-9598985045d3-%E5%85%A7%E5%AE%B9%E9%81%95%E8%A6%8F/index.html
    • ! know_377474 · 上傳有什麼規則限制
      問題
      上傳有什麼規則限制
      回答
      規範可至以下網址詳讀唷~ https://reurl.cc/vEL8Kj
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到的固定時段直播時間無法更改的資訊,與來源中的內容完全一致,因此該句話是有根據的。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 SWAG Creator AI bot,很高興為您服務! 關於「固定時段直播」的時間更改問題,目前已經設定好的固定時段直播時間是無法再更改的,請以當月設定的時間為主。 如果還有其他直播相關問題,也歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 固定時段的時間以當月設定的為主
    • 已經設定好的時間就不能再更改
    Judge 推理
    這個回答完全符合用戶的問題,清楚地說明了固定時段直播的時間以當月設定的為主,且已設定的時間無法更改,並且沒有錯誤的陳述。
  • 案例 842D7E26

    請問怎麼在貼文選單中找到刪除選項?

    已完成
    第 1 次嘗試 · 已完成 29786ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ### 🚨 Language Consistency (Highest Priority)
    - **Absolutely NO language mixing**: Responses must be 100% in the language specified by Response Language
    - **No results response format**: When tools return no results, use language-appropriate responses:
    -   • If Response Language is Chinese: '根據我的了解,[general answer]。為了確保準確,建議你跟真人客服確認一下喔!'
    -   • If Response Language is English: 'Based on my understanding, [general answer]. For accuracy, I recommend confirming with our customer service team!'
    -   • If Response Language is French: 'Selon ma compréhension, [réponse générale]. Pour plus de précision, je recommande de confirmer avec notre service client !'
    -   • For other languages: Use equivalent expressions in the target language
    - 
    - ### Core Principles
    - All answers MUST be based on <tool: search_knowledge_and_products> tool output, NEVER fabricate
    - NEVER fabricate: Product/service details, policies, promotional offers, pre-sales/after-sales services, real-time data
    - 
    - ### User Intent Analysis (CRITICAL)
    - **Informational questions** (how/why/what/when/where) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - **Product requests** (recommendations/suggestions/comparisons) → Provide product information
    - **Mixed intent** → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - 
    - ### Conversation History Check (Avoid Repetition)
    - **MANDATORY**: Before recommending products, review conversation history for already mentioned products
    - If products were previously recommended but user showed NO strong interest → DO NOT repeat those products
    - If user actively asked follow-up questions about previously mentioned products → MAY mention them again with NEW information
    - ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent
    - 
    - ### Response & Format Requirements
    - **Product recommendation rules** (STRICT criteria):
    -   • **ONLY recommend products when user explicitly uses these phrases**:
    -     • '推薦[商品]' (recommend [product]), '介紹[商品]' (introduce [product])
    -     • '想買' (want to buy), '購買' (purchase), '選擇' (choose)
    -     • '比較' (compare), '差別' (difference between products)
    -   • **NEVER recommend products for**:
    -     • Pure informational questions (how/why/what/when/where)
    -     • Knowledge-seeking queries without purchase intent
    -     • General curiosity about topics
    -     • Questions answered sufficiently with knowledge content
    -   • **FORBIDDEN phrases that trigger unwanted recommendations**:
    -     • '不過我可以為您推薦一些產品'
    -     • '如果您有興趣,我可以推薦'
    -     • '我們有以下產品可以考慮'
    -     • Any proactive product suggestions when not requested
    -   • **When products ARE appropriate**: Provide ONLY these details:
    -     • Product Title
    -     • Price (also show price_sale if available)
    -     • Key specifications
    -     • One-sentence recommendation reason
    -     • **STRICTLY FORBIDDEN for products**: URLs, links, images, or any other information not listed above
    - **Knowledge information display**: When providing knowledge answers:
    -   • **URL format**: 'Topic Name: URL' (example: Customer Form: https://example.com)
    -   • **ABSOLUTELY FORBIDDEN**: markdown format [text](url). NEVER write [Customer Form](url), ALWAYS write Customer Form: url
    -   • **Image format**: 
    
    ![](image_url)
    
     (Use ONLY image links from tool messages)
    - 
    - ### Prohibited Terms
    - MUST NOT mention: 'knowledge base', 'database', 'system records', 'internal data', 'documentation'
    - NEVER use robotic phrases: 'according to our data', 'based on knowledge base', 'system shows'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    - 
    - **Pre-response Checklist**: □ Correct language □ Based on tool results □ Natural expression
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER請問怎麼在貼文選單中找到刪除選項?
    BOT稍等一下我來幫您查詢 💡 您可以參考這個說明,了解如何在貼文選單中找到刪除選項: 如何刪除貼文: https://reurl.cc/4lN8LL 如果您需要更詳細的步驟或遇到特殊情況,也可以點擊上方連結查看完整操作說明。

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377509 · 刪除功能(貼文)
      問題
      刪除功能(貼文)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/872aa97c-2e92-4934-9323-45d20203cf43-%E5%88%AA%E9%99%A4%E5%8A%9F%E8%83%BD%E8%B2%BC%E6%96%87/index.html
    意料之外 (9)
    • ! know_377431 · 如何刪除貼文
      問題
      如何刪除貼文
      回答
      「貼文」刪除方法如下 https://reurl.cc/4lN8LL
    • ! know_377527 · 刪除功能(限時動態)
      問題
      刪除功能(限時動態)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/392307a3-ba38-42a1-a7cd-32688c6eefeb-%E5%88%AA%E9%99%A4%E5%8A%9F%E8%83%BD%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html
    • ! know_377452 · 如何刪除已經發布的影片
      問題
      如何刪除已經發布的影片
      回答
      打開moor app,至「已發佈」選擇您欲刪除的選項,點選進入後可以看到「刪除」選項,點擊刪除後點擊「確認」即可。
    • ! know_377490 · 可以刪除私訊嗎
      問題
      可以刪除私訊嗎
      回答
      訊息都是無法刪除的,這部分是為了保障雙方的權益,以避免產生爭議時仍有文字記錄可以進行依據
    • ! know_377427 · 如何刪除限時動態
      問題
      如何刪除限時動態
      回答
      「限時動態」刪除方法如下 https://reurl.cc/Q2aDdo
    • ! know_377432 · 如何更換貼文封面
      問題
      如何更換貼文封面
      回答
      依照以下步驟即可更換貼文封面囉 https://reurl.cc/53RaRv
    • ! know_377480 · 刪除帳號
      問題
      刪除帳號
      回答
      請告知欲刪除帳號的原因,並且留言『真人客服』為你轉交真人協助
    • ! know_377430 · 如何發貼文
      問題
      如何發貼文
      回答
      「貼文」功能請參考以下說明 https://reurl.cc/qpYXnq
    • ! know_377508 · 編輯內文(貼文)
      問題
      編輯內文(貼文)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/488c0f84-5f44-4401-9bf5-61d5d15dfae1-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E8%B2%BC%E6%96%87/index.html
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到的刪除貼文的說明與來源中的內容一致,因此所有的事實陳述都有來源支持,沒有虛構的內容。

    回答品質

    90.0%
    相關性
    100.0%
    完整性
    70.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 您可以在貼文的選單中找到刪除選項
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    稍等一下我來幫您查詢 💡 您可以參考這個說明,了解如何在貼文選單中找到刪除選項: 如何刪除貼文: https://reurl.cc/4lN8LL 如果您需要更詳細的步驟或遇到特殊情況,也可以點擊上方連結查看完整操作說明。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 您可以在貼文的選單中找到刪除選項
    III 補充說明 w 10%
    • 具體步驟可以參考這篇文章:https://public.swag.live/help-center-creator/zh-tw/articles/872aa97c-2e92-4934-9323-45d20203cf43-%E5%88%AA%E9%99%A4%E5%8A%9F%E8%83%BD%E8%B2%BC%E6%96%87/index.html
    Judge 推理
    回覆中提到的刪除選項的查詢方式是正確的,但未直接回答用戶的問題,缺少了關鍵的核心內容。
  • 案例 AA913BF6

    新主播報備前要注意什麼?

    已完成
    第 1 次嘗試 · 已完成 50740ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ### 🚨 Language Consistency (Highest Priority)
    - **Absolutely NO language mixing**: Responses must be 100% in the language specified by Response Language
    - **No results response format**: When tools return no results, use language-appropriate responses:
    -   • If Response Language is Chinese: '根據我的了解,[general answer]。為了確保準確,建議你跟真人客服確認一下喔!'
    -   • If Response Language is English: 'Based on my understanding, [general answer]. For accuracy, I recommend confirming with our customer service team!'
    -   • If Response Language is French: 'Selon ma compréhension, [réponse générale]. Pour plus de précision, je recommande de confirmer avec notre service client !'
    -   • For other languages: Use equivalent expressions in the target language
    - 
    - ### Core Principles
    - All answers MUST be based on <tool: search_knowledge_and_products> tool output, NEVER fabricate
    - NEVER fabricate: Product/service details, policies, promotional offers, pre-sales/after-sales services, real-time data
    - 
    - ### User Intent Analysis (CRITICAL)
    - **Informational questions** (how/why/what/when/where) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - **Product requests** (recommendations/suggestions/comparisons) → Provide product information
    - **Mixed intent** → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - 
    - ### Conversation History Check (Avoid Repetition)
    - **MANDATORY**: Before recommending products, review conversation history for already mentioned products
    - If products were previously recommended but user showed NO strong interest → DO NOT repeat those products
    - If user actively asked follow-up questions about previously mentioned products → MAY mention them again with NEW information
    - ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent
    - 
    - ### Response & Format Requirements
    - **Product recommendation rules** (STRICT criteria):
    -   • **ONLY recommend products when user explicitly uses these phrases**:
    -     • '推薦[商品]' (recommend [product]), '介紹[商品]' (introduce [product])
    -     • '想買' (want to buy), '購買' (purchase), '選擇' (choose)
    -     • '比較' (compare), '差別' (difference between products)
    -   • **NEVER recommend products for**:
    -     • Pure informational questions (how/why/what/when/where)
    -     • Knowledge-seeking queries without purchase intent
    -     • General curiosity about topics
    -     • Questions answered sufficiently with knowledge content
    -   • **FORBIDDEN phrases that trigger unwanted recommendations**:
    -     • '不過我可以為您推薦一些產品'
    -     • '如果您有興趣,我可以推薦'
    -     • '我們有以下產品可以考慮'
    -     • Any proactive product suggestions when not requested
    -   • **When products ARE appropriate**: Provide ONLY these details:
    -     • Product Title
    -     • Price (also show price_sale if available)
    -     • Key specifications
    -     • One-sentence recommendation reason
    -     • **STRICTLY FORBIDDEN for products**: URLs, links, images, or any other information not listed above
    - **Knowledge information display**: When providing knowledge answers:
    -   • **URL format**: 'Topic Name: URL' (example: Customer Form: https://example.com)
    -   • **ABSOLUTELY FORBIDDEN**: markdown format [text](url). NEVER write [Customer Form](url), ALWAYS write Customer Form: url
    -   • **Image format**: 
    
    ![](image_url)
    
     (Use ONLY image links from tool messages)
    - 
    - ### Prohibited Terms
    - MUST NOT mention: 'knowledge base', 'database', 'system records', 'internal data', 'documentation'
    - NEVER use robotic phrases: 'according to our data', 'based on knowledge base', 'system shows'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    - 
    - **Pre-response Checklist**: □ Correct language □ Based on tool results □ Natural expression
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER新主播報備前要注意什麼?
    BOT馬上為您找找看相關內容 📋 您好,我是 SWAG Creator AI bot,很高興為您解答! 新主播在報備前,請務必注意以下幾點: 1. 請詳細閱讀開始經營前的相關說明,確保了解平台規則與流程。說明連結: https://reurl.cc/53RXyq 2. 務必填寫「台幣帳戶」資料,未來所有收入都會以台幣匯款給您。帳戶填寫表單: https://creator-info-f2327.web.app/forms/tw 3. 若您有特殊需求需使用非本人帳戶收款,請依規定提供切結書及佐證影片,詳細規範請參考:非本人個人帳戶收款:https://drive.google.com/file/d/1HdtcU0Fsa1c6aHaBg2aji6M7kpLutTT6/view?usp=drive_link 如果還有其他疑問或需要協助,歡迎隨時告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377393 · 新主播報備
      問題
      新主播報備
      回答
      歡迎您加入 SWAG ⭐️開始經營前務必詳讀 ⭐️ https://reurl.cc/53RXyq 請務必填寫「台幣帳戶」的資料呦~ https://creator-info-f2327.web.app/forms/tw 未來任何收入都會以台幣匯款給妳
    意料之外 (9)
    • ! know_377462 · 新主播報備
      問題
      新主播報備
      回答
      歡迎您加入 SWAG!🎉 在開始經營前,請務必詳讀以下內容: - ⭐️ 開始經營前務必詳讀 ⭐️: https://reurl.cc/qpY300 - 請務必填寫「台幣帳戶」的資料哦~: https://creator-info-f2327.web.app/forms/tw 台灣主播收入都會以台幣匯款給您。如果有其他問題或需要進一步的協助,隨時告訴我哦!😊 其他國家主播請留言『真人客服』,轉由真人協助,謝謝
    • ! know_377398 · 非本人收款 領取非本人收款切結書
      問題
      非本人收款 領取非本人收款切結書
      回答
      平台僅開放特殊因素者進行非本人帳戶收款,如無特殊因素,禁止非本人收款。 創作者代收款項規則及流程如下: 為確保雙方權益,只要提供符合規範之證明檔案,即可使用他人帳戶代收款項 (已取消「需提供帳戶不可使用之證明」規定) 如需使用他人帳戶收款,請務必提供以下資料: ∙ 匯款帳戶非本人切結書 ∙ 佐證影片一份 影片內容需清晰完整,並包含以下項目: 1.主播本人正面入鏡,五官清楚可辨識 2.手持或同時呈現切結書畫面 3.主播親自口述以下內容:  ∙ 本次出款時間  ∙ 出款金額  ∙ 明確表示同意由「帳戶持有人 XXX」代收本次款項 補充說明: ∙ 影片需一次性完整錄製,不得剪輯或拼接 ∙ 所有資訊須清楚可辨識,避免因資料不完整影響出款作業 其他注意事項: 每次出款皆需依上述規範辦理,以確保流程順利並避免後續爭議。 若提供資料不完整或未通過審核,將可能導致出款延後,相關影響需自行承擔。 非本人個人帳戶收款: https://drive.google.com/file/d/1HdtcU0Fsa1c6aHaBg2aji6M7kpLutTT6/view?usp=drive_link 非本人工作室收款: https://drive.google.com/file/d/15z8Ica8NXjffroU8JoUdMO6V5wjSoHvi/view?usp=drive_link
    • ! know_377461 · 工會有指定嗎
      問題
      工會有指定嗎
      回答
      工會無限定哦,只要是工會即可~ 注意:欲免扣繳二代健保加入的是「工」會不是「公會」哦
    • ! know_377469 · 如何成為主播
      問題
      如何成為主播
      回答
      本站目前招募成年女性加入創作者 請點擊網址進行註冊:https://join.swag.live/
    • ! know_377413 · 報名直播主題
      問題
      報名直播主題
      回答
      報名格式如下方介紹,只要符合格式就會自動上欄位:https://reurl.cc/V2W7LZ
    • ! know_377553 · 想改成工作室收款
      問題
      想改成工作室收款
      回答
      請填寫台幣工作室帳戶表單:https://creator-info-f2327.web.app/forms/tw-studio 發票/收據 開立與請款流程說明: 收到金額資訊 → 通知會計師開立發票/自己開立收據 → 將實體發票/收據寄送至公司 出款時間依照以下兩種情況 1.若在「當次出款公告截止時間」前 收到「實體發票/收據」:可於當次出款日出款 2.若在「當次出款公告截止時間」後 收到「實體發票/收據」:將於收到後的「最近一次出款日」出款 發票開立資訊: 買受人:鈔快數位股份有限公司 統編:82918654 項目:影音服務費 收件資訊: 110 臺北市信義區松高路1號6樓 鈔快數位股份有限公司 0906-093-129
    • ! know_377487 · 推薦主播
      問題
      推薦主播
      回答
      如果你是主播,推薦其他人進來直播,可以額外獲得被推薦人的20%收益獎勵唷(為期一年) 詳細請你詳閱說明:https://reurl.cc/epkZox
    • ! know_377390 · 我想當主播
      問題
      我想當主播
      回答
      請問有送出資料了嗎~沒有的話幫我到這邊上傳資料審核呦(建議使用無痕模式) https://join.swag.live/
    • ! know_377441 · 直播要準備什麼東西
      問題
      直播要準備什麼東西
      回答
      要在 SWAG 上進行直播,您可以參考以下準備步驟: - 事前準備: - 下載並安裝 Moor app - 確保環境網路狀況順暢 - 登入您的 SWAG 創作者帳號 - 明亮乾淨的背景 - 適合自己風格的音樂 - 舒適的妝容 更多詳細的教學內容,您可以參考這篇文章:https://reurl.cc/R2kDgn
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到的所有要點均可在來源中找到,且沒有任何虛構的聲明,因此所有的事實聲明都是有根據的。

    回答品質

    86.7%
    相關性
    100.0%
    完整性
    60.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 必須詳讀相關資料
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 您好,我是 SWAG Creator AI bot,很高興為您解答! 新主播在報備前,請務必注意以下幾點: 1. 請詳細閱讀開始經營前的相關說明,確保了解平台規則與流程。說明連結: https://reurl.cc/53RXyq 2. 務必填寫「台幣帳戶」資料,未來所有收入都會以台幣匯款給您。帳戶填寫表單: https://creator-info-f2327.web.app/forms/tw 3. 若您有特殊需求需使用非本人帳戶收款,請依規定提供切結書及佐證影片,詳細規範請參考:非本人個人帳戶收款:https://drive.google.com/file/d/1HdtcU0Fsa1c6aHaBg2aji6M7kpLutTT6/view?usp=drive_link 如果還有其他疑問或需要協助,歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 必須詳讀相關資料
    Judge 推理
    這個回答的內容與用戶查詢相關,並且提供了多個注意事項,但未完全涵蓋所有核心要點,特別是缺少了「必須詳讀相關資料」這一關鍵點。
  • 案例 694FD9B9

    如何使用置頂(限時動態)功能?

    已完成
    第 1 次嘗試 · 已完成 18669ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ### 🚨 Language Consistency (Highest Priority)
    - **Absolutely NO language mixing**: Responses must be 100% in the language specified by Response Language
    - **No results response format**: When tools return no results, use language-appropriate responses:
    -   • If Response Language is Chinese: '根據我的了解,[general answer]。為了確保準確,建議你跟真人客服確認一下喔!'
    -   • If Response Language is English: 'Based on my understanding, [general answer]. For accuracy, I recommend confirming with our customer service team!'
    -   • If Response Language is French: 'Selon ma compréhension, [réponse générale]. Pour plus de précision, je recommande de confirmer avec notre service client !'
    -   • For other languages: Use equivalent expressions in the target language
    - 
    - ### Core Principles
    - All answers MUST be based on <tool: search_knowledge_and_products> tool output, NEVER fabricate
    - NEVER fabricate: Product/service details, policies, promotional offers, pre-sales/after-sales services, real-time data
    - 
    - ### User Intent Analysis (CRITICAL)
    - **Informational questions** (how/why/what/when/where) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - **Product requests** (recommendations/suggestions/comparisons) → Provide product information
    - **Mixed intent** → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - 
    - ### Conversation History Check (Avoid Repetition)
    - **MANDATORY**: Before recommending products, review conversation history for already mentioned products
    - If products were previously recommended but user showed NO strong interest → DO NOT repeat those products
    - If user actively asked follow-up questions about previously mentioned products → MAY mention them again with NEW information
    - ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent
    - 
    - ### Response & Format Requirements
    - **Product recommendation rules** (STRICT criteria):
    -   • **ONLY recommend products when user explicitly uses these phrases**:
    -     • '推薦[商品]' (recommend [product]), '介紹[商品]' (introduce [product])
    -     • '想買' (want to buy), '購買' (purchase), '選擇' (choose)
    -     • '比較' (compare), '差別' (difference between products)
    -   • **NEVER recommend products for**:
    -     • Pure informational questions (how/why/what/when/where)
    -     • Knowledge-seeking queries without purchase intent
    -     • General curiosity about topics
    -     • Questions answered sufficiently with knowledge content
    -   • **FORBIDDEN phrases that trigger unwanted recommendations**:
    -     • '不過我可以為您推薦一些產品'
    -     • '如果您有興趣,我可以推薦'
    -     • '我們有以下產品可以考慮'
    -     • Any proactive product suggestions when not requested
    -   • **When products ARE appropriate**: Provide ONLY these details:
    -     • Product Title
    -     • Price (also show price_sale if available)
    -     • Key specifications
    -     • One-sentence recommendation reason
    -     • **STRICTLY FORBIDDEN for products**: URLs, links, images, or any other information not listed above
    - **Knowledge information display**: When providing knowledge answers:
    -   • **URL format**: 'Topic Name: URL' (example: Customer Form: https://example.com)
    -   • **ABSOLUTELY FORBIDDEN**: markdown format [text](url). NEVER write [Customer Form](url), ALWAYS write Customer Form: url
    -   • **Image format**: 
    
    ![](image_url)
    
     (Use ONLY image links from tool messages)
    - 
    - ### Prohibited Terms
    - MUST NOT mention: 'knowledge base', 'database', 'system records', 'internal data', 'documentation'
    - NEVER use robotic phrases: 'according to our data', 'based on knowledge base', 'system shows'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    - 
    - **Pre-response Checklist**: □ Correct language □ Based on tool results □ Natural expression
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER如何使用置頂(限時動態)功能?
    BOT馬上為您找找看相關內容 📋 您好,我是 SWAG Creator AI bot,很高興為您服務! 關於「置頂(限時動態)」功能的使用方法,您可以參考這個詳細說明:置頂(限時動態): https://public.swag.live/help-center-creator/zh-tw/articles/f207ee09-e4ac-4be8-892b-bc50111b2ca2-%E7%BD%AE%E9%A0%82%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html 如果您有其他關於限時動態的問題,也歡迎隨時告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377529 · 置頂(限時動態)
      問題
      置頂(限時動態)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/f207ee09-e4ac-4be8-892b-bc50111b2ca2-%E7%BD%AE%E9%A0%82%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html
    意料之外 (9)
    • ! know_377427 · 如何刪除限時動態
      問題
      如何刪除限時動態
      回答
      「限時動態」刪除方法如下 https://reurl.cc/Q2aDdo
    • ! know_377426 · 如何發限時動態
      問題
      如何發限時動態
      回答
      「限時動態」功能請參考以下說明 https://reurl.cc/YD3Q1O
    • ! know_377428 · 如何排程內容
      問題
      如何排程內容
      回答
      「限時動態」排程方法如下 https://reurl.cc/53RaqR 「貼文」排程方法如下 https://reurl.cc/xW3XgE
    • ! know_377527 · 刪除功能(限時動態)
      問題
      刪除功能(限時動態)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/392307a3-ba38-42a1-a7cd-32688c6eefeb-%E5%88%AA%E9%99%A4%E5%8A%9F%E8%83%BD%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html
    • ! know_377525 · 限時動態介紹
      問題
      限時動態介紹
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/e0fb78bb-b88a-46c1-8795-b09b35bf3b31-%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B%E4%BB%8B%E7%B4%B9/index.html
    • ! know_377526 · 排程功能(限時動態)
      問題
      排程功能(限時動態)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/014a4e75-8f9e-4aad-977b-376b1f929bcf-%E6%8E%92%E7%A8%8B%E5%8A%9F%E8%83%BD%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html
    • ! know_377429 · 如何修改已發佈內容
      問題
      如何修改已發佈內容
      回答
      「限時動態」修改方法如下 https://reurl.cc/V2WezY 「貼文」修改方法如下 https://reurl.cc/epkayQ
    • ! know_377504 · 聊天室置頂
      問題
      聊天室置頂
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/750fca17-70c6-453f-b06b-ba74d1362333-%E8%81%8A%E5%A4%A9%E5%AE%A4%E7%BD%AE%E9%A0%82/index.html
    • ! know_377551 · 限時動態與短影音
      問題
      限時動態與短影音
      回答
      限時動態與短影音只能3秒~60秒的影片,以及圖片。
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到的置頂(限時動態)功能的使用方法,正好引用了來源中的相關連結,因此所有的事實陳述都得到了支持,沒有虛構的內容。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 您好,我是 SWAG Creator AI bot,很高興為您服務! 關於「置頂(限時動態)」功能的使用方法,您可以參考這個詳細說明:置頂(限時動態): https://public.swag.live/help-center-creator/zh-tw/articles/f207ee09-e4ac-4be8-892b-bc50111b2ca2-%E7%BD%AE%E9%A0%82%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html 如果您有其他關於限時動態的問題,也歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 你可以透過這個連結了解如何使用置頂(限時動態)功能
    Judge 推理
    這個回覆完整地提供了使用置頂(限時動態)功能的連結,並且符合用戶的需求,沒有遺漏任何關鍵資訊。
  • 案例 D1C4C365

    請問主播後援站的網址是什麼?

    已完成
    第 1 次嘗試 · 已完成 32221ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ### 🚨 Language Consistency (Highest Priority)
    - **Absolutely NO language mixing**: Responses must be 100% in the language specified by Response Language
    - **No results response format**: When tools return no results, use language-appropriate responses:
    -   • If Response Language is Chinese: '根據我的了解,[general answer]。為了確保準確,建議你跟真人客服確認一下喔!'
    -   • If Response Language is English: 'Based on my understanding, [general answer]. For accuracy, I recommend confirming with our customer service team!'
    -   • If Response Language is French: 'Selon ma compréhension, [réponse générale]. Pour plus de précision, je recommande de confirmer avec notre service client !'
    -   • For other languages: Use equivalent expressions in the target language
    - 
    - ### Core Principles
    - All answers MUST be based on <tool: search_knowledge_and_products> tool output, NEVER fabricate
    - NEVER fabricate: Product/service details, policies, promotional offers, pre-sales/after-sales services, real-time data
    - 
    - ### User Intent Analysis (CRITICAL)
    - **Informational questions** (how/why/what/when/where) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - **Product requests** (recommendations/suggestions/comparisons) → Provide product information
    - **Mixed intent** → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - 
    - ### Conversation History Check (Avoid Repetition)
    - **MANDATORY**: Before recommending products, review conversation history for already mentioned products
    - If products were previously recommended but user showed NO strong interest → DO NOT repeat those products
    - If user actively asked follow-up questions about previously mentioned products → MAY mention them again with NEW information
    - ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent
    - 
    - ### Response & Format Requirements
    - **Product recommendation rules** (STRICT criteria):
    -   • **ONLY recommend products when user explicitly uses these phrases**:
    -     • '推薦[商品]' (recommend [product]), '介紹[商品]' (introduce [product])
    -     • '想買' (want to buy), '購買' (purchase), '選擇' (choose)
    -     • '比較' (compare), '差別' (difference between products)
    -   • **NEVER recommend products for**:
    -     • Pure informational questions (how/why/what/when/where)
    -     • Knowledge-seeking queries without purchase intent
    -     • General curiosity about topics
    -     • Questions answered sufficiently with knowledge content
    -   • **FORBIDDEN phrases that trigger unwanted recommendations**:
    -     • '不過我可以為您推薦一些產品'
    -     • '如果您有興趣,我可以推薦'
    -     • '我們有以下產品可以考慮'
    -     • Any proactive product suggestions when not requested
    -   • **When products ARE appropriate**: Provide ONLY these details:
    -     • Product Title
    -     • Price (also show price_sale if available)
    -     • Key specifications
    -     • One-sentence recommendation reason
    -     • **STRICTLY FORBIDDEN for products**: URLs, links, images, or any other information not listed above
    - **Knowledge information display**: When providing knowledge answers:
    -   • **URL format**: 'Topic Name: URL' (example: Customer Form: https://example.com)
    -   • **ABSOLUTELY FORBIDDEN**: markdown format [text](url). NEVER write [Customer Form](url), ALWAYS write Customer Form: url
    -   • **Image format**: 
    
    ![](image_url)
    
     (Use ONLY image links from tool messages)
    - 
    - ### Prohibited Terms
    - MUST NOT mention: 'knowledge base', 'database', 'system records', 'internal data', 'documentation'
    - NEVER use robotic phrases: 'according to our data', 'based on knowledge base', 'system shows'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    - 
    - **Pre-response Checklist**: □ Correct language □ Based on tool results □ Natural expression
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER請問主播後援站的網址是什麼?
    BOT讓我幫您查詢一下相關資訊 🔍 主播後援站的網址是:https://swag-home.vercel.app/ 如果需要詳細的使用說明,可以參考這裡: 告別尬聊話題情報站正式上線-: https://public.swag.live/help-center-creator/zh-tw/articles/51e1a2d8-841e-48d6-90df-40267f760dcb-告別尬聊話題情報站正式上線-/index.html

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377533 · 主播後援站
      問題
      主播後援站
      回答
      打開網址即可進入主播後援站:https://swag-home.vercel.app/ 詳細使用說明,請參考:https://public.swag.live/help-center-creator/zh-tw/articles/51e1a2d8-841e-48d6-90df-40267f760dcb-告別尬聊話題情報站正式上線-/index.html
    意料之外 (9)
    • ! know_377469 · 如何成為主播
      問題
      如何成為主播
      回答
      本站目前招募成年女性加入創作者 請點擊網址進行註冊:https://join.swag.live/
    • ! know_377483 · 改收款地址
      問題
      改收款地址
      回答
      台灣主播是使用台幣進行收款,請點擊此網址進行更改:台幣收款帳戶填寫表單: https://creator-info-f2327.web.app/tw 如果是其他地區主播要更改收款,請留言『真人客服』,由相關人員提供勾改方式給您
    • ! know_377548
    • ! know_377474 · 上傳有什麼規則限制
      問題
      上傳有什麼規則限制
      回答
      規範可至以下網址詳讀唷~ https://reurl.cc/vEL8Kj
    • ! know_377450 · 有其他曝光嗎
      問題
      有其他曝光嗎
      回答
      平台有站內及站外曝光哦~詳情請詢問官方經紀
    • ! know_377390 · 我想當主播
      問題
      我想當主播
      回答
      請問有送出資料了嗎~沒有的話幫我到這邊上傳資料審核呦(建議使用無痕模式) https://join.swag.live/
    • ! know_377449 · 曝光方式
      問題
      曝光方式
      回答
      平台有站內及站外曝光哦~詳情請詢問官方經紀
    • ! know_377491 · 主播活動頁
      問題
      主播活動頁
      回答
      主播端不定時會推出限時活動:https://creators.swag.live/ 個人任務請打開moor,點擊底下的任務,完成任務即可獲得鑽石
    • ! know_377534 · 指令百科
      問題
      指令百科
      回答
      打開網址即可進入指令百科:https://swag-home.vercel.app/%E6%8C%87%E4%BB%A4%E7%99%BE%E7%A7%91/ 詳細使用說明,請參考:https://swag-home.vercel.app/%E6%8C%87%E4%BB%A4%E7%99%BE%E7%A7%91/
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆完全符合來源資料,所有提供的網址和說明都能在來源中找到,因此沒有任何虛構的內容。

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 主播後援站的網址是:https://swag-home.vercel.app/ 如果需要詳細的使用說明,可以參考這裡: 告別尬聊話題情報站正式上線-: https://public.swag.live/help-center-creator/zh-tw/articles/51e1a2d8-841e-48d6-90df-40267f760dcb-告別尬聊話題情報站正式上線-/index.html
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 打開網址即可進入主播後援站
    III 補充說明 w 10%
    • 網址為 https://swag-home.vercel.app/
    Judge 推理
    這個回答完全符合用戶的問題,提供了正確的網址並且包含了額外的使用說明,整體上是完整且正確的。
  • 案例 EEE8A6EF

    如果在出款公告截止時間前收到實體發票,請問可以何時出款?

    已完成
    第 1 次嘗試 · 已完成 43168ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ### 🚨 Language Consistency (Highest Priority)
    - **Absolutely NO language mixing**: Responses must be 100% in the language specified by Response Language
    - **No results response format**: When tools return no results, use language-appropriate responses:
    -   • If Response Language is Chinese: '根據我的了解,[general answer]。為了確保準確,建議你跟真人客服確認一下喔!'
    -   • If Response Language is English: 'Based on my understanding, [general answer]. For accuracy, I recommend confirming with our customer service team!'
    -   • If Response Language is French: 'Selon ma compréhension, [réponse générale]. Pour plus de précision, je recommande de confirmer avec notre service client !'
    -   • For other languages: Use equivalent expressions in the target language
    - 
    - ### Core Principles
    - All answers MUST be based on <tool: search_knowledge_and_products> tool output, NEVER fabricate
    - NEVER fabricate: Product/service details, policies, promotional offers, pre-sales/after-sales services, real-time data
    - 
    - ### User Intent Analysis (CRITICAL)
    - **Informational questions** (how/why/what/when/where) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - **Product requests** (recommendations/suggestions/comparisons) → Provide product information
    - **Mixed intent** → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - 
    - ### Conversation History Check (Avoid Repetition)
    - **MANDATORY**: Before recommending products, review conversation history for already mentioned products
    - If products were previously recommended but user showed NO strong interest → DO NOT repeat those products
    - If user actively asked follow-up questions about previously mentioned products → MAY mention them again with NEW information
    - ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent
    - 
    - ### Response & Format Requirements
    - **Product recommendation rules** (STRICT criteria):
    -   • **ONLY recommend products when user explicitly uses these phrases**:
    -     • '推薦[商品]' (recommend [product]), '介紹[商品]' (introduce [product])
    -     • '想買' (want to buy), '購買' (purchase), '選擇' (choose)
    -     • '比較' (compare), '差別' (difference between products)
    -   • **NEVER recommend products for**:
    -     • Pure informational questions (how/why/what/when/where)
    -     • Knowledge-seeking queries without purchase intent
    -     • General curiosity about topics
    -     • Questions answered sufficiently with knowledge content
    -   • **FORBIDDEN phrases that trigger unwanted recommendations**:
    -     • '不過我可以為您推薦一些產品'
    -     • '如果您有興趣,我可以推薦'
    -     • '我們有以下產品可以考慮'
    -     • Any proactive product suggestions when not requested
    -   • **When products ARE appropriate**: Provide ONLY these details:
    -     • Product Title
    -     • Price (also show price_sale if available)
    -     • Key specifications
    -     • One-sentence recommendation reason
    -     • **STRICTLY FORBIDDEN for products**: URLs, links, images, or any other information not listed above
    - **Knowledge information display**: When providing knowledge answers:
    -   • **URL format**: 'Topic Name: URL' (example: Customer Form: https://example.com)
    -   • **ABSOLUTELY FORBIDDEN**: markdown format [text](url). NEVER write [Customer Form](url), ALWAYS write Customer Form: url
    -   • **Image format**: 
    
    ![](image_url)
    
     (Use ONLY image links from tool messages)
    - 
    - ### Prohibited Terms
    - MUST NOT mention: 'knowledge base', 'database', 'system records', 'internal data', 'documentation'
    - NEVER use robotic phrases: 'according to our data', 'based on knowledge base', 'system shows'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    - 
    - **Pre-response Checklist**: □ Correct language □ Based on tool results □ Natural expression
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER如果在出款公告截止時間前收到實體發票,請問可以何時出款?
    BOT正在為您搜尋最新資料 ⏳ 您好,我是 SWAG Creator AI bot,很高興為您解答! 如果在「當次出款公告截止時間」前收到實體發票或收據,您可以於「當次出款日」出款。也就是說,只要在公告的截止時間前,公司收到您的實體發票,這一期的出款日就會處理您的款項。 若有其他關於出款流程的細節需要了解,也歡迎隨時詢問!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377553 · 想改成工作室收款
      問題
      想改成工作室收款
      回答
      請填寫台幣工作室帳戶表單:https://creator-info-f2327.web.app/forms/tw-studio 發票/收據 開立與請款流程說明: 收到金額資訊 → 通知會計師開立發票/自己開立收據 → 將實體發票/收據寄送至公司 出款時間依照以下兩種情況 1.若在「當次出款公告截止時間」前 收到「實體發票/收據」:可於當次出款日出款 2.若在「當次出款公告截止時間」後 收到「實體發票/收據」:將於收到後的「最近一次出款日」出款 發票開立資訊: 買受人:鈔快數位股份有限公司 統編:82918654 項目:影音服務費 收件資訊: 110 臺北市信義區松高路1號6樓 鈔快數位股份有限公司 0906-093-129
    意料之外 (9)
    • ! know_377399 · 怎麼出帳?
      問題
      怎麼出帳?
      回答
      平台的提領方式是月結,計算的時間是每月1號~最後一天,並於次月出帳 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) 當月15號(遇假日提前):出款上月「鑽石分潤」+「活動獎勵」+「補出款申請」 • 每月 6–10 日 發送勞報單,請於時間內填寫完成才可出款 當月25號(遇假日提前):「補出款」(未趕上 15 號者請留言『真人客服』申請補出) • 勞報單約於 18 - 20 號發放,請於時間內填寫完成才可出款
    • ! know_377404 · 我要填寫勞報單
      問題
      我要填寫勞報單
      回答
      當月15號(遇假日提前):出款上月「鑽石分潤」+「活動獎勵」+「補出款申請」 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) • 每月 6–10 日 發送勞報單,請於時間內填寫完成才可出款 當月25號(遇假日提前):「補出款」(未趕上 15 號者請留言『真人客服』申請補出) • 勞報單約於 18 - 20 號發放,請於時間內填寫完成才可出款" 屆時收到勞報單,一定要記得要點開網址進行內容填寫,才會如期收到款項喔,沒寫勞報單是收不到款項的
    • ! know_377405 · 申請補出款
      問題
      申請補出款
      回答
      請留言『真人客服』,由於小編並非 24 小時在線,我們將於上班時段為妳處理,請耐心等候
    • ! know_377486 · 超過勞報單時間,無法填寫 沒填勞報單
      問題
      超過勞報單時間,無法填寫 沒填勞報單
      回答
      請留言『真人客服』,由相關人員為妳申請補出款喔
    • ! know_377400 · 我要提領
      問題
      我要提領
      回答
      平台的提領方式是月結,結算到每個月最後一天,隔月初(1~10號不一定)會收回本月賺取的鑽石收益 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) 當月15號(遇假日提前):出款上月「鑽石分潤」+「活動獎勵」+「補出款申請」 • 每月 6–10 日 發送勞報單,請於時間內填寫完成才可出款 當月25號(遇假日提前):「補出款」(未趕上 15 號者請留言『真人客服』申請補出) • 勞報單約於 18 - 20 號發放,請於時間內填寫完成才可出款
    • ! know_377398 · 非本人收款 領取非本人收款切結書
      問題
      非本人收款 領取非本人收款切結書
      回答
      平台僅開放特殊因素者進行非本人帳戶收款,如無特殊因素,禁止非本人收款。 創作者代收款項規則及流程如下: 為確保雙方權益,只要提供符合規範之證明檔案,即可使用他人帳戶代收款項 (已取消「需提供帳戶不可使用之證明」規定) 如需使用他人帳戶收款,請務必提供以下資料: ∙ 匯款帳戶非本人切結書 ∙ 佐證影片一份 影片內容需清晰完整,並包含以下項目: 1.主播本人正面入鏡,五官清楚可辨識 2.手持或同時呈現切結書畫面 3.主播親自口述以下內容:  ∙ 本次出款時間  ∙ 出款金額  ∙ 明確表示同意由「帳戶持有人 XXX」代收本次款項 補充說明: ∙ 影片需一次性完整錄製,不得剪輯或拼接 ∙ 所有資訊須清楚可辨識,避免因資料不完整影響出款作業 其他注意事項: 每次出款皆需依上述規範辦理,以確保流程順利並避免後續爭議。 若提供資料不完整或未通過審核,將可能導致出款延後,相關影響需自行承擔。 非本人個人帳戶收款: https://drive.google.com/file/d/1HdtcU0Fsa1c6aHaBg2aji6M7kpLutTT6/view?usp=drive_link 非本人工作室收款: https://drive.google.com/file/d/15z8Ica8NXjffroU8JoUdMO6V5wjSoHvi/view?usp=drive_link
    • ! know_377445 · 出帳時間
      問題
      出帳時間
      回答
      出款時間:每個月15號出鑽石分潤、如未填寫勞報單可以於15號.25號申請補出款 📍每月15號(遇假日提前) ∙ 分潤+活動獎勵/補出款 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) ∙ 每月 6–10 日 發送勞報單。需於 10 號前完成,才可於 15 號出款 📍每月25號(遇假日提前) ∙ 補出款(未趕上 15 號者需找小編申請要補出) ∙ 每月 18–20 日 發送勞報單。需於 20 號前完成,才可於 25 號出款 📍工會收據收集: - 收集表單:每個月15發送到小鈴噹 - 收集時間:每月12號-29號,超過時間無法補件 - 備註: 1.填寫表單更改為固定同一份(連結相同) 2.若有一次提供一季則期間內後續無需每月重新提供 3.假設5/15發送(代表為五月分潤),提供的有效期限需包含5月的才有效 4.僅接受表單填寫的資料,不接受其他方式提供 5.當月勞報單金額發出後不接受補件當期、超過當月填寫時間也不接受補件
    • ! know_377446 · 什麼時候出帳
      問題
      什麼時候出帳
      回答
      出款時間:每個月15號出鑽石分潤、如未填寫勞報單可以於15號.25號申請補出款 📍每月15號(遇假日提前) ∙ 分潤+活動獎勵/補出款 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) ∙ 每月 6–10 日 發送勞報單。需於 10 號前完成,才可於 15 號出款 📍每月25號(遇假日提前) ∙ 補出款(未趕上 15 號者需找小編申請要補出) ∙ 每月 18–20 日 發送勞報單。需於 20 號前完成,才可於 25 號出款 📍工會收據收集: - 收集表單:每個月15發送到小鈴噹 - 收集時間:每月12號-29號,超過時間無法補件 - 備註: 1.填寫表單更改為固定同一份(連結相同) 2.若有一次提供一季則期間內後續無需每月重新提供 3.假設5/15發送(代表為五月分潤),提供的有效期限需包含5月的才有效 4.僅接受表單填寫的資料,不接受其他方式提供 5.當月勞報單金額發出後不接受補件當期、超過當月填寫時間也不接受補件
    • ! know_377540 · 我想申請補匯款
      問題
      我想申請補匯款
      回答
      如果你是指「超過勞報單時間,無法填寫」或「沒填勞報單」的補單問題,請留言「真人客服」,由相關人員為你申請補出款喔。
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆完全符合來源資料中的說明,並且所有的事實陳述都有來源支持,因此沒有虛構的內容。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您好,我是 SWAG Creator AI bot,很高興為您解答! 如果在「當次出款公告截止時間」前收到實體發票或收據,您可以於「當次出款日」出款。也就是說,只要在公告的截止時間前,公司收到您的實體發票,這一期的出款日就會處理您的款項。 若有其他關於出款流程的細節需要了解,也歡迎隨時詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 若在當次出款公告截止時間前收到實體發票/收據,可於當次出款日出款
    Judge 推理
    這個回答完全符合用戶的問題,清楚地解釋了在截止時間前收到實體發票的出款流程,並且沒有遺漏任何關鍵資訊。
  • 案例 73863AF5

    Hashtag 是什麼?

    已完成
    第 1 次嘗試 · 已完成 25852ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ### 🚨 Language Consistency (Highest Priority)
    - **Absolutely NO language mixing**: Responses must be 100% in the language specified by Response Language
    - **No results response format**: When tools return no results, use language-appropriate responses:
    -   • If Response Language is Chinese: '根據我的了解,[general answer]。為了確保準確,建議你跟真人客服確認一下喔!'
    -   • If Response Language is English: 'Based on my understanding, [general answer]. For accuracy, I recommend confirming with our customer service team!'
    -   • If Response Language is French: 'Selon ma compréhension, [réponse générale]. Pour plus de précision, je recommande de confirmer avec notre service client !'
    -   • For other languages: Use equivalent expressions in the target language
    - 
    - ### Core Principles
    - All answers MUST be based on <tool: search_knowledge_and_products> tool output, NEVER fabricate
    - NEVER fabricate: Product/service details, policies, promotional offers, pre-sales/after-sales services, real-time data
    - 
    - ### User Intent Analysis (CRITICAL)
    - **Informational questions** (how/why/what/when/where) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - **Product requests** (recommendations/suggestions/comparisons) → Provide product information
    - **Mixed intent** → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - 
    - ### Conversation History Check (Avoid Repetition)
    - **MANDATORY**: Before recommending products, review conversation history for already mentioned products
    - If products were previously recommended but user showed NO strong interest → DO NOT repeat those products
    - If user actively asked follow-up questions about previously mentioned products → MAY mention them again with NEW information
    - ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent
    - 
    - ### Response & Format Requirements
    - **Product recommendation rules** (STRICT criteria):
    -   • **ONLY recommend products when user explicitly uses these phrases**:
    -     • '推薦[商品]' (recommend [product]), '介紹[商品]' (introduce [product])
    -     • '想買' (want to buy), '購買' (purchase), '選擇' (choose)
    -     • '比較' (compare), '差別' (difference between products)
    -   • **NEVER recommend products for**:
    -     • Pure informational questions (how/why/what/when/where)
    -     • Knowledge-seeking queries without purchase intent
    -     • General curiosity about topics
    -     • Questions answered sufficiently with knowledge content
    -   • **FORBIDDEN phrases that trigger unwanted recommendations**:
    -     • '不過我可以為您推薦一些產品'
    -     • '如果您有興趣,我可以推薦'
    -     • '我們有以下產品可以考慮'
    -     • Any proactive product suggestions when not requested
    -   • **When products ARE appropriate**: Provide ONLY these details:
    -     • Product Title
    -     • Price (also show price_sale if available)
    -     • Key specifications
    -     • One-sentence recommendation reason
    -     • **STRICTLY FORBIDDEN for products**: URLs, links, images, or any other information not listed above
    - **Knowledge information display**: When providing knowledge answers:
    -   • **URL format**: 'Topic Name: URL' (example: Customer Form: https://example.com)
    -   • **ABSOLUTELY FORBIDDEN**: markdown format [text](url). NEVER write [Customer Form](url), ALWAYS write Customer Form: url
    -   • **Image format**: 
    
    ![](image_url)
    
     (Use ONLY image links from tool messages)
    - 
    - ### Prohibited Terms
    - MUST NOT mention: 'knowledge base', 'database', 'system records', 'internal data', 'documentation'
    - NEVER use robotic phrases: 'according to our data', 'based on knowledge base', 'system shows'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    - 
    - **Pre-response Checklist**: □ Correct language □ Based on tool results □ Natural expression
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USERHashtag 是什麼?
    BOT讓我幫您查詢一下相關資訊 🔍 你可以參考 Hashtag 的詳細說明:Hashtag: https://reurl.cc/L2nZ9e

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377495
    意料之外 (9)
    • ! know_377443 · 直播是什麼?
      問題
      直播是什麼?
      回答
      「直播」功能請參考以下說明:https://reurl.cc/R2kDgn
    • ! know_377468 · 為什麼直播間沒人?
      問題
      為什麼直播間沒人?
      回答
      請確認帳號是否有設定大頭照+30字自介+一張貼文(勿刪除),如果有任一項沒有設定,會被降低觸及率~ 如果都設定好了,系統會自動排除降觸及。 如果並非以上的因素,需要請妳想想如何以更吸引人的內容,吸引用戶進直播間觀看唷!建議可以多上傳動態.貼文增加與用戶間的互動與曝光喔~
    • ! know_377464 · 我的獎金是多少?
      問題
      我的獎金是多少?
      回答
      你是說什麼的獎金呢?請清楚描述
    • ! know_377498 · 暱稱功能
      問題
      暱稱功能
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/ef7e2d82-fc45-43d0-86f1-2e14c5ce5e68-%E6%9A%B1%E7%A8%B1%E5%8A%9F%E8%83%BD/index.html
    • ! know_377407 · 合約問題
      問題
      合約問題
      回答
      是有什麼問題呢?請詳細描述
    • ! know_377430 · 如何發貼文
      問題
      如何發貼文
      回答
      「貼文」功能請參考以下說明 https://reurl.cc/qpYXnq
    • ! know_377474 · 上傳有什麼規則限制
      問題
      上傳有什麼規則限制
      回答
      規範可至以下網址詳讀唷~ https://reurl.cc/vEL8Kj
    • ! know_377500 · 私訊介紹
      問題
      私訊介紹
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/115162e5-a963-499a-91a2-dc4b0656d863-%E7%A7%81%E8%A8%8A%E4%BB%8B%E7%B4%B9/index.html
    • ! know_377477 · 為什麼上傳內容被下架了
      問題
      為什麼上傳內容被下架了
      回答
      請查看內容違規說明:https://reurl.cc/N2xEn9
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI 的回覆中提到的 Hashtag 相關資訊完全來自於來源,且提供了正確的連結,因此所有的事實聲明都是有根據的。

    回答品質

    76.7%
    相關性
    80.0%
    完整性
    50.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    0.0% · w 60%
    • Hashtag 是一個在社交媒體上使用的標籤
    • 通常以 # 開頭
    • 用來標示和分類內容
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 你可以參考 Hashtag 的詳細說明:Hashtag: https://reurl.cc/L2nZ9e
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • Hashtag 是一個在社交媒體上使用的標籤
    • 通常以 # 開頭
    • 用來標示和分類內容
    III 補充說明 w 10%
    • 更多詳情請參考這裡: https://reurl.cc/L2nZ9e
    Judge 推理
    回覆中提到的 Hashtag 連結是正確的,但未直接回答問題的核心內容,缺少了對 Hashtag 的定義和功能的描述,因此完整性得分較低。
  • 案例 3303B75F

    限時動態要怎麼刪除?

    已完成
    第 1 次嘗試 · 已完成 28821ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ### 🚨 Language Consistency (Highest Priority)
    - **Absolutely NO language mixing**: Responses must be 100% in the language specified by Response Language
    - **No results response format**: When tools return no results, use language-appropriate responses:
    -   • If Response Language is Chinese: '根據我的了解,[general answer]。為了確保準確,建議你跟真人客服確認一下喔!'
    -   • If Response Language is English: 'Based on my understanding, [general answer]. For accuracy, I recommend confirming with our customer service team!'
    -   • If Response Language is French: 'Selon ma compréhension, [réponse générale]. Pour plus de précision, je recommande de confirmer avec notre service client !'
    -   • For other languages: Use equivalent expressions in the target language
    - 
    - ### Core Principles
    - All answers MUST be based on <tool: search_knowledge_and_products> tool output, NEVER fabricate
    - NEVER fabricate: Product/service details, policies, promotional offers, pre-sales/after-sales services, real-time data
    - 
    - ### User Intent Analysis (CRITICAL)
    - **Informational questions** (how/why/what/when/where) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - **Product requests** (recommendations/suggestions/comparisons) → Provide product information
    - **Mixed intent** → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - 
    - ### Conversation History Check (Avoid Repetition)
    - **MANDATORY**: Before recommending products, review conversation history for already mentioned products
    - If products were previously recommended but user showed NO strong interest → DO NOT repeat those products
    - If user actively asked follow-up questions about previously mentioned products → MAY mention them again with NEW information
    - ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent
    - 
    - ### Response & Format Requirements
    - **Product recommendation rules** (STRICT criteria):
    -   • **ONLY recommend products when user explicitly uses these phrases**:
    -     • '推薦[商品]' (recommend [product]), '介紹[商品]' (introduce [product])
    -     • '想買' (want to buy), '購買' (purchase), '選擇' (choose)
    -     • '比較' (compare), '差別' (difference between products)
    -   • **NEVER recommend products for**:
    -     • Pure informational questions (how/why/what/when/where)
    -     • Knowledge-seeking queries without purchase intent
    -     • General curiosity about topics
    -     • Questions answered sufficiently with knowledge content
    -   • **FORBIDDEN phrases that trigger unwanted recommendations**:
    -     • '不過我可以為您推薦一些產品'
    -     • '如果您有興趣,我可以推薦'
    -     • '我們有以下產品可以考慮'
    -     • Any proactive product suggestions when not requested
    -   • **When products ARE appropriate**: Provide ONLY these details:
    -     • Product Title
    -     • Price (also show price_sale if available)
    -     • Key specifications
    -     • One-sentence recommendation reason
    -     • **STRICTLY FORBIDDEN for products**: URLs, links, images, or any other information not listed above
    - **Knowledge information display**: When providing knowledge answers:
    -   • **URL format**: 'Topic Name: URL' (example: Customer Form: https://example.com)
    -   • **ABSOLUTELY FORBIDDEN**: markdown format [text](url). NEVER write [Customer Form](url), ALWAYS write Customer Form: url
    -   • **Image format**: 
    
    ![](image_url)
    
     (Use ONLY image links from tool messages)
    - 
    - ### Prohibited Terms
    - MUST NOT mention: 'knowledge base', 'database', 'system records', 'internal data', 'documentation'
    - NEVER use robotic phrases: 'according to our data', 'based on knowledge base', 'system shows'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    - 
    - **Pre-response Checklist**: □ Correct language □ Based on tool results □ Natural expression
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER限時動態要怎麼刪除?
    BOT馬上為您找找看相關內容 📋 您好,我是 SWAG Creator AI bot,很高興為您服務! 「限時動態」的刪除方法,您可以參考這個說明頁面:如何刪除限時動態: https://reurl.cc/Q2aDdo 如果您需要更詳細的操作步驟,也可以參考官方幫助中心說明:刪除功能(限時動態): https://public.swag.live/help-center-creator/zh-tw/articles/392307a3-ba38-42a1-a7cd-32688c6eefeb-%E5%88%AA%E9%99%A4%E5%8A%9F%E8%83%BD%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html 如有其他問題,歡迎隨時告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377527 · 刪除功能(限時動態)
      問題
      刪除功能(限時動態)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/392307a3-ba38-42a1-a7cd-32688c6eefeb-%E5%88%AA%E9%99%A4%E5%8A%9F%E8%83%BD%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html
    意料之外 (9)
    • ! know_377427 · 如何刪除限時動態
      問題
      如何刪除限時動態
      回答
      「限時動態」刪除方法如下 https://reurl.cc/Q2aDdo
    • ! know_377428 · 如何排程內容
      問題
      如何排程內容
      回答
      「限時動態」排程方法如下 https://reurl.cc/53RaqR 「貼文」排程方法如下 https://reurl.cc/xW3XgE
    • ! know_377525 · 限時動態介紹
      問題
      限時動態介紹
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/e0fb78bb-b88a-46c1-8795-b09b35bf3b31-%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B%E4%BB%8B%E7%B4%B9/index.html
    • ! know_377551 · 限時動態與短影音
      問題
      限時動態與短影音
      回答
      限時動態與短影音只能3秒~60秒的影片,以及圖片。
    • ! know_377426 · 如何發限時動態
      問題
      如何發限時動態
      回答
      「限時動態」功能請參考以下說明 https://reurl.cc/YD3Q1O
    • ! know_377547 · 限時動態與短影音
      問題
      限時動態與短影音
      回答
      兩者為不同的項目唷!如果你的任務是要發佈短影音或是限時動態,請留意不要發布錯誤了唷! 限時動態需要勾選『限時48小時按鈕』,而短影音不用唷~
    • ! know_377429 · 如何修改已發佈內容
      問題
      如何修改已發佈內容
      回答
      「限時動態」修改方法如下 https://reurl.cc/V2WezY 「貼文」修改方法如下 https://reurl.cc/epkayQ
    • ! know_377528 · 編輯內文(限時動態)
      問題
      編輯內文(限時動態)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/c6b2c8e2-8457-48b4-9dd0-8af720145cb3-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html
    • ! know_377492 · 如何發佈限時動態與短影音,兩者的差異?
      問題
      如何發佈限時動態與短影音,兩者的差異?
      回答
      打開moor>短動態>錄影(錄製超過三分鐘)>右上角確認>在編輯內容輸入內文,設定鑽石數量後即可發佈 上傳『限時動態』需要在編輯內容頁面打開『設定為限時』按鈕,這篇動態在48小時後就會從頁面停止推廣,觸發用戶把握時間解鎖的購買心裡。 如果是『短動態』就不需要開啟『設定為限時』按鈕,上傳後會一直存在在個人頁面,隨時都會有新用戶進行解鎖。
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到的刪除限時動態的方法和相關連結均來自於提供的來源,因此所有的事實陳述都是有根據的,沒有虛構的內容。

    回答品質

    93.3%
    相關性
    100.0%
    完整性
    80.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    60.0% · w 60%
    • 您可以參考這個連結了解如何刪除限時動態
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 您好,我是 SWAG Creator AI bot,很高興為您服務! 「限時動態」的刪除方法,您可以參考這個說明頁面:如何刪除限時動態: https://reurl.cc/Q2aDdo 如果您需要更詳細的操作步驟,也可以參考官方幫助中心說明:刪除功能(限時動態): https://public.swag.live/help-center-creator/zh-tw/articles/392307a3-ba38-42a1-a7cd-32688c6eefeb-%E5%88%AA%E9%99%A4%E5%8A%9F%E8%83%BD%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html 如有其他問題,歡迎隨時告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 您可以參考這個連結了解如何刪除限時動態
    Judge 推理
    回覆中提供了刪除限時動態的相關連結,但未直接重述核心要點,導致核心覆蓋率不完整。整體上,回覆仍然是相關且正確的。
  • 案例 15FEC529

    編輯內文(限時動態)要怎麼做?

    已完成
    第 1 次嘗試 · 已完成 34056ms
    腳本進度 · 知識與產品查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ### 🚨 Language Consistency (Highest Priority)
    - **Absolutely NO language mixing**: Responses must be 100% in the language specified by Response Language
    - **No results response format**: When tools return no results, use language-appropriate responses:
    -   • If Response Language is Chinese: '根據我的了解,[general answer]。為了確保準確,建議你跟真人客服確認一下喔!'
    -   • If Response Language is English: 'Based on my understanding, [general answer]. For accuracy, I recommend confirming with our customer service team!'
    -   • If Response Language is French: 'Selon ma compréhension, [réponse générale]. Pour plus de précision, je recommande de confirmer avec notre service client !'
    -   • For other languages: Use equivalent expressions in the target language
    - 
    - ### Core Principles
    - All answers MUST be based on <tool: search_knowledge_and_products> tool output, NEVER fabricate
    - NEVER fabricate: Product/service details, policies, promotional offers, pre-sales/after-sales services, real-time data
    - 
    - ### User Intent Analysis (CRITICAL)
    - **Informational questions** (how/why/what/when/where) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - **Product requests** (recommendations/suggestions/comparisons) → Provide product information
    - **Mixed intent** → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - 
    - ### Conversation History Check (Avoid Repetition)
    - **MANDATORY**: Before recommending products, review conversation history for already mentioned products
    - If products were previously recommended but user showed NO strong interest → DO NOT repeat those products
    - If user actively asked follow-up questions about previously mentioned products → MAY mention them again with NEW information
    - ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent
    - 
    - ### Response & Format Requirements
    - **Product recommendation rules** (STRICT criteria):
    -   • **ONLY recommend products when user explicitly uses these phrases**:
    -     • '推薦[商品]' (recommend [product]), '介紹[商品]' (introduce [product])
    -     • '想買' (want to buy), '購買' (purchase), '選擇' (choose)
    -     • '比較' (compare), '差別' (difference between products)
    -   • **NEVER recommend products for**:
    -     • Pure informational questions (how/why/what/when/where)
    -     • Knowledge-seeking queries without purchase intent
    -     • General curiosity about topics
    -     • Questions answered sufficiently with knowledge content
    -   • **FORBIDDEN phrases that trigger unwanted recommendations**:
    -     • '不過我可以為您推薦一些產品'
    -     • '如果您有興趣,我可以推薦'
    -     • '我們有以下產品可以考慮'
    -     • Any proactive product suggestions when not requested
    -   • **When products ARE appropriate**: Provide ONLY these details:
    -     • Product Title
    -     • Price (also show price_sale if available)
    -     • Key specifications
    -     • One-sentence recommendation reason
    -     • **STRICTLY FORBIDDEN for products**: URLs, links, images, or any other information not listed above
    - **Knowledge information display**: When providing knowledge answers:
    -   • **URL format**: 'Topic Name: URL' (example: Customer Form: https://example.com)
    -   • **ABSOLUTELY FORBIDDEN**: markdown format [text](url). NEVER write [Customer Form](url), ALWAYS write Customer Form: url
    -   • **Image format**: 
    
    ![](image_url)
    
     (Use ONLY image links from tool messages)
    - 
    - ### Prohibited Terms
    - MUST NOT mention: 'knowledge base', 'database', 'system records', 'internal data', 'documentation'
    - NEVER use robotic phrases: 'according to our data', 'based on knowledge base', 'system shows'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    - 
    - **Pre-response Checklist**: □ Correct language □ Based on tool results □ Natural expression
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER編輯內文(限時動態)要怎麼做?
    BOT馬上為您找找看相關內容 📋 您好,我是 SWAG Creator AI bot,很高興為您服務! 如果您想編輯限時動態的內文,可以參考這個詳細教學:編輯內文(限時動態): https://public.swag.live/help-center-creator/zh-tw/articles/c6b2c8e2-8457-48b4-9dd0-8af720145cb3-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html 裡面有完整的步驟說明,協助您順利完成編輯。如果還有其他相關問題,也歡迎隨時告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377528 · 編輯內文(限時動態)
      問題
      編輯內文(限時動態)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/c6b2c8e2-8457-48b4-9dd0-8af720145cb3-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html
    意料之外 (9)
    • ! know_377508 · 編輯內文(貼文)
      問題
      編輯內文(貼文)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/488c0f84-5f44-4401-9bf5-61d5d15dfae1-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E8%B2%BC%E6%96%87/index.html
    • ! know_377429 · 如何修改已發佈內容
      問題
      如何修改已發佈內容
      回答
      「限時動態」修改方法如下 https://reurl.cc/V2WezY 「貼文」修改方法如下 https://reurl.cc/epkayQ
    • ! know_377428 · 如何排程內容
      問題
      如何排程內容
      回答
      「限時動態」排程方法如下 https://reurl.cc/53RaqR 「貼文」排程方法如下 https://reurl.cc/xW3XgE
    • ! know_377427 · 如何刪除限時動態
      問題
      如何刪除限時動態
      回答
      「限時動態」刪除方法如下 https://reurl.cc/Q2aDdo
    • ! know_377525 · 限時動態介紹
      問題
      限時動態介紹
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/e0fb78bb-b88a-46c1-8795-b09b35bf3b31-%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B%E4%BB%8B%E7%B4%B9/index.html
    • ! know_377492 · 如何發佈限時動態與短影音,兩者的差異?
      問題
      如何發佈限時動態與短影音,兩者的差異?
      回答
      打開moor>短動態>錄影(錄製超過三分鐘)>右上角確認>在編輯內容輸入內文,設定鑽石數量後即可發佈 上傳『限時動態』需要在編輯內容頁面打開『設定為限時』按鈕,這篇動態在48小時後就會從頁面停止推廣,觸發用戶把握時間解鎖的購買心裡。 如果是『短動態』就不需要開啟『設定為限時』按鈕,上傳後會一直存在在個人頁面,隨時都會有新用戶進行解鎖。
    • ! know_377426 · 如何發限時動態
      問題
      如何發限時動態
      回答
      「限時動態」功能請參考以下說明 https://reurl.cc/YD3Q1O
    • ! know_377527 · 刪除功能(限時動態)
      問題
      刪除功能(限時動態)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/392307a3-ba38-42a1-a7cd-32688c6eefeb-%E5%88%AA%E9%99%A4%E5%8A%9F%E8%83%BD%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html
    • ! know_377547 · 限時動態與短影音
      問題
      限時動態與短影音
      回答
      兩者為不同的項目唷!如果你的任務是要發佈短影音或是限時動態,請留意不要發布錯誤了唷! 限時動態需要勾選『限時48小時按鈕』,而短影音不用唷~
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到的編輯限時動態的教學連結完全來自於提供的來源,且沒有任何虛構的內容,因此所有的事實陳述都是有根據的。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    馬上為您找找看相關內容 📋 您好,我是 SWAG Creator AI bot,很高興為您服務! 如果您想編輯限時動態的內文,可以參考這個詳細教學:編輯內文(限時動態): https://public.swag.live/help-center-creator/zh-tw/articles/c6b2c8e2-8457-48b4-9dd0-8af720145cb3-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html 裡面有完整的步驟說明,協助您順利完成編輯。如果還有其他相關問題,也歡迎隨時告訴我!
    預期答案 · 加權拆解
    III 補充說明 w 10%
    • 你可以參考官方幫助中心的文章,這裡是連結:https://public.swag.live/help-center-creator/zh-tw/articles/c6b2c8e2-8457-48b4-9dd0-8af720145cb3-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html
    Judge 推理
    這個回覆完全符合用戶的需求,提供了正確的連結和詳細的步驟說明,並且語氣友善,符合預期的回應風格。
項目 II.

情境調用與完成

scenario_funnel 10 cases

維度總表

各維度品質分 · 覆蓋率
走對流程 召回
scenario
100.0%
[100.0% – 100.0%] · n=10
F1 100.0% · 召回 100.0% · 精確 100.0%
10 / 10 適用
用對工具 召回
tool_usage
100.0%
[100.0% – 100.0%] · n=5
F1 100.0% · 召回 100.0% · 精確 100.0%
5 / 10 適用
答得到位 平均
answer_quality
74.7%
[61.0% – 86.0%] · n=10
10 / 10 適用
  • 案例 0BC3BD62

    我要回報問題,出錯了

    已完成
    第 1 次嘗試 · 已完成 37650ms
    腳本進度 · Bug回報情境 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 Bug回報情境
    腳本規則
    - 當用戶的訊息中明確表示想要回報問題或提交錯誤/Bug時觸發。
    包含但不限於以下語意:
    「我要回報問題」
    「我要回報 bug」
    「我遇到錯誤」
    「我發現系統有問題/怪怪的」
    「功能不能用」
    「畫面出錯/跳錯誤」
    「網站壞掉了」
    「APP 壞掉了」
    「登不進去/卡住了」
    「怎麼一直 error」
    「是不是系統 bug」
    
    概念:
    只要用戶語意指向「問題回報」「系統異常」「故障」「Bug」即可視為觸發。
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:您的SWAG ID、發生時間段
    腳本規則
    ### 問題回報 — 問題回報的相關資訊收集
    - 您的SWAG ID [text] (必填): 
    - 發生時間段 [number] (必填):
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    您的SWAG ID SWAG123456 — (對話未走到)
    發生時間段 2023年10月1日至2023年10月5日 — (對話未走到)
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - 1. 當觸發條件成立時,回覆以下{問題回報}模板,格式內文不得改寫、不需額外創意延伸:
    
     {問題回報}模板(固定格式):
    「您好,為了協助您處理問題,請提供以下資訊:
    
    - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb)
    - 發生的時段(例如 16:00~16:05)
    - 狀況螢幕錄製影片/截圖
    
    並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。」
    
    2.提供全部資訊後,在執行轉真人,若有遺漏內容,AI 需要再請用戶提供。
    
      2-1 符合以下任一即可視為「提供資訊」:
    
    - 提供 SWAG ID 資訊(例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    - 敘述遇到的狀況(如「畫面卡住」「按鈕不能按」)
    
      2-2 收到任一資訊後必須回覆:
    「好的,我已將您提供的資訊轉交給客服人員,稍後將由真人客服為您協助,請您稍候一下。」
    
      2-3 之後 立即執行轉真人流程
    
    3. 若用戶提供的內容「完全無關」→ 必須重新引導
    
      3-1 當用戶回覆的內容與前述所需資訊無關,例如:
    「好的」
    「幫我處理」
    「什麼意思?」
    「你是誰?」
    「為什麼要提供?」
    廣告、貼圖、無意義字串
    
    - 不得視為資訊已提供
    - 不得轉真人
    - 必須再次清楚引導用戶提供必要資訊
      3-2 固定回覆模板:
    「為了協助您處理問題,仍需要您提供以下資訊才能轉交給客服人員:
    - 提供 SWAG ID 資訊 (例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    並請再描述一下您遇到的狀況,謝謝!」
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER我要回報問題,出錯了
    BOT您好,我是SWAG Creator AI bot,很高興為您服務! 為了協助您處理問題,請提供以下資訊: - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb) - 發生的時段(例如 16:00~16:05) - 狀況螢幕錄製影片/截圖 並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 1753 · Bug回報情境
    TP 1
    FP 0
    FN 0

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    您好,我是SWAG Creator AI bot,很高興為您服務! 為了協助您處理問題,請提供以下資訊: - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb) - 發生的時段(例如 16:00~16:05) - 狀況螢幕錄製影片/截圖 並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 請提供 SWAG ID
    • 請提供發生的時段
    • 請提供狀況螢幕錄製影片或截圖
    III 補充說明 w 10%
    • 請簡述一下您遇到的狀況
    • 我會協助您轉交客服人員處理
    Judge 推理
    回覆完全符合問題回報的模板,並且涵蓋了所有必要的資訊要求,沒有遺漏任何要素,且內容正確無誤。
  • 案例 D7126101

    我遇到系統錯誤,想請問需要提供什麼資訊來回報呢?

    已完成
    第 1 次嘗試 · 已完成 21311ms
    腳本進度 · Bug回報情境 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 Bug回報情境
    腳本規則
    - 當用戶的訊息中明確表示想要回報問題或提交錯誤/Bug時觸發。
    包含但不限於以下語意:
    「我要回報問題」
    「我要回報 bug」
    「我遇到錯誤」
    「我發現系統有問題/怪怪的」
    「功能不能用」
    「畫面出錯/跳錯誤」
    「網站壞掉了」
    「APP 壞掉了」
    「登不進去/卡住了」
    「怎麼一直 error」
    「是不是系統 bug」
    
    概念:
    只要用戶語意指向「問題回報」「系統異常」「故障」「Bug」即可視為觸發。
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:您的SWAG ID、發生時間段
    腳本規則
    ### 問題回報 — 問題回報的相關資訊收集
    - 您的SWAG ID [text] (必填): 
    - 發生時間段 [number] (必填):
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    您的SWAG ID SWAG123456 — (對話未走到)
    發生時間段 2023年10月1日至2023年10月5日 — (對話未走到)
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - 1. 當觸發條件成立時,回覆以下{問題回報}模板,格式內文不得改寫、不需額外創意延伸:
    
     {問題回報}模板(固定格式):
    「您好,為了協助您處理問題,請提供以下資訊:
    
    - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb)
    - 發生的時段(例如 16:00~16:05)
    - 狀況螢幕錄製影片/截圖
    
    並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。」
    
    2.提供全部資訊後,在執行轉真人,若有遺漏內容,AI 需要再請用戶提供。
    
      2-1 符合以下任一即可視為「提供資訊」:
    
    - 提供 SWAG ID 資訊(例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    - 敘述遇到的狀況(如「畫面卡住」「按鈕不能按」)
    
      2-2 收到任一資訊後必須回覆:
    「好的,我已將您提供的資訊轉交給客服人員,稍後將由真人客服為您協助,請您稍候一下。」
    
      2-3 之後 立即執行轉真人流程
    
    3. 若用戶提供的內容「完全無關」→ 必須重新引導
    
      3-1 當用戶回覆的內容與前述所需資訊無關,例如:
    「好的」
    「幫我處理」
    「什麼意思?」
    「你是誰?」
    「為什麼要提供?」
    廣告、貼圖、無意義字串
    
    - 不得視為資訊已提供
    - 不得轉真人
    - 必須再次清楚引導用戶提供必要資訊
      3-2 固定回覆模板:
    「為了協助您處理問題,仍需要您提供以下資訊才能轉交給客服人員:
    - 提供 SWAG ID 資訊 (例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    並請再描述一下您遇到的狀況,謝謝!」
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER我遇到系統錯誤,想請問需要提供什麼資訊來回報呢?
    BOT您好,我是 SWAG Creator AI bot,很高興為您服務! 為了協助您處理問題,請提供以下資訊: - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb) - 發生的時段(例如 16:00~16:05) - 狀況螢幕錄製影片/截圖 並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 1753 · Bug回報情境
    TP 1
    FP 0
    FN 0

    回答品質

    66.7%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    您好,我是 SWAG Creator AI bot,很高興為您服務! 為了協助您處理問題,請提供以下資訊: - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb) - 發生的時段(例如 16:00~16:05) - 狀況螢幕錄製影片/截圖 並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。
    預期答案 · 加權拆解
    III 補充說明 w 10%
    • 請提供 SWAG ID、發生的時段和狀況螢幕錄製影片/截圖
    • 請簡述一下您遇到的狀況,我會協助您轉交客服人員處理
    Judge 推理
    雖然回覆內容涵蓋了所需的資訊,但未遵循規定的固定格式,導致正確性評分低。
    錯誤陳述 (1)
    • 回覆內容未遵循固定格式的問題回報模板
  • 案例 D79671DB

    我發現系統有問題,怎麼報告?

    已完成
    第 1 次嘗試 · 已完成 20739ms
    腳本進度 · Bug回報情境 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 Bug回報情境
    腳本規則
    - 當用戶的訊息中明確表示想要回報問題或提交錯誤/Bug時觸發。
    包含但不限於以下語意:
    「我要回報問題」
    「我要回報 bug」
    「我遇到錯誤」
    「我發現系統有問題/怪怪的」
    「功能不能用」
    「畫面出錯/跳錯誤」
    「網站壞掉了」
    「APP 壞掉了」
    「登不進去/卡住了」
    「怎麼一直 error」
    「是不是系統 bug」
    
    概念:
    只要用戶語意指向「問題回報」「系統異常」「故障」「Bug」即可視為觸發。
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:您的SWAG ID、發生時間段
    腳本規則
    ### 問題回報 — 問題回報的相關資訊收集
    - 您的SWAG ID [text] (必填): 
    - 發生時間段 [number] (必填):
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    您的SWAG ID SWAG123456 — (對話未走到)
    發生時間段 2023年10月15日 14:00至16:00 — (對話未走到)
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - 1. 當觸發條件成立時,回覆以下{問題回報}模板,格式內文不得改寫、不需額外創意延伸:
    
     {問題回報}模板(固定格式):
    「您好,為了協助您處理問題,請提供以下資訊:
    
    - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb)
    - 發生的時段(例如 16:00~16:05)
    - 狀況螢幕錄製影片/截圖
    
    並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。」
    
    2.提供全部資訊後,在執行轉真人,若有遺漏內容,AI 需要再請用戶提供。
    
      2-1 符合以下任一即可視為「提供資訊」:
    
    - 提供 SWAG ID 資訊(例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    - 敘述遇到的狀況(如「畫面卡住」「按鈕不能按」)
    
      2-2 收到任一資訊後必須回覆:
    「好的,我已將您提供的資訊轉交給客服人員,稍後將由真人客服為您協助,請您稍候一下。」
    
      2-3 之後 立即執行轉真人流程
    
    3. 若用戶提供的內容「完全無關」→ 必須重新引導
    
      3-1 當用戶回覆的內容與前述所需資訊無關,例如:
    「好的」
    「幫我處理」
    「什麼意思?」
    「你是誰?」
    「為什麼要提供?」
    廣告、貼圖、無意義字串
    
    - 不得視為資訊已提供
    - 不得轉真人
    - 必須再次清楚引導用戶提供必要資訊
      3-2 固定回覆模板:
    「為了協助您處理問題,仍需要您提供以下資訊才能轉交給客服人員:
    - 提供 SWAG ID 資訊 (例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    並請再描述一下您遇到的狀況,謝謝!」
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER我發現系統有問題,怎麼報告?
    BOT您好,我是 SWAG Creator AI bot,很高興為您服務! 為了協助您處理問題,請提供以下資訊: - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb) - 發生的時段(例如 16:00~16:05) - 狀況螢幕錄製影片/截圖 並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 1753 · Bug回報情境
    TP 1
    FP 0
    FN 0

    回答品質

    66.7%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    您好,我是 SWAG Creator AI bot,很高興為您服務! 為了協助您處理問題,請提供以下資訊: - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb) - 發生的時段(例如 16:00~16:05) - 狀況螢幕錄製影片/截圖 並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 請提供 SWAG ID
    • 請提供發生的時段
    • 請提供狀況螢幕錄製影片或截圖
    III 補充說明 w 10%
    • 請簡述一下您遇到的狀況
    • 我會協助您轉交客服人員處理
    Judge 推理
    雖然回覆內容涵蓋了所有必要的資訊,但未遵循規定的固定格式,導致正確性評分低。
    錯誤陳述 (1)
    • 回覆內容未遵循固定格式的問題回報模板
  • 案例 E85BB0B9

    我遇到錯誤要怎麼回報?

    已完成
    第 1 次嘗試 · 已完成 31903ms
    腳本進度 · Bug回報情境 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 Bug回報情境
    腳本規則
    - 當用戶的訊息中明確表示想要回報問題或提交錯誤/Bug時觸發。
    包含但不限於以下語意:
    「我要回報問題」
    「我要回報 bug」
    「我遇到錯誤」
    「我發現系統有問題/怪怪的」
    「功能不能用」
    「畫面出錯/跳錯誤」
    「網站壞掉了」
    「APP 壞掉了」
    「登不進去/卡住了」
    「怎麼一直 error」
    「是不是系統 bug」
    
    概念:
    只要用戶語意指向「問題回報」「系統異常」「故障」「Bug」即可視為觸發。
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:您的SWAG ID、發生時間段
    腳本規則
    ### 問題回報 — 問題回報的相關資訊收集
    - 您的SWAG ID [text] (必填): 
    - 發生時間段 [number] (必填):
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    您的SWAG ID SWAG123456 — (對話未走到)
    發生時間段 2023年10月1日至2023年10月5日 — (對話未走到)
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - 1. 當觸發條件成立時,回覆以下{問題回報}模板,格式內文不得改寫、不需額外創意延伸:
    
     {問題回報}模板(固定格式):
    「您好,為了協助您處理問題,請提供以下資訊:
    
    - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb)
    - 發生的時段(例如 16:00~16:05)
    - 狀況螢幕錄製影片/截圖
    
    並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。」
    
    2.提供全部資訊後,在執行轉真人,若有遺漏內容,AI 需要再請用戶提供。
    
      2-1 符合以下任一即可視為「提供資訊」:
    
    - 提供 SWAG ID 資訊(例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    - 敘述遇到的狀況(如「畫面卡住」「按鈕不能按」)
    
      2-2 收到任一資訊後必須回覆:
    「好的,我已將您提供的資訊轉交給客服人員,稍後將由真人客服為您協助,請您稍候一下。」
    
      2-3 之後 立即執行轉真人流程
    
    3. 若用戶提供的內容「完全無關」→ 必須重新引導
    
      3-1 當用戶回覆的內容與前述所需資訊無關,例如:
    「好的」
    「幫我處理」
    「什麼意思?」
    「你是誰?」
    「為什麼要提供?」
    廣告、貼圖、無意義字串
    
    - 不得視為資訊已提供
    - 不得轉真人
    - 必須再次清楚引導用戶提供必要資訊
      3-2 固定回覆模板:
    「為了協助您處理問題,仍需要您提供以下資訊才能轉交給客服人員:
    - 提供 SWAG ID 資訊 (例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    並請再描述一下您遇到的狀況,謝謝!」
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER我遇到錯誤要怎麼回報?
    BOT您好,我是 SWAG Creator AI bot,很高興為您服務! 為了協助您處理問題,請提供以下資訊: - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb) - 發生的時段(例如 16:00~16:05) - 狀況螢幕錄製影片/截圖 並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 1753 · Bug回報情境
    TP 1
    FP 0
    FN 0

    回答品質

    66.7%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    您好,我是 SWAG Creator AI bot,很高興為您服務! 為了協助您處理問題,請提供以下資訊: - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb) - 發生的時段(例如 16:00~16:05) - 狀況螢幕錄製影片/截圖 並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。
    預期答案 · 加權拆解
    III 補充說明 w 10%
    • 請提供 SWAG ID、發生的時段和狀況螢幕錄製影片/截圖
    • 請簡述一下您遇到的狀況,我會協助您轉交客服人員處理
    Judge 推理
    雖然回覆內容涵蓋了用戶所需的資訊,但未遵循規定的固定格式,導致正確性評分低。
    錯誤陳述 (1)
    • 回覆內容未遵循固定格式的問題回報模板
  • 案例 7DB45E5C

    請問我可以查詢我的訂單詳情嗎?

    已完成
    第 1 次嘗試 · 已完成 26138ms
    腳本進度 · 訂單查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 訂單查詢
    腳本規則
    - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
    
    訂單查詢的 Agent 情景
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    ● 已呼叫:shopline_search_orders
    腳本規則
    1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - Provide clear and concise answers based on order search results from tool messages
    - If multiple relevant orders found, combine them logically
    - If no relevant order found, acknowledge and offer to check with customer service
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → shopline_search_orders
    USER請問我可以查詢我的訂單詳情嗎?
    BOT正在為您搜尋最新資料 ⏳ 您好,我是 SWAG Creator AI bot,很高興為您服務!目前查無您的訂單資訊。為了協助您查詢,請提供您的訂單編號、下單時使用的手機號碼或電子郵件信箱,這樣我才能幫您找到正確的訂單詳情。請問方便提供相關資訊嗎?

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 963 · 訂單查詢
    TP 1
    FP 0
    FN 0

    工具使用

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • shopline_search_orders
    TP 1
    FP 0
    FN 0

    回答品質

    86.7%
    相關性
    100.0%
    完整性
    70.0%
    正確性
    90.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 請提供訂購時的姓名和聯絡電話
    II 重要
    III 補充
    10.0% · w 10%
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您好,我是 SWAG Creator AI bot,很高興為您服務!目前查無您的訂單資訊。為了協助您查詢,請提供您的訂單編號、下單時使用的手機號碼或電子郵件信箱,這樣我才能幫您找到正確的訂單詳情。請問方便提供相關資訊嗎?
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 請提供訂購時的姓名和聯絡電話
    III 補充說明 w 10%
    • 我會幫您查詢相關訂單詳情
    Judge 推理
    AI 回覆中請求提供訂單編號、手機號碼或電子郵件,未能完全符合要求,應該要求姓名和聯絡電話。回覆的內容雖然相關,但缺少了核心必答的要素,因此完整性得分較低。
  • 案例 7967DCD2

    我想查詢一下我的訂單狀態,請問需要提供什麼資料呢?

    已完成
    第 1 次嘗試 · 已完成 23467ms
    腳本進度 · 訂單查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 訂單查詢
    腳本規則
    - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
    
    訂單查詢的 Agent 情景
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    ● 已呼叫:shopline_search_orders
    腳本規則
    1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - Provide clear and concise answers based on order search results from tool messages
    - If multiple relevant orders found, combine them logically
    - If no relevant order found, acknowledge and offer to check with customer service
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → shopline_search_orders
    USER我想查詢一下我的訂單狀態,請問需要提供什麼資料呢?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 SWAG Creator AI bot,很高興為您服務!查詢訂單狀態時,您可以提供以下其中一項資訊: - 訂單編號 - 手機號碼(下單時填寫的) - Email(下單時填寫的) - 物流追蹤編號 請提供上述任一資訊,我將協助您查詢訂單狀態。

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 963 · 訂單查詢
    TP 1
    FP 0
    FN 0

    工具使用

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • shopline_search_orders
    TP 1
    FP 0
    FN 0

    回答品質

    90.0%
    相關性
    100.0%
    完整性
    70.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 聯絡電話
    II 重要
    III 補充
    50.0% · w 10%
    • 以便我幫您找到相關的訂單資訊
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 SWAG Creator AI bot,很高興為您服務!查詢訂單狀態時,您可以提供以下其中一項資訊: - 訂單編號 - 手機號碼(下單時填寫的) - Email(下單時填寫的) - 物流追蹤編號 請提供上述任一資訊,我將協助您查詢訂單狀態。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 請提供您的訂單編號或聯絡電話
    III 補充說明 w 10%
    • 以便我幫您找到相關的訂單資訊
    Judge 推理
    AI 回覆提供了查詢訂單狀態所需的資訊,但未完整涵蓋所有必要的資料,特別是聯絡電話的要求。
  • 案例 4E7B16DF

    我想查詢我的訂單狀態,可以幫我看看嗎?

    已完成
    第 1 次嘗試 · 已完成 23392ms
    腳本進度 · 訂單查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 訂單查詢
    腳本規則
    - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
    
    訂單查詢的 Agent 情景
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    ● 已呼叫:shopline_search_orders
    腳本規則
    1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - Provide clear and concise answers based on order search results from tool messages
    - If multiple relevant orders found, combine them logically
    - If no relevant order found, acknowledge and offer to check with customer service
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → shopline_search_orders
    USER我想查詢我的訂單狀態,可以幫我看看嗎?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 SWAG Creator AI bot,很高興為您服務!目前查無您的相關訂單資訊。為了協助您查詢,請提供您的訂單編號、手機號碼或下單時使用的電子郵件信箱,這樣我才能幫您更精確地查詢訂單狀態。謝謝您的配合!

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 963 · 訂單查詢
    TP 1
    FP 0
    FN 0

    工具使用

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • shopline_search_orders
    TP 1
    FP 0
    FN 0

    回答品質

    86.7%
    相關性
    100.0%
    完整性
    70.0%
    正確性
    90.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 請提供您的訂購姓名或訂單編號
    II 重要
    III 補充
    0.0% · w 10%
    • 這樣我才能幫您查詢訂單狀態
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 SWAG Creator AI bot,很高興為您服務!目前查無您的相關訂單資訊。為了協助您查詢,請提供您的訂單編號、手機號碼或下單時使用的電子郵件信箱,這樣我才能幫您更精確地查詢訂單狀態。謝謝您的配合!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 請提供您的訂購姓名或訂單編號
    III 補充說明 w 10%
    • 這樣我才能幫您查詢訂單狀態
    Judge 推理
    AI 回覆中請求提供訂單編號或手機號碼,但未提及訂購姓名,導致核心必答項目未完全覆蓋。回覆中也缺少補充 CTA,未能完整滿足查詢需求。
  • 案例 E9ED93A9

    那個髮片怎麼用啊?

    已完成
    第 1 次嘗試 · 已完成 25040ms
    腳本進度 · 知識與產品查詢 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 知識與產品查詢
    腳本規則
    - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                        - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                        - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                        - Short queries under 10 characters
                        - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
    - 活動相關:
                        - 活動/報名/參加
                        - 優惠/折扣/促銷
                        - 抽獎/贈品/獎品
    - 公司資訊相關:
                        - 粉絲團/粉專/FB/Facebook/臉書
                        - Instagram/IG/社群/社群媒體
                        - 官網/網站/官方網站
                        - LINE/Line官方帳號
                        - Youtube/YT/影片/頻道
                        - 公司/品牌/關於我們
    - 服務相關:
                        - 服務時間/營業時間/上班時間
                        - 聯絡方式/電話/信箱/地址
                        - 退換貨/退款/退費
                        - 保固/維修/售後
                        - 配送/運費/到貨時間
                        - 付款方式/分期/優惠
                        - 會員/積分/紅利
                        - 發票/收據/證明
    - 政策相關:
                        - 政策/規定/條款
                        - 隱私/個資/資料
                        - 安全/保障/保護
                        - 責任/義務/權利
    - 技術問題:
                        - 無法/不能/不行
                        - 錯誤/異常/問題
                        - 當機/卡住/慢
                        - 登入/註冊/密碼
                        - 設定/安裝/使用
    - 產品使用方式:
                        - 怎麼用/如何使用/使用方法
                        - 使用方式/操作方式/使用步驟
                        - 安裝/設定/配置
                        - 第一次使用/新手使用/初次使用
                        - 使用技巧/使用建議/使用訣竅
                        - 使用注意/注意事項/使用須知
                        - 使用限制/使用條件/使用要求
    - 產品組合搭配:
                        - 搭配/組合/配對
                        - 一起用/同時使用/配合使用
                        - 推薦組合/熱門組合/最佳搭配
                        - 套餐/套組/套裝
                        - 加購/加買/額外購買
                        - 相關產品/相關商品/配套
                        - 升級/升級版/進階版
    - 功能補充說明:
                        - 功能/特色/特性
                        - 詳細說明/詳細介紹/詳細規格
                        - 補充說明/額外說明/更多資訊
                        - 技術規格/技術參數/技術細節
                        - 適用範圍/適用對象/適用情境
                        - 限制/限制條件/使用限制
                        - 差異/不同/區別
    - 產品比較:
                        - 比較/對比/差異
                        - 哪個好/哪個適合/選擇建議
                        - 優缺點/優劣/好壞
                        - 推薦/建議/選擇
                        - 性價比/CP值/划算
    - 產品維護保養:
                        - 保養/維護/清潔
                        - 保存/存放/收藏
                        - 壽命/使用期限/保固期
                        - 維修/故障/問題排除
                        - 更換/替換/更新
    - 直接產品需求:
                        - 商品/產品/物品
                        - 推薦/介紹/建議
                        - 我想要/我需要/我在找
                        - 購買/買/訂購
    - 產品特性:
                        - 功能/特色/優點
                        - 規格/尺寸/容量
                        - 價格/費用/成本
                        - 品質/評價/口碑
                        - 適用/適合/符合
    - 使用場景:
                        - 用途/目的/需求
                        - 場合/情境/環境
                        - 對象/年齡/性別
                        - 預算/範圍/限制
    
    統一處理知識庫查詢與產品資訊查詢,使用並發搜尋提供完整資訊
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:query、keywords_or_codes
    腳本規則
    ### knowledge_and_product_search_parameters — 知識庫與產品並發搜尋參數
    - query [string] (必填): User's current main question or topic to inquire about, or product they want to query or get recommendations for (3-20 word phrase, focusing on latest intent, excluding resolved or irrelevant content)
    - keywords_or_codes [array] (必填): All codes, labels, product keywords, model numbers appearing in user's message (e.g., C90012, T1234), empty array if none
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    query 請問最新的無線耳機有哪些推薦? — (對話未走到)
    keywords_or_codes [] — (對話未走到)
    STEP
    03

    API 工具

    ○ 等待資訊收集完成
    腳本規則
    1. search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - ### 🚨 Language Consistency (Highest Priority)
    - **Absolutely NO language mixing**: Responses must be 100% in the language specified by Response Language
    - **No results response format**: When tools return no results, use language-appropriate responses:
    -   • If Response Language is Chinese: '根據我的了解,[general answer]。為了確保準確,建議你跟真人客服確認一下喔!'
    -   • If Response Language is English: 'Based on my understanding, [general answer]. For accuracy, I recommend confirming with our customer service team!'
    -   • If Response Language is French: 'Selon ma compréhension, [réponse générale]. Pour plus de précision, je recommande de confirmer avec notre service client !'
    -   • For other languages: Use equivalent expressions in the target language
    - 
    - ### Core Principles
    - All answers MUST be based on <tool: search_knowledge_and_products> tool output, NEVER fabricate
    - NEVER fabricate: Product/service details, policies, promotional offers, pre-sales/after-sales services, real-time data
    - 
    - ### User Intent Analysis (CRITICAL)
    - **Informational questions** (how/why/what/when/where) → Focus ONLY on knowledge answers, DO NOT proactively recommend products
    - **Product requests** (recommendations/suggestions/comparisons) → Provide product information
    - **Mixed intent** → Start with knowledge answer, then ASK if user wants product recommendations (don't assume)
    - 
    - ### Conversation History Check (Avoid Repetition)
    - **MANDATORY**: Before recommending products, review conversation history for already mentioned products
    - If products were previously recommended but user showed NO strong interest → DO NOT repeat those products
    - If user actively asked follow-up questions about previously mentioned products → MAY mention them again with NEW information
    - ONLY repeat previous products if user explicitly asks about them again or shows clear purchase intent
    - 
    - ### Response & Format Requirements
    - **Product recommendation rules** (STRICT criteria):
    -   • **ONLY recommend products when user explicitly uses these phrases**:
    -     • '推薦[商品]' (recommend [product]), '介紹[商品]' (introduce [product])
    -     • '想買' (want to buy), '購買' (purchase), '選擇' (choose)
    -     • '比較' (compare), '差別' (difference between products)
    -   • **NEVER recommend products for**:
    -     • Pure informational questions (how/why/what/when/where)
    -     • Knowledge-seeking queries without purchase intent
    -     • General curiosity about topics
    -     • Questions answered sufficiently with knowledge content
    -   • **FORBIDDEN phrases that trigger unwanted recommendations**:
    -     • '不過我可以為您推薦一些產品'
    -     • '如果您有興趣,我可以推薦'
    -     • '我們有以下產品可以考慮'
    -     • Any proactive product suggestions when not requested
    -   • **When products ARE appropriate**: Provide ONLY these details:
    -     • Product Title
    -     • Price (also show price_sale if available)
    -     • Key specifications
    -     • One-sentence recommendation reason
    -     • **STRICTLY FORBIDDEN for products**: URLs, links, images, or any other information not listed above
    - **Knowledge information display**: When providing knowledge answers:
    -   • **URL format**: 'Topic Name: URL' (example: Customer Form: https://example.com)
    -   • **ABSOLUTELY FORBIDDEN**: markdown format [text](url). NEVER write [Customer Form](url), ALWAYS write Customer Form: url
    -   • **Image format**: 
    
    ![](image_url)
    
     (Use ONLY image links from tool messages)
    - 
    - ### Prohibited Terms
    - MUST NOT mention: 'knowledge base', 'database', 'system records', 'internal data', 'documentation'
    - NEVER use robotic phrases: 'according to our data', 'based on knowledge base', 'system shows'
    - Always rephrase naturally, making responses sound like a helpful human assistant
    - 
    - **Pre-response Checklist**: □ Correct language □ Based on tool results □ Natural expression
    完整測試 4 個步驟
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER那個髮片怎麼用啊?
    BOT馬上為您找找看相關內容 📋 根據目前查到的資訊,沒有找到關於「髮片怎麼用」的相關說明。請問您指的是平台上的某個功能、商品,還是其他用途呢?方便再提供更詳細的描述嗎?這樣我才能更精確地協助您喔!

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 962 · 知識與產品查詢
    TP 1
    FP 0
    FN 0

    工具使用

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • search_unified
    TP 1
    FP 0
    FN 0

    回答品質

    26.7%
    相關性
    50.0%
    完整性
    30.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    0.0% · w 60%
    • 髮片的使用方式主要有幾個步驟
    • 確保你的頭髮乾淨整齊
    • 將髮片輕輕放置在你的頭髮上
    • 根據需要調整位置
    II 重要
    0.0% · w 30%
    • 建議在使用後多加注意髮片的清潔和保養,以延長使用壽命
    III 補充
    0.0% · w 10%
    • 若有任何疑問,建議你跟真人客服確認一下喔
    AI 回覆
    馬上為您找找看相關內容 📋 根據目前查到的資訊,沒有找到關於「髮片怎麼用」的相關說明。請問您指的是平台上的某個功能、商品,還是其他用途呢?方便再提供更詳細的描述嗎?這樣我才能更精確地協助您喔!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 髮片的使用方式主要有幾個步驟
    • 確保你的頭髮乾淨整齊
    • 將髮片輕輕放置在你的頭髮上
    • 根據需要調整位置
    • 用隱形夾固定
    II 重要限制 w 30%
    • 建議在使用後多加注意髮片的清潔和保養,以延長使用壽命
    III 補充說明 w 10%
    • 若有任何疑問,建議你跟真人客服確認一下喔
    Judge 推理
    這個回覆未能提供髮片的使用方法,且錯誤地聲稱沒有相關說明,完全未涵蓋正確的使用步驟和建議,導致回答不完整且不正確。
    錯誤陳述 (1)
    • 沒有找到關於「髮片怎麼用」的相關說明
  • 案例 658DB87F

    我想回報系統有問題,可以怎麼做?

    已完成
    第 1 次嘗試 · 已完成 20672ms
    腳本進度 · Bug回報情境 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 Bug回報情境
    腳本規則
    - 當用戶的訊息中明確表示想要回報問題或提交錯誤/Bug時觸發。
    包含但不限於以下語意:
    「我要回報問題」
    「我要回報 bug」
    「我遇到錯誤」
    「我發現系統有問題/怪怪的」
    「功能不能用」
    「畫面出錯/跳錯誤」
    「網站壞掉了」
    「APP 壞掉了」
    「登不進去/卡住了」
    「怎麼一直 error」
    「是不是系統 bug」
    
    概念:
    只要用戶語意指向「問題回報」「系統異常」「故障」「Bug」即可視為觸發。
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:您的SWAG ID、發生時間段
    腳本規則
    ### 問題回報 — 問題回報的相關資訊收集
    - 您的SWAG ID [text] (必填): 
    - 發生時間段 [number] (必填):
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    您的SWAG ID SWAG123456 — (對話未走到)
    發生時間段 2023年10月1日至2023年10月5日 — (對話未走到)
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - 1. 當觸發條件成立時,回覆以下{問題回報}模板,格式內文不得改寫、不需額外創意延伸:
    
     {問題回報}模板(固定格式):
    「您好,為了協助您處理問題,請提供以下資訊:
    
    - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb)
    - 發生的時段(例如 16:00~16:05)
    - 狀況螢幕錄製影片/截圖
    
    並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。」
    
    2.提供全部資訊後,在執行轉真人,若有遺漏內容,AI 需要再請用戶提供。
    
      2-1 符合以下任一即可視為「提供資訊」:
    
    - 提供 SWAG ID 資訊(例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    - 敘述遇到的狀況(如「畫面卡住」「按鈕不能按」)
    
      2-2 收到任一資訊後必須回覆:
    「好的,我已將您提供的資訊轉交給客服人員,稍後將由真人客服為您協助,請您稍候一下。」
    
      2-3 之後 立即執行轉真人流程
    
    3. 若用戶提供的內容「完全無關」→ 必須重新引導
    
      3-1 當用戶回覆的內容與前述所需資訊無關,例如:
    「好的」
    「幫我處理」
    「什麼意思?」
    「你是誰?」
    「為什麼要提供?」
    廣告、貼圖、無意義字串
    
    - 不得視為資訊已提供
    - 不得轉真人
    - 必須再次清楚引導用戶提供必要資訊
      3-2 固定回覆模板:
    「為了協助您處理問題,仍需要您提供以下資訊才能轉交給客服人員:
    - 提供 SWAG ID 資訊 (例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    並請再描述一下您遇到的狀況,謝謝!」
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 04
    USER我想回報系統有問題,可以怎麼做?
    BOT您好,我是 SWAG Creator AI bot,很高興為您服務! 為了協助您處理問題,請提供以下資訊: - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb) - 發生的時段(例如 16:00~16:05) - 狀況螢幕錄製影片/截圖 並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 1753 · Bug回報情境
    TP 1
    FP 0
    FN 0

    回答品質

    66.7%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    II 重要
    0.0% · w 30%
    • 請提供 SWAG ID
    • 請提供發生的時段
    • 請提供狀況螢幕錄製影片/截圖
    III 補充
    0.0% · w 10%
    • 請簡述一下您遇到的狀況
    • 我會協助您轉交客服人員處理
    AI 回覆
    您好,我是 SWAG Creator AI bot,很高興為您服務! 為了協助您處理問題,請提供以下資訊: - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb) - 發生的時段(例如 16:00~16:05) - 狀況螢幕錄製影片/截圖 並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。
    預期答案 · 加權拆解
    II 重要限制 w 30%
    • 請提供 SWAG ID
    • 請提供發生的時段
    • 請提供狀況螢幕錄製影片/截圖
    III 補充說明 w 10%
    • 請簡述一下您遇到的狀況
    • 我會協助您轉交客服人員處理
    Judge 推理
    回覆內容未遵循規定的固定格式,缺少了必要的關鍵資訊要求,導致無法滿足用戶的需求。
  • 案例 0C72C275

    我的訂單有沒有找到?

    已完成
    第 1 次嘗試 · 已完成 31242ms
    腳本進度 · 訂單查詢 ✓ 已走完
    STEP
    01

    觸發條件

    ● 已觸發 訂單查詢
    腳本規則
    - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
    
    訂單查詢的 Agent 情景
    STEP
    02

    資訊收集

    — 依規則行為(由「回答品質」評分)
    此情境無結構化欄位需收集,但 spec rules 約束 bot 行為(驗證關卡、禁止外洩等)— 評分由 answer_quality + spec_rules 維度承擔
    STEP
    03

    API 工具

    ● 已呼叫:shopline_search_orders
    腳本規則
    1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - Provide clear and concise answers based on order search results from tool messages
    - If multiple relevant orders found, combine them logically
    - If no relevant order found, acknowledge and offer to check with customer service
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → shopline_search_orders
    USER我的訂單有沒有找到?
    BOT正在為您搜尋最新資料 ⏳ 您好,我是 SWAG Creator AI bot,很高興為您服務! 目前查無您的相關訂單資訊。請問您可以提供更詳細的查詢資料嗎?例如訂單編號、下單時使用的手機號碼或電子郵件,這樣我才能幫您更精確地查詢。謝謝您的配合!

    情境路由

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • 963 · 訂單查詢
    TP 1
    FP 0
    FN 0

    工具使用

    100.0%
    Precision
    100.0%
    Recall
    100.0%
    F1
    100.0%
    預期 (1)
    • shopline_search_orders
    TP 1
    FP 0
    FN 0

    回答品質

    90.0%
    相關性
    100.0%
    完整性
    70.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 需要提供您的訂單編號或聯絡電話
    II 重要
    0.0% · w 30%
    • 若找到多個相關訂單,會將它們邏輯性地合併回覆
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您好,我是 SWAG Creator AI bot,很高興為您服務! 目前查無您的相關訂單資訊。請問您可以提供更詳細的查詢資料嗎?例如訂單編號、下單時使用的手機號碼或電子郵件,這樣我才能幫您更精確地查詢。謝謝您的配合!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 需要提供您的訂單編號或聯絡電話
    II 重要限制 w 30%
    • 若找到多個相關訂單,會將它們邏輯性地合併回覆
    Judge 推理
    這個回覆的相關性很高,因為它針對用戶的查詢進行了回應,但在完整性上有所不足,未能提供所需的訂單編號或聯絡電話的要求,且未提及若有多個訂單的合併回覆。
項目 III.

對話素養(混合問答)

mixed_qa 10 cases

維度總表

各維度品質分 · 覆蓋率
找對資料 召回
retrieval
100.0%
[100.0% – 100.0%] · n=8
F1 18.2% · 相關率 36.3% · 精確 10.0%
8 / 10 適用
不亂編造 平均
faithfulness
85.2%
[63.0% – 100.0%] · n=9
10 / 10 適用
答得到位 平均
answer_quality
76.7%
[58.0% – 91.3%] · n=10
10 / 10 適用
  • 案例 5893E528

    請問怎麼參加主題直播呢?

    已完成
    第 1 次嘗試 · 已完成 30477ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER請問怎麼參加主題直播呢?
    BOT讓我幫您查詢一下相關資訊 🔍 參加主題直播的詳細方式可以參考這個說明頁面: 怎麼參加主題直播: https://swag.run/livestream-show 如果你想報名成為主題直播的創作者,也可以參考這個報名格式介紹: 報名直播主題: https://reurl.cc/V2W7LZ 有其他關於直播的問題也歡迎再詢問喔!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377412 · 怎麼參加主題直播
      問題
      怎麼參加主題直播
      回答
      這邊有詳細介紹哦~ https://swag.run/livestream-show
    意料之外 (9)
    • ! know_377413 · 報名直播主題
      問題
      報名直播主題
      回答
      報名格式如下方介紹,只要符合格式就會自動上欄位:https://reurl.cc/V2W7LZ
    • ! know_377423 · 如何直播
      問題
      如何直播
      回答
      「直播」功能請參考以下說明:https://reurl.cc/O6mzmg
    • ! know_377442 · 怎麼開直播?
      問題
      怎麼開直播?
      回答
      「直播」功能請參考以下說明:https://reurl.cc/R2kDgn
    • ! know_377443 · 直播是什麼?
      問題
      直播是什麼?
      回答
      「直播」功能請參考以下說明:https://reurl.cc/R2kDgn
    • ! know_377543 · 可以同時用好幾個直播平台直播嗎
      問題
      可以同時用好幾個直播平台直播嗎
      回答
      開直播時請不要同時進行其他平台的直播喔,如果被審核相關人員確認到,會進行關閉直播權限的
    • ! know_377514 · 免費直播
      問題
      免費直播
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/8ab4be8f-c075-4e43-9329-fc820c99bb77-%E5%85%8D%E8%B2%BB%E7%9B%B4%E6%92%AD/index.html
    • ! know_377512 · 快速上手直播設定,提升你的直播曝光
      問題
      快速上手直播設定,提升你的直播曝光
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/e27085b7-83e7-4fdf-9b0c-8d60f5629ac1--%E5%BF%AB%E9%80%9F%E4%B8%8A%E6%89%8B%E7%9B%B4%E6%92%AD%E8%A8%AD%E5%AE%9A%E6%8F%90%E5%8D%87%E4%BD%A0%E7%9A%84%E7%9B%B4%E6%92%AD%E6%9B%9D%E5%85%89/index.html
    • ! know_377513 · 直播模式說明
      問題
      直播模式說明
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/b55ffc83-e56d-44dc-a79e-0cac22c3eb43-%E7%9B%B4%E6%92%AD%E6%A8%A1%E5%BC%8F%E8%AA%AA%E6%98%8E/index.html
    • ! know_377517 · 一對一(付費直播)
      問題
      一對一(付費直播)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/b258ec34-0a48-4479-9237-076f566b8507-%E4%B8%80%E5%B0%8D%E4%B8%80%E4%BB%98%E8%B2%BB%E7%9B%B4%E6%92%AD/index.html
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到的參加主題直播的方式和報名格式都能在來源中找到,且引用的網址正確,因此所有的事實陳述都是有根據的。

    回答品質

    90.0%
    相關性
    100.0%
    完整性
    70.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    II 重要
    III 補充
    10.0% · w 10%
    • 這邊有詳細介紹哦
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 參加主題直播的詳細方式可以參考這個說明頁面: 怎麼參加主題直播: https://swag.run/livestream-show 如果你想報名成為主題直播的創作者,也可以參考這個報名格式介紹: 報名直播主題: https://reurl.cc/V2W7LZ 有其他關於直播的問題也歡迎再詢問喔!
    預期答案 · 加權拆解
    III 補充說明 w 10%
    • 這邊有詳細介紹哦
    Judge 推理
    回覆中提供了參加主題直播的連結,並且詢問是否有其他問題,顯示出良好的互動性。然而,缺少了「這邊有詳細介紹哦」這個補充 CTA,導致完整性得分降低。
  • 案例 7AED09C7

    統一搜尋是怎麼運作的?

    已完成
    第 1 次嘗試 · 已完成 30288ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    ● 已呼叫:search_unified
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER統一搜尋是怎麼運作的?
    BOT正在為您搜尋最新資料 ⏳ 根據我的了解,目前查無「統一搜尋是怎麼運作的?」的相關詳細說明。為了確保準確,建議你跟真人客服確認一下喔!如果你有其他具體問題,也歡迎再告訴我,我會盡力協助你。

    忠實度

    幻覺
    幻覺比率
    100.0%
    越低越好
    引用依據
    0.0%
    越高越好
    Judge 推理
    AI的回覆中提到查無相關詳細說明,且沒有引用任何來源資料,因此所有的事實主張都被判定為未被支持,導致幻覺率為1.0,引用基礎為0.0。
    幻覺陳述 (1)
    • 統一搜尋是怎麼運作的?

    回答品質

    16.7%
    相關性
    50.0%
    完整性
    0.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    0.0% · w 60%
    • 統一搜尋使用混合搜尋技術
    • 結合 BM25 和向量搜尋
    • 支援 5 種 source_type
    II 重要
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ 根據我的了解,目前查無「統一搜尋是怎麼運作的?」的相關詳細說明。為了確保準確,建議你跟真人客服確認一下喔!如果你有其他具體問題,也歡迎再告訴我,我會盡力協助你。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 統一搜尋使用混合搜尋技術
    • 結合 BM25 和向量搜尋
    • 支援 5 種 source_type
    Judge 推理
    這個回答未能提供任何有關統一搜尋運作的具體資訊,完全缺乏核心必答的內容,因此在相關性、完整性和正確性上都得分很低。
  • 案例 27E9C502

    如何回報系統的錯誤問題?

    已完成
    第 1 次嘗試 · 已完成 47152ms
    腳本進度 · Bug回報情境 ✗ 卡關
    STEP
    01

    觸發條件

    ● 已觸發 Bug回報情境
    腳本規則
    - 當用戶的訊息中明確表示想要回報問題或提交錯誤/Bug時觸發。
    包含但不限於以下語意:
    「我要回報問題」
    「我要回報 bug」
    「我遇到錯誤」
    「我發現系統有問題/怪怪的」
    「功能不能用」
    「畫面出錯/跳錯誤」
    「網站壞掉了」
    「APP 壞掉了」
    「登不進去/卡住了」
    「怎麼一直 error」
    「是不是系統 bug」
    
    概念:
    只要用戶語意指向「問題回報」「系統異常」「故障」「Bug」即可視為觸發。
    STEP
    02

    資訊收集

    ✗ 已收集 0 / 2 項
    未收集:您的SWAG ID、發生時間段
    腳本規則
    ### 問題回報 — 問題回報的相關資訊收集
    - 您的SWAG ID [text] (必填): 
    - 發生時間段 [number] (必填):
    預期 / 已收集 (0/2)
    欄位 預期值(generate) 已收集(run)
    您的SWAG ID SWAG123456 — (對話未走到)
    發生時間段 2023年10月15日 14:00至16:00 — (對話未走到)
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    腳本規則
    - 1. 當觸發條件成立時,回覆以下{問題回報}模板,格式內文不得改寫、不需額外創意延伸:
    
     {問題回報}模板(固定格式):
    「您好,為了協助您處理問題,請提供以下資訊:
    
    - SWAG ID (例如 faifai_bebe / maymei_3652/arielbb)
    - 發生的時段(例如 16:00~16:05)
    - 狀況螢幕錄製影片/截圖
    
    並請再簡述一下您遇到的狀況,我會協助您轉交客服人員處理。」
    
    2.提供全部資訊後,在執行轉真人,若有遺漏內容,AI 需要再請用戶提供。
    
      2-1 符合以下任一即可視為「提供資訊」:
    
    - 提供 SWAG ID 資訊(例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    - 敘述遇到的狀況(如「畫面卡住」「按鈕不能按」)
    
      2-2 收到任一資訊後必須回覆:
    「好的,我已將您提供的資訊轉交給客服人員,稍後將由真人客服為您協助,請您稍候一下。」
    
      2-3 之後 立即執行轉真人流程
    
    3. 若用戶提供的內容「完全無關」→ 必須重新引導
    
      3-1 當用戶回覆的內容與前述所需資訊無關,例如:
    「好的」
    「幫我處理」
    「什麼意思?」
    「你是誰?」
    「為什麼要提供?」
    廣告、貼圖、無意義字串
    
    - 不得視為資訊已提供
    - 不得轉真人
    - 必須再次清楚引導用戶提供必要資訊
      3-2 固定回覆模板:
    「為了協助您處理問題,仍需要您提供以下資訊才能轉交給客服人員:
    - 提供 SWAG ID 資訊 (例如 faifai_bebe / maymei_3652/arielbb)
    - 提供發生的時段(例如 16:00~16:05)
    - 提供狀況螢幕錄製影片/截圖
    並請再描述一下您遇到的狀況,謝謝!」
    測試 3 步 · 此案例不測 1 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER如何回報系統的錯誤問題?
    BOT馬上為您找找看相關內容 📋 您好,我是 SWAG Creator AI bot,很高興為您服務! 如果您遇到系統錯誤或 BUG,請提供以下資訊,以利工程師協助查詢: 1. 直播模式:免費、一對一、一對多或限時表演(請註明表演標題) 2. 觸發時間(包含所在地區、時區) 3. SWAG ID 4. 狀況詳細描述 5. 相關螢幕截圖或錄影 請將上述資訊完整敘述,提交後技術部門會根據您提供的內容進行排查,並會透過對話視窗主動回覆您。若未提供完整資訊,將無法進一步確認問題。 如需真人協助,也可留言「真人客服」轉交給專人處理。

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    回覆中提供的資訊與來源內容一致,因此沒有虛構的聲明。然而,回覆未遵循指定的格式模板,這是違反規則的原因。

    回答品質

    43.3%
    相關性
    80.0%
    完整性
    50.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    II 重要
    0.0% · w 30%
    • 請提供 SWAG ID
    • 請提供發生的時段
    • 請提供狀況螢幕錄製影片/截圖
    III 補充
    0.0% · w 10%
    • 請簡述一下您遇到的狀況
    • 我會協助您轉交客服人員處理
    AI 回覆
    馬上為您找找看相關內容 📋 您好,我是 SWAG Creator AI bot,很高興為您服務! 如果您遇到系統錯誤或 BUG,請提供以下資訊,以利工程師協助查詢: 1. 直播模式:免費、一對一、一對多或限時表演(請註明表演標題) 2. 觸發時間(包含所在地區、時區) 3. SWAG ID 4. 狀況詳細描述 5. 相關螢幕截圖或錄影 請將上述資訊完整敘述,提交後技術部門會根據您提供的內容進行排查,並會透過對話視窗主動回覆您。若未提供完整資訊,將無法進一步確認問題。 如需真人協助,也可留言「真人客服」轉交給專人處理。
    預期答案 · 加權拆解
    II 重要限制 w 30%
    • 請提供 SWAG ID
    • 請提供發生的時段
    • 請提供狀況螢幕錄製影片/截圖
    III 補充說明 w 10%
    • 請簡述一下您遇到的狀況
    • 我會協助您轉交客服人員處理
    Judge 推理
    回覆未按照規定的模板格式提供必要資訊,且缺少了關鍵的SWAG ID、發生的時段和狀況螢幕錄製影片/截圖,導致完整性和正確性都未達標。
    錯誤陳述 (1)
    • 回覆內容未遵循固定格式的問題回報模板
  • 案例 90EA00A3

    請問收到勞報單回填的gmail信箱要怎麼確認?

    已完成
    第 1 次嘗試 · 已完成 38087ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER請問收到勞報單回填的gmail信箱要怎麼確認?
    BOT稍等一下我來幫您查詢 💡 您好,我是 SWAG Creator AI bot,很高興為您服務! 如果您想確認是否有成功回填勞報單,請到您的 Gmail 信箱查看是否有收到「感謝你填寫這份表單:xxxx勞報單」的通知信。如果有收到這封信,就代表您已經回填成功。 請注意: - 信箱必須與您在表單中填寫的 Gmail 相同。 - 如果信件內容有資料填錯,下個月仍然會收不到款項,請務必檢查內容。 - 若沒收到這封信,請重新填寫一次勞報單。 如還有其他疑問,也可以留言「真人客服」協助您處理。

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377475 · 有收到勞報單回填嗎
      問題
      有收到勞報單回填嗎
      回答
      妳好,有填寫成功的話,你的gmail信箱會收到回填成功的『感謝你填寫這份表單:xxxx勞報單』通知! 請特別留意:裡面若有資料寫錯,下個月仍然收不到款項 請到信箱中檢查,如果有填寫錯誤的部分,請重新填寫一次勞報單。(確認的gmail信箱,要跟表單裡的gmail相同喔) 而如果信箱中沒有收到信,請妳重新填寫一次
    意料之外 (9)
    • ! know_377531 · 勞報單回傳是否成功
      問題
      勞報單回傳是否成功
      回答
      填寫完勞報單後,可以到信箱確認是否有收到回填資料,可以檢查裡面的內容,確認是否有填錯唷!(填錯一樣這次會收不到款項的),如果有確認到填寫錯誤,請打開勞報單再次填寫
    • ! know_377541 · 沒填到勞報單
      問題
      沒填到勞報單
      回答
      如果你是指「超過勞報單時間,無法填寫」或「沒填勞報單」的補單問題,請留言「真人客服」,由相關人員為你申請補出款喔。
    • ! know_377444 · 勞報單
      問題
      勞報單
      回答
      因應台灣法規,台灣國籍創作者需填寫勞報單 平台的提領方式是月結,每個月的最後一天做結算,達到後會於以下時間發送勞報單 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) 📍每月15號(遇假日提前) ∙ 分潤+活動獎勵/補出款 ∙ 每月 6–10 日 發送勞報單。需於 10 號前完成,才可於 15 號出款 📍每月25號(遇假日提前) ∙ 補出款(未趕上 15 號者需找小編申請要補出) ∙ 每月 18–20 日 發送勞報單。需於 20 號前完成,才可於 25 號出款 📍工會收據收集: - 收集表單:每個月15發送到小鈴噹 - 收集時間:每月12號-29號,超過時間無法補件 - 備註: 1.填寫表單更改為固定同一份(連結相同) 2.若有一次提供一季則期間內後續無需每月重新提供 3.假設5/15發送(代表為五月分潤),提供的有效期限需包含5月的才有效 4.僅接受表單填寫的資料,不接受其他方式提供 5.當月勞報單金額發出後不接受補件當期、超過當月填寫時間也不接受補件
    • ! know_377404 · 我要填寫勞報單
      問題
      我要填寫勞報單
      回答
      當月15號(遇假日提前):出款上月「鑽石分潤」+「活動獎勵」+「補出款申請」 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) • 每月 6–10 日 發送勞報單,請於時間內填寫完成才可出款 當月25號(遇假日提前):「補出款」(未趕上 15 號者請留言『真人客服』申請補出) • 勞報單約於 18 - 20 號發放,請於時間內填寫完成才可出款" 屆時收到勞報單,一定要記得要點開網址進行內容填寫,才會如期收到款項喔,沒寫勞報單是收不到款項的
    • ! know_377445 · 出帳時間
      問題
      出帳時間
      回答
      出款時間:每個月15號出鑽石分潤、如未填寫勞報單可以於15號.25號申請補出款 📍每月15號(遇假日提前) ∙ 分潤+活動獎勵/補出款 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) ∙ 每月 6–10 日 發送勞報單。需於 10 號前完成,才可於 15 號出款 📍每月25號(遇假日提前) ∙ 補出款(未趕上 15 號者需找小編申請要補出) ∙ 每月 18–20 日 發送勞報單。需於 20 號前完成,才可於 25 號出款 📍工會收據收集: - 收集表單:每個月15發送到小鈴噹 - 收集時間:每月12號-29號,超過時間無法補件 - 備註: 1.填寫表單更改為固定同一份(連結相同) 2.若有一次提供一季則期間內後續無需每月重新提供 3.假設5/15發送(代表為五月分潤),提供的有效期限需包含5月的才有效 4.僅接受表單填寫的資料,不接受其他方式提供 5.當月勞報單金額發出後不接受補件當期、超過當月填寫時間也不接受補件
    • ! know_377446 · 什麼時候出帳
      問題
      什麼時候出帳
      回答
      出款時間:每個月15號出鑽石分潤、如未填寫勞報單可以於15號.25號申請補出款 📍每月15號(遇假日提前) ∙ 分潤+活動獎勵/補出款 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) ∙ 每月 6–10 日 發送勞報單。需於 10 號前完成,才可於 15 號出款 📍每月25號(遇假日提前) ∙ 補出款(未趕上 15 號者需找小編申請要補出) ∙ 每月 18–20 日 發送勞報單。需於 20 號前完成,才可於 25 號出款 📍工會收據收集: - 收集表單:每個月15發送到小鈴噹 - 收集時間:每月12號-29號,超過時間無法補件 - 備註: 1.填寫表單更改為固定同一份(連結相同) 2.若有一次提供一季則期間內後續無需每月重新提供 3.假設5/15發送(代表為五月分潤),提供的有效期限需包含5月的才有效 4.僅接受表單填寫的資料,不接受其他方式提供 5.當月勞報單金額發出後不接受補件當期、超過當月填寫時間也不接受補件
    • ! know_377486 · 超過勞報單時間,無法填寫 沒填勞報單
      問題
      超過勞報單時間,無法填寫 沒填勞報單
      回答
      請留言『真人客服』,由相關人員為妳申請補出款喔
    • ! know_377391 · 帳號審核要等多久?
      問題
      帳號審核要等多久?
      回答
      您是否已簽合約了呢? 沒有的話請務必先到信箱,打開SWAG寄送的信件『Creator Contract - 名字 - SWAG 的簽署要求』進行手寫簽名(不要打字的) 官方人員會在平日上班時間進行開通
    • ! know_377399 · 怎麼出帳?
      問題
      怎麼出帳?
      回答
      平台的提領方式是月結,計算的時間是每月1號~最後一天,並於次月出帳 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) 當月15號(遇假日提前):出款上月「鑽石分潤」+「活動獎勵」+「補出款申請」 • 每月 6–10 日 發送勞報單,請於時間內填寫完成才可出款 當月25號(遇假日提前):「補出款」(未趕上 15 號者請留言『真人客服』申請補出) • 勞報單約於 18 - 20 號發放,請於時間內填寫完成才可出款
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆完全符合來源材料中的資訊,所有的事實陳述都有來源支持,因此沒有任何虛構的內容。

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    90.0% · w 60%
    • 確認的gmail信箱必須與表單中填寫的gmail相同
    II 重要
    III 補充
    AI 回覆
    稍等一下我來幫您查詢 💡 您好,我是 SWAG Creator AI bot,很高興為您服務! 如果您想確認是否有成功回填勞報單,請到您的 Gmail 信箱查看是否有收到「感謝你填寫這份表單:xxxx勞報單」的通知信。如果有收到這封信,就代表您已經回填成功。 請注意: - 信箱必須與您在表單中填寫的 Gmail 相同。 - 如果信件內容有資料填錯,下個月仍然會收不到款項,請務必檢查內容。 - 若沒收到這封信,請重新填寫一次勞報單。 如還有其他疑問,也可以留言「真人客服」協助您處理。
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 確認的gmail信箱必須與表單中填寫的gmail相同
    • 如果有填寫錯誤的部分,可以重新填寫一次勞報單
    Judge 推理
    這個回答針對用戶的問題提供了清楚的指引,並且包含了確認信箱的要求和重新填寫的建議。雖然內容完整,但在核心必答部分有一點缺漏,未明確提到信箱必須相同的要求。
  • 案例 B5713928

    請問我可以主動私訊其他用戶嗎?

    已完成
    第 1 次嘗試 · 已完成 37093ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER請問我可以主動私訊其他用戶嗎?
    BOT正在為您搜尋最新資料 ⏳ 您可以主動私訊其他用戶,詳細說明請參考這裡:主動私訊用戶: https://public.swag.live/help-center-creator/zh-tw/articles/ed7aa55b-eb1f-4a72-9d4f-c80bae699ec9-%E4%B8%BB%E5%8B%95%E7%A7%81%E8%A8%8A%E7%94%A8%E6%88%B6/index.html 如果您想了解更多關於私訊功能的介紹,也可以參考:私訊介紹: https://public.swag.live/help-center-creator/zh-tw/articles/115162e5-a963-499a-91a2-dc4b0656d863-%E7%A7%81%E8%A8%8A%E4%BB%8B%E7%B4%B9/index.html 如需操作說明或有其他疑問,歡迎再告訴我!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377501 · 主動私訊用戶
      問題
      主動私訊用戶
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/ed7aa55b-eb1f-4a72-9d4f-c80bae699ec9-%E4%B8%BB%E5%8B%95%E7%A7%81%E8%A8%8A%E7%94%A8%E6%88%B6/index.html
    意料之外 (9)
    • ! know_377424 · 如何使用私訊
      問題
      如何使用私訊
      回答
      「私訊」功能請參考以下說明:https://reurl.cc/WbOy87
    • ! know_377510 · 將架上內容透過私訊傳給用戶
      問題
      將架上內容透過私訊傳給用戶
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/d61a07ea-e125-4972-a34f-5cc84e64e910-%E5%B0%87%E6%9E%B6%E4%B8%8A%E5%85%A7%E5%AE%B9%E9%80%8F%E9%81%8E%E7%A7%81%E8%A8%8A%E5%82%B3%E7%B5%A6%E7%94%A8%E6%88%B6/index.html
    • ! know_377530 · 將架上內容透過私訊傳給用戶
      問題
      將架上內容透過私訊傳給用戶
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/80f7a529-5f27-47ef-ac79-2458e22f6efc-%E5%B0%87%E6%9E%B6%E4%B8%8A%E5%85%A7%E5%AE%B9%E9%80%8F%E9%81%8E%E7%A7%81%E8%A8%8A%E5%82%B3%E7%B5%A6%E7%94%A8%E6%88%B6/index.html
    • ! know_377490 · 可以刪除私訊嗎
      問題
      可以刪除私訊嗎
      回答
      訊息都是無法刪除的,這部分是為了保障雙方的權益,以避免產生爭議時仍有文字記錄可以進行依據
    • ! know_377425 · 怎麼調整私訊價格
      問題
      怎麼調整私訊價格
      回答
      「私訊」功能請參考以下說明:https://reurl.cc/WbOy87
    • ! know_377500 · 私訊介紹
      問題
      私訊介紹
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/115162e5-a963-499a-91a2-dc4b0656d863-%E7%A7%81%E8%A8%8A%E4%BB%8B%E7%B4%B9/index.html
    • ! know_377502 · 多選傳送-私訊
      問題
      多選傳送-私訊
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/d7b2030f-864e-4bee-9b84-0207c2c22a51-%E5%A4%9A%E9%81%B8%E5%82%B3%E9%80%81-%E7%A7%81%E8%A8%8A/index.html
    • ! know_377439 · 封鎖用戶他還能看到我的內容嗎
      問題
      封鎖用戶他還能看到我的內容嗎
      回答
      封鎖用戶後該位用戶無法查看「付費」內容,但可以看到您的「免費」內容哦,免費內容包含公開直播、免費限時動態、免費貼文
    • ! know_377468 · 為什麼直播間沒人?
      問題
      為什麼直播間沒人?
      回答
      請確認帳號是否有設定大頭照+30字自介+一張貼文(勿刪除),如果有任一項沒有設定,會被降低觸及率~ 如果都設定好了,系統會自動排除降觸及。 如果並非以上的因素,需要請妳想想如何以更吸引人的內容,吸引用戶進直播間觀看唷!建議可以多上傳動態.貼文增加與用戶間的互動與曝光喔~
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到可以主動私訊其他用戶,並提供了相關的連結,這些資訊都能在來源中找到,因此沒有虛構的內容,且所有的事實陳述都有來源支持。

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    正在為您搜尋最新資料 ⏳ 您可以主動私訊其他用戶,詳細說明請參考這裡:主動私訊用戶: https://public.swag.live/help-center-creator/zh-tw/articles/ed7aa55b-eb1f-4a72-9d4f-c80bae699ec9-%E4%B8%BB%E5%8B%95%E7%A7%81%E8%A8%8A%E7%94%A8%E6%88%B6/index.html 如果您想了解更多關於私訊功能的介紹,也可以參考:私訊介紹: https://public.swag.live/help-center-creator/zh-tw/articles/115162e5-a963-499a-91a2-dc4b0656d863-%E7%A7%81%E8%A8%8A%E4%BB%8B%E7%B4%B9/index.html 如需操作說明或有其他疑問,歡迎再告訴我!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 您可以主動私訊其他用戶
    III 補充說明 w 10%
    • 更多詳情請參考這篇文章:主動私訊用戶
    Judge 推理
    回覆內容完全符合用戶的問題,並且提供了正確的資訊和相關連結,只有在補充部分稍微多了一些內容,未來可以更精簡。
  • 案例 D8A9C217

    行為分數是什麼啊?

    已完成
    第 1 次嘗試 · 已完成 38659ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER行為分數是什麼啊?
    BOT讓我幫您查詢一下相關資訊 🔍 行為分數的加扣分說明可以參考這個連結: 行為分數說明: https://reurl.cc/epknWQ 如果你有其他相關問題,也可以再告訴我喔!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377417 · 行為分數是什麼
      問題
      行為分數是什麼
      回答
      加扣分說明請參考以下說明 https://reurl.cc/epknWQ
    意料之外 (9)
    • ! know_377410 · 行為分數
      問題
      行為分數
      回答
      加扣分說明請參考以下說明 https://reurl.cc/epknWQ
    • ! know_377416 · 我為什麼被扣分?
      問題
      我為什麼被扣分?
      回答
      請留言『真人客服』,由於小編並非 24 小時在線,我們將於上班時段為妳處理,請耐心等候
    • ! know_377468 · 為什麼直播間沒人?
      問題
      為什麼直播間沒人?
      回答
      請確認帳號是否有設定大頭照+30字自介+一張貼文(勿刪除),如果有任一項沒有設定,會被降低觸及率~ 如果都設定好了,系統會自動排除降觸及。 如果並非以上的因素,需要請妳想想如何以更吸引人的內容,吸引用戶進直播間觀看唷!建議可以多上傳動態.貼文增加與用戶間的互動與曝光喔~
    • ! know_377474 · 上傳有什麼規則限制
      問題
      上傳有什麼規則限制
      回答
      規範可至以下網址詳讀唷~ https://reurl.cc/vEL8Kj
    • ! know_377407 · 合約問題
      問題
      合約問題
      回答
      是有什麼問題呢?請詳細描述
    • ! know_377476 · 為什麼發表的內容被下架
      問題
      為什麼發表的內容被下架
      回答
      請查看內容違規說明:https://reurl.cc/N2xEn9
    • ! know_377443 · 直播是什麼?
      問題
      直播是什麼?
      回答
      「直播」功能請參考以下說明:https://reurl.cc/R2kDgn
    • ! know_377489 · 紫黑鑽是什麼
      問題
      紫黑鑽是什麼
      回答
      紫黑鑽是平台禮物的一種唷~部分用戶會刷紫黑鑽作為禮物送給主播
    • ! know_377464 · 我的獎金是多少?
      問題
      我的獎金是多少?
      回答
      你是說什麼的獎金呢?請清楚描述
    TP 1
    FP 9
    FN 0

    回答品質

    93.3%
    相關性
    100.0%
    完整性
    80.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    50.0% · w 60%
    • 行為分數是用來評估個人行為的一種分數系統
    II 重要
    III 補充
    100.0% · w 10%
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 行為分數的加扣分說明可以參考這個連結: 行為分數說明: https://reurl.cc/epknWQ 如果你有其他相關問題,也可以再告訴我喔!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 行為分數是用來評估個人行為的一種分數系統
    III 補充說明 w 10%
    • 加扣分說明請參考以下說明 https://reurl.cc/epknWQ
    Judge 推理
    回覆中提到的行為分數的定義不完整,缺少了「用來評估個人行為的一種分數系統」的描述。雖然提供了加扣分的連結,但未能完整回答問題。
  • 案例 827D1E7E

    編輯內文的詳細資訊在哪裡找?

    已完成
    第 1 次嘗試 · 已完成 34261ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER編輯內文的詳細資訊在哪裡找?
    BOT讓我幫您查詢一下相關資訊 🔍 您好,我是 SWAG Creator AI bot,很高興為您服務! 如果您想查找「編輯內文」的詳細資訊,請依照您要編輯的內容類型選擇: 1. 編輯貼文內文:請參考這裡的說明 編輯內文(貼文): https://public.swag.live/help-center-creator/zh-tw/articles/488c0f84-5f44-4401-9bf5-61d5d15dfae1-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E8%B2%BC%E6%96%87/index.html 2. 編輯限時動態內文:請參考這裡的說明 編輯內文(限時動態): https://public.swag.live/help-center-creator/zh-tw/articles/c6b2c8e2-8457-48b4-9dd0-8af720145cb3-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html 請問您需要哪一種內容的詳細編輯資訊呢?

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377528 · 編輯內文(限時動態)
      問題
      編輯內文(限時動態)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/c6b2c8e2-8457-48b4-9dd0-8af720145cb3-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html
    意料之外 (9)
    • ! know_377508 · 編輯內文(貼文)
      問題
      編輯內文(貼文)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/488c0f84-5f44-4401-9bf5-61d5d15dfae1-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E8%B2%BC%E6%96%87/index.html
    • ! know_377435 · 平台規定/規範詢問
      問題
      平台規定/規範詢問
      回答
      規範請詳細閱讀以下說明,避免因違規導致創作者權益受損🚨 https://reurl.cc/qpYXpN
    • ! know_377388 · 無法開表演
      問題
      無法開表演
      回答
      麻煩您提供一下資訊,小編請工程師幫忙查詢: 1. 相關截圖 或 影片 2. 開表演時間 3. 表演標題 以上皆需要提供,如未提供,將不會進一步確認
    • ! know_377455 · 為什麼我昨天上傳的影片不見了
      問題
      為什麼我昨天上傳的影片不見了
      回答
      請您提供以下資訊: 1.上傳的內容為:限時動態 or 貼文 2.內容的標題:
    • ! know_377407 · 合約問題
      問題
      合約問題
      回答
      是有什麼問題呢?請詳細描述
    • ! know_377534 · 指令百科
      問題
      指令百科
      回答
      打開網址即可進入指令百科:https://swag-home.vercel.app/%E6%8C%87%E4%BB%A4%E7%99%BE%E7%A7%91/ 詳細使用說明,請參考:https://swag-home.vercel.app/%E6%8C%87%E4%BB%A4%E7%99%BE%E7%A7%91/
    • ! know_377394 · 我無法上傳內容
      問題
      我無法上傳內容
      回答
      請您提供以下資訊: 1.狀況截圖 2.請問影片有聲音嗎:有 or 沒有 3.請問影片有後製過嗎:有 or 沒有 4.請問影片容量多大: 以上皆需要提供,如未提供,將無法進一步確認
    • ! know_377386 · 突然斷播
      問題
      突然斷播
      回答
      請敘述遇到的狀況,並提供以下資訊以利工程師查詢: 1.直播模式:免費 or 一對一or一對多 or 限時表演(表演標題) 2. 觸發時間(含所在地區、時區): 3.SWAG ID: 4.狀況敘述: 5.相關螢幕截圖/錄影: 後續技術部門依據您提供的上述資訊為您排查完畢之後,我們會再主動透過這個對話視窗回覆給您,謝謝 以上皆需要提供,如未提供,將不會進一步確認
    • ! know_377454 · 開私密要免費回不出去呢
      問題
      開私密要免費回不出去呢
      回答
      請提供以下資訊以利工程師查詢: 1. 相關截圖 或 影片 2. 發生時間點 以上皆需要提供,如未提供,將不會進一步確認
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提供了兩個編輯內文的詳細資訊連結,這些資訊都來自於提供的來源,因此沒有任何虛構的內容。所有的事實陳述都能夠在來源中找到支持。

    回答品質

    90.0%
    相關性
    100.0%
    完整性
    70.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    60.0% · w 60%
    • 你可以透過這個連結獲取編輯內文的詳細資訊
    II 重要
    III 補充
    AI 回覆
    讓我幫您查詢一下相關資訊 🔍 您好,我是 SWAG Creator AI bot,很高興為您服務! 如果您想查找「編輯內文」的詳細資訊,請依照您要編輯的內容類型選擇: 1. 編輯貼文內文:請參考這裡的說明 編輯內文(貼文): https://public.swag.live/help-center-creator/zh-tw/articles/488c0f84-5f44-4401-9bf5-61d5d15dfae1-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E8%B2%BC%E6%96%87/index.html 2. 編輯限時動態內文:請參考這裡的說明 編輯內文(限時動態): https://public.swag.live/help-center-creator/zh-tw/articles/c6b2c8e2-8457-48b4-9dd0-8af720145cb3-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E9%99%90%E6%99%82%E5%8B%95%E6%85%8B/index.html 請問您需要哪一種內容的詳細編輯資訊呢?
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 你可以透過這個連結獲取編輯內文的詳細資訊
    Judge 推理
    回覆中提供了編輯內文的相關資訊,但未直接給出所需的連結,導致核心內容不完整。
  • 案例 0E3F5F66

    如果我有加入工會,可以免扣補充保險費嗎?

    已完成
    第 1 次嘗試 · 已完成 34344ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER如果我有加入工會,可以免扣補充保險費嗎?
    BOT正在為您搜尋最新資料 ⏳ 只要您有加入「工會」(注意是工會,不是公會),並且在有效期限內,且有提供入會證明或工會繳費收據,就可以免扣補充保險費。也就是說,當您的單次收益金額達到新台幣20,000元以上時,若有提供有效的工會證明,平台就不會再扣2.11%的補充保險費。 提醒您: - 必須提供本人姓名、有效月份及健保項目的工會收據。 - 有效月份需涵蓋該月分潤月份。 - 只接受表單內填寫的資料,不接受其他方式提供。 - 分潤金額發出後恕不補件。 詳細說明可參考: https://reurl.cc/GaNlX3 工會收據收集表單: https://swag.run/4IfPM 如還有其他細節想了解,歡迎再詢問!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377447 · 入工會
      問題
      入工會
      回答
      創作者收益為執⾏業務所得(9A、9B) 單次⾦額≧NTD20,001 者,代扣所得稅扣繳率為10%。 單次⾦額≧NTD20,000 者,需扣繳補充保險費,扣繳率為2.11%,若有加入⼯會且在有效期限內者(需提供入會證明)則免扣繳補充保費。
    意料之外 (9)
    • ! know_377461 · 工會有指定嗎
      問題
      工會有指定嗎
      回答
      工會無限定哦,只要是工會即可~ 注意:欲免扣繳二代健保加入的是「工」會不是「公會」哦
    • ! know_377460 · 怎麼加入工會
      問題
      怎麼加入工會
      回答
      我們沒有推薦的工會,您可以再坊間看一下適合自己的工會加入。
    • ! know_377459 · 提供工會繳費證明收益稅金部分會有差嗎
      問題
      提供工會繳費證明收益稅金部分會有差嗎
      回答
      平台為創作者申報類別為執⾏業務所得(9A、9B) 單次⾦額≧NTD20,001 者,代扣所得稅扣繳率為10%。 單次⾦額≧NTD20,000 者,需扣繳補充保險費,扣繳率為2.11%,若有加入⼯會且在有效期限內者(需提供入會證明)則免扣繳補充保費 詳細說明可參考以下說明 https://reurl.cc/GaNlX3
    • ! know_377448 · 報稅、稅務相關
      問題
      報稅、稅務相關
      回答
      創作者收益為執⾏業務所得(9A、9B) 單次⾦額≧NTD20,001 者,代扣所得稅扣繳率為10%。 單次⾦額≧NTD20,000 者,需扣繳補充保險費,扣繳率為2.11%,若有加入⼯會且在有效期限內者(需提供入會證明)則免扣繳補充保費。 具體的代扣稅金額會在您的勞報單中顯示。
    • ! know_377536 · 我有正職有繳交健保,可以免收二代健保費用嗎?
      問題
      我有正職有繳交健保,可以免收二代健保費用嗎?
      回答
      不行唷,正職工作的健保與二代健保為不同的項目,因此無法相互折抵。 平台上的創作者在平台所獲得的收入為「執行業務所得」申報的項目為「表演人」(9A-70),只有提供本人繳交的工會收據才可以進行折抵唷! 詳細說明請參考:https://reurl.cc/GaNlX3 工會收據收集表單:https://swag.run/4IfPM 工會收據表單發送日:每月15日,透過小鈴噹寄送 工會收據收件期間:每月12日~29日(⚠️逾期恕不補件) 📌【提供工會資料須符合以下條件】 1.收據需包含以下三項資訊: • 本人姓名 • 有效月份 • 健保項目 2.有效月份需涵蓋該月分潤月份 例:12月13日發送的表單,代表填寫的是「12月」;收據上需包含12月,方可扣抵。 3.如一次提供一季資料,該季期間內無需重複提交 4.僅受理表單內填寫之資料,不接受任何其他形式提供 (如私訊、Email、線上客服對話窗等) 5.分潤金額發出後恕不補件,即使提供當月有效收據亦無法處理"
    • ! know_377406 · 提供工會收據
      問題
      提供工會收據
      回答
      工會收據收集: - 收件表單:固定都為同一份(連結不變) https://swag.run/4IfPM 表單發送日:每月15日,透過小鈴噹寄送 收件期間:每月12日~29日(⚠️逾期恕不補件) 📌【提供工會資料須符合以下條件】 1.收據需包含以下三項資訊: • 本人姓名 • 有效月份 • 健保項目 2.有效月份需涵蓋該月分潤月份 例:12月13日發送的表單,代表填寫的是「12月」;收據上需包含12月,方可扣抵。 3.如一次提供一季資料,該季期間內無需重複提交 4.僅受理表單內填寫之資料,不接受任何其他形式提供 (如私訊、Email、線上客服對話窗等) 5.分潤金額發出後恕不補件,即使提供當月有效收據亦無法處理
    • ! know_377440 · 怎麼加入?
      問題
      怎麼加入?
      回答
      請至 SWAG 註冊頁面上傳證件驗證並簽署合約。 https://join.swag.live/
    • ! know_377445 · 出帳時間
      問題
      出帳時間
      回答
      出款時間:每個月15號出鑽石分潤、如未填寫勞報單可以於15號.25號申請補出款 📍每月15號(遇假日提前) ∙ 分潤+活動獎勵/補出款 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) ∙ 每月 6–10 日 發送勞報單。需於 10 號前完成,才可於 15 號出款 📍每月25號(遇假日提前) ∙ 補出款(未趕上 15 號者需找小編申請要補出) ∙ 每月 18–20 日 發送勞報單。需於 20 號前完成,才可於 25 號出款 📍工會收據收集: - 收集表單:每個月15發送到小鈴噹 - 收集時間:每月12號-29號,超過時間無法補件 - 備註: 1.填寫表單更改為固定同一份(連結相同) 2.若有一次提供一季則期間內後續無需每月重新提供 3.假設5/15發送(代表為五月分潤),提供的有效期限需包含5月的才有效 4.僅接受表單填寫的資料,不接受其他方式提供 5.當月勞報單金額發出後不接受補件當期、超過當月填寫時間也不接受補件
    • ! know_377446 · 什麼時候出帳
      問題
      什麼時候出帳
      回答
      出款時間:每個月15號出鑽石分潤、如未填寫勞報單可以於15號.25號申請補出款 📍每月15號(遇假日提前) ∙ 分潤+活動獎勵/補出款 (鑽石分潤+活動獎勵超過 3000 台幣就可以於15號出帳) ∙ 每月 6–10 日 發送勞報單。需於 10 號前完成,才可於 15 號出款 📍每月25號(遇假日提前) ∙ 補出款(未趕上 15 號者需找小編申請要補出) ∙ 每月 18–20 日 發送勞報單。需於 20 號前完成,才可於 25 號出款 📍工會收據收集: - 收集表單:每個月15發送到小鈴噹 - 收集時間:每月12號-29號,超過時間無法補件 - 備註: 1.填寫表單更改為固定同一份(連結相同) 2.若有一次提供一季則期間內後續無需每月重新提供 3.假設5/15發送(代表為五月分潤),提供的有效期限需包含5月的才有效 4.僅接受表單填寫的資料,不接受其他方式提供 5.當月勞報單金額發出後不接受補件當期、超過當月填寫時間也不接受補件
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆完全符合來源資料的內容,所有的事實陳述都有來源支持,因此沒有虛構的聲明。

    回答品質

    96.7%
    相關性
    100.0%
    完整性
    90.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    100.0% · w 30%
    III 補充
    AI 回覆
    正在為您搜尋最新資料 ⏳ 只要您有加入「工會」(注意是工會,不是公會),並且在有效期限內,且有提供入會證明或工會繳費收據,就可以免扣補充保險費。也就是說,當您的單次收益金額達到新台幣20,000元以上時,若有提供有效的工會證明,平台就不會再扣2.11%的補充保險費。 提醒您: - 必須提供本人姓名、有效月份及健保項目的工會收據。 - 有效月份需涵蓋該月分潤月份。 - 只接受表單內填寫的資料,不接受其他方式提供。 - 分潤金額發出後恕不補件。 詳細說明可參考: https://reurl.cc/GaNlX3 工會收據收集表單: https://swag.run/4IfPM 如還有其他細節想了解,歡迎再詢問!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 可免扣繳補充保險費
    • 需提供入會證明
    II 重要限制 w 30%
    • 若有加入工會且在有效期限內
    Judge 推理
    這個回答完全針對用戶的問題,並且提供了詳細的條件和要求,涵蓋了所有核心要點。雖然提供了額外的資訊,但沒有明顯的缺失,因此完整性得分略低於滿分。
  • 案例 709CD50D

    上傳有什麼規則限制?

    已完成
    第 1 次嘗試 · 已完成 29428ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER上傳有什麼規則限制?
    BOT馬上為您找找看相關內容 📋 上傳內容有相關規則限制,建議你詳細閱讀平台規範以避免違規。你可以參考以下網址了解詳細規定: - 上傳內容的規則限制: https://public.swag.live/help-center-creator/zh-tw/articles/d2375195-4b8b-4c19-b1ac-9598985045d3-%E5%85%A7%E5%AE%B9%E9%81%95%E8%A6%8F/index.html - 平台規範說明: https://reurl.cc/vEL8Kj - 其他平台規定/規範: https://reurl.cc/qpYXpN 如需更進一步的說明,歡迎再告訴我你的具體需求!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377474 · 上傳有什麼規則限制
      問題
      上傳有什麼規則限制
      回答
      規範可至以下網址詳讀唷~ https://reurl.cc/vEL8Kj
    意料之外 (9)
    • ! know_377545 · 上傳內容的規則限制
      問題
      上傳內容的規則限制
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/d2375195-4b8b-4c19-b1ac-9598985045d3-%E5%85%A7%E5%AE%B9%E9%81%95%E8%A6%8F/index.html
    • ! know_377552 · 超過一分鐘的影片想上傳
      問題
      超過一分鐘的影片想上傳
      回答
      超過一分鐘的影片如果要上傳的話,請選擇貼文! 限動只能上傳3秒~60秒的影片喔
    • ! know_377455 · 為什麼我昨天上傳的影片不見了
      問題
      為什麼我昨天上傳的影片不見了
      回答
      請您提供以下資訊: 1.上傳的內容為:限時動態 or 貼文 2.內容的標題:
    • ! know_377395 · 上傳卡住了
      問題
      上傳卡住了
      回答
      請您提供以下資訊: 1.狀況截圖 2.請問影片有聲音嗎:有 or 沒有 3.請問影片有後製過嗎:有 or 沒有 4.請問影片容量多大: 以上皆需要提供,如未提供,將無法進一步確認
    • ! know_377492 · 如何發佈限時動態與短影音,兩者的差異?
      問題
      如何發佈限時動態與短影音,兩者的差異?
      回答
      打開moor>短動態>錄影(錄製超過三分鐘)>右上角確認>在編輯內容輸入內文,設定鑽石數量後即可發佈 上傳『限時動態』需要在編輯內容頁面打開『設定為限時』按鈕,這篇動態在48小時後就會從頁面停止推廣,觸發用戶把握時間解鎖的購買心裡。 如果是『短動態』就不需要開啟『設定為限時』按鈕,上傳後會一直存在在個人頁面,隨時都會有新用戶進行解鎖。
    • ! know_377550 · 不能上傳內容
      問題
      不能上傳內容
      回答
      如果頁面顯示error user banned 403,代表你的上傳權限被關閉了唷,請留言『真人客服』為你進行確認
    • ! know_377488 · 一定要露臉或是成人直播嗎?
      問題
      一定要露臉或是成人直播嗎?
      回答
      我們不會限制主播的呈現內容,可以依照自己的尺度進行,並且自行決定要不要露臉露點。呈現的內容需要合法且不違反平台規定,相關規定可以參考FAQ說明:https://reurl.cc/3kMZlO
    • ! know_377477 · 為什麼上傳內容被下架了
      問題
      為什麼上傳內容被下架了
      回答
      請查看內容違規說明:https://reurl.cc/N2xEn9
    • ! know_377435 · 平台規定/規範詢問
      問題
      平台規定/規範詢問
      回答
      規範請詳細閱讀以下說明,避免因違規導致創作者權益受損🚨 https://reurl.cc/qpYXpN
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提到的上傳內容的規則限制和相關網址均有來源支持,因此沒有虛構的內容,所有的事實陳述都可以引用來源。

    回答品質

    43.3%
    相關性
    80.0%
    完整性
    50.0%
    正確性
    0.0%
    加權拆解 · 三層 coverage
    I 核心
    II 重要
    III 補充
    10.0% · w 10%
    • 規範可至以下網址詳讀唷~ https://reurl.cc/vEL8Kj
    AI 回覆
    馬上為您找找看相關內容 📋 上傳內容有相關規則限制,建議你詳細閱讀平台規範以避免違規。你可以參考以下網址了解詳細規定: - 上傳內容的規則限制: https://public.swag.live/help-center-creator/zh-tw/articles/d2375195-4b8b-4c19-b1ac-9598985045d3-%E5%85%A7%E5%AE%B9%E9%81%95%E8%A6%8F/index.html - 平台規範說明: https://reurl.cc/vEL8Kj - 其他平台規定/規範: https://reurl.cc/qpYXpN 如需更進一步的說明,歡迎再告訴我你的具體需求!
    預期答案 · 加權拆解
    III 補充說明 w 10%
    • 規範可至以下網址詳讀唷~ https://reurl.cc/vEL8Kj
    Judge 推理
    回覆中提到的上傳內容規則限制並未在事實上提供具體的規則,且未能正確引用所需的網址。雖然提供了多個網址,但未能符合預期的回覆風格,導致完整性和正確性得分低。
    錯誤陳述 (1)
    • 上傳內容有相關規則限制,建議你詳細閱讀平台規範以避免違規。
  • 案例 66F37062

    貼文介紹的網址是什麼?

    已完成
    第 1 次嘗試 · 已完成 22834ms
    腳本進度 · early_return ✗ 卡關
    STEP
    01

    觸發條件

    ✗ 未進入 early_return
    STEP
    02

    資訊收集

    — 此案例不測
    此案例 info_held 為空 — bot 不需問取資訊
    STEP
    03

    API 工具

    — 此案例不測
    此案例 expected_tools 為空 — bot 不需呼叫工具
    STEP
    04

    回覆規則

    ● bot 已回覆(單問單答案例,未啟用多輪迴圈)
    測試 2 步 · 此案例不測 2 步
    對話流程 · 1 turn
    Turn 1 STEP 03 · STEP 04 → search_unified
    USER貼文介紹的網址是什麼?
    BOT馬上為您找找看相關內容 📋 貼文介紹的網址如下: 貼文介紹: https://public.swag.live/help-center-creator/zh-tw/articles/11fd436d-25d9-44f8-852c-d22f8aae0cf7-%E8%B2%BC%E6%96%87%E4%BB%8B%E7%B4%B9/index.html 如果你需要其他關於貼文的資訊,也可以告訴我喔!

    知識檢索

    100.0%
    Precision
    10.0%
    Recall
    100.0%
    F1
    18.2%
    預期 (1)
    • know_377505 · 貼文介紹
      問題
      貼文介紹
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/11fd436d-25d9-44f8-852c-d22f8aae0cf7-%E8%B2%BC%E6%96%87%E4%BB%8B%E7%B4%B9/index.html
    意料之外 (9)
    • ! know_377474 · 上傳有什麼規則限制
      問題
      上傳有什麼規則限制
      回答
      規範可至以下網址詳讀唷~ https://reurl.cc/vEL8Kj
    • ! know_377533 · 主播後援站
      問題
      主播後援站
      回答
      打開網址即可進入主播後援站:https://swag-home.vercel.app/ 詳細使用說明,請參考:https://public.swag.live/help-center-creator/zh-tw/articles/51e1a2d8-841e-48d6-90df-40267f760dcb-告別尬聊話題情報站正式上線-/index.html
    • ! know_377534 · 指令百科
      問題
      指令百科
      回答
      打開網址即可進入指令百科:https://swag-home.vercel.app/%E6%8C%87%E4%BB%A4%E7%99%BE%E7%A7%91/ 詳細使用說明,請參考:https://swag-home.vercel.app/%E6%8C%87%E4%BB%A4%E7%99%BE%E7%A7%91/
    • ! know_377469 · 如何成為主播
      問題
      如何成為主播
      回答
      本站目前招募成年女性加入創作者 請點擊網址進行註冊:https://join.swag.live/
    • ! know_377430 · 如何發貼文
      問題
      如何發貼文
      回答
      「貼文」功能請參考以下說明 https://reurl.cc/qpYXnq
    • ! know_377431 · 如何刪除貼文
      問題
      如何刪除貼文
      回答
      「貼文」刪除方法如下 https://reurl.cc/4lN8LL
    • ! know_377508 · 編輯內文(貼文)
      問題
      編輯內文(貼文)
      回答
      https://public.swag.live/help-center-creator/zh-tw/articles/488c0f84-5f44-4401-9bf5-61d5d15dfae1-%E7%B7%A8%E8%BC%AF%E5%85%A7%E6%96%87%E8%B2%BC%E6%96%87/index.html
    • ! know_377429 · 如何修改已發佈內容
      問題
      如何修改已發佈內容
      回答
      「限時動態」修改方法如下 https://reurl.cc/V2WezY 「貼文」修改方法如下 https://reurl.cc/epkayQ
    • ! know_377408 · 活動獎金
      問題
      活動獎金
      回答
      活動可至此網址確認:https://creators.swag.live/ 關於活動獎金有什麼疑問呢?請清楚描述你的疑問,以及提供截圖,以便為你更近一步釐清
    TP 1
    FP 9
    FN 0

    忠實度

    有依據
    幻覺比率
    0.0%
    越低越好
    引用依據
    100.0%
    越高越好
    Judge 推理
    AI的回覆中提供的網址與來源中的內容完全一致,因此所有的事實陳述都是有根據的,沒有虛構的內容。

    回答品質

    100.0%
    相關性
    100.0%
    完整性
    100.0%
    正確性
    100.0%
    加權拆解 · 三層 coverage
    I 核心
    100.0% · w 60%
    II 重要
    III 補充
    AI 回覆
    馬上為您找找看相關內容 📋 貼文介紹的網址如下: 貼文介紹: https://public.swag.live/help-center-creator/zh-tw/articles/11fd436d-25d9-44f8-852c-d22f8aae0cf7-%E8%B2%BC%E6%96%87%E4%BB%8B%E7%B4%B9/index.html 如果你需要其他關於貼文的資訊,也可以告訴我喔!
    預期答案 · 加權拆解
    I 核心必答 w 60%
    • 網址是 https://public.swag.live/help-center-creator/zh-tw/articles/11fd436d-25d9-44f8-852c-d22f8aae0cf7-%E8%B2%BC%E6%96%87%E4%BB%8B%E7%B4%B9/index.html
    Judge 推理
    這個回答完全符合用戶的問題,提供了正確的網址,並且沒有遺漏任何關鍵資訊。