產出 #5

env=production · 스냅스 고객지원 (04fc799b-9185-4c2d-8362-4ef2cbddf287) · eval_kind=scenario_funnel

已完成
已寫入
10 / 10
通過驗證
10
場景覆蓋
2 / 3
總成本
$0.0158
Tokens
↑113640 / ↓2999
MISSED
1 個 scenario 未被任何 case 涵蓋:845。可以重新派發、增加 N 來補。
SUITE
✅ 已寫入 EvalSuite auto-04fc799b-r1-053957838
案例明細(17 筆 — 含已寫入、被拒、retry 軌跡)
  • Judge LLM 拒絕 early_return
    Q
    請問您今天過得怎麼樣?
    A
    您好,我是客服AI,很高興為您服務。
    原因
    • The question is not answerable as there are no sources provided.
    • The answer does not address the question asked.
    • Judge LLM 認為答案與資料來源有事實出入
    • Judge LLM 信心度只有 0%(門檻 60%)—— 對「答案是否正確」的判斷不夠確定
  • Judge LLM 拒絕 early_return 第 2 次嘗試
    Q
    請問今天的天氣怎麼樣?
    A
    這個問題不在我服務範圍內。
    原因
    • No sources provided to answer the question.
    • Judge LLM 認為這題從資料來源無法答出來
  • Judge LLM 拒絕 early_return 第 3 次嘗試
    Q
    請問今天天氣如何呢?
    A
    您好,我是客服 AI,很高興為您服務。
    原因
    • The question is not answerable as there are no sources provided.
    • The answer does not address the question about the weather.
    • Judge LLM 認為答案與資料來源有事實出入
    • Judge LLM 信心度只有 0%(門檻 60%)—— 對「答案是否正確」的判斷不夠確定
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:訂單查詢 847
      訂單查詢
      
      ## 1. 觸發條件
      - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
      
      訂單查詢的 Agent 情景
      
      ## 3. API 工具
      1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
      
      ## 4. 回覆規則
      - Provide clear and concise answers based on order search results from tool messages
      - If multiple relevant orders found, combine them logically
      - If no relevant order found, acknowledge and offer to check with customer service
    • • 知識:기본 URL know_73728
      Q: 기본 URL
      A: 1. 백오피스
      
      1) 
      http://bo.snaps.com/admin/
      
      2) http://bo2.snaps.co.kr/admin/
      
      ?
      
      2. 홈페이지 주소
      
      http://www.snaps.com/
      
      ?
      
      3. 메일 계정
      
      아이디 : snaps@snaps.com
      
      비번 : tmsoqtmakstp!!
      
      ?
      
      4. 이니시스
      
      https://iniweb.inicis.com/nxaview/index.jsp
      
      아이디 : Snapss17GI
      
      비번 : tmsoqtm13579@@
      
      ?
      
      5. 뱅크다
      
      http://www.bankda.com/index.html
      
      스냅스/오프린트미 공용 아이디 : dcpq
      
      비번 : snaps34
      
      ?
      
      6. 업무 시트 주소
      
      - CS센터 업무 : https://docs.google.com/spreadsheets/d/1FJfgkSEck3p6NSUnHj5sIiqUZchdfgd5kgj_T5f4jgg/edit#gid=112142622
      
      - 오류시트 : https://docs.google.com/spreadsheets/d/1FNrlCoQN1iO9AJ8uIaOXxtexA1w1pQ2L_CShQjX_5QA/edit#gid=677062418
      
      - 대량시트 : https://docs.google.com/spreadsheets/d/1t31aI05Hz8UC2tcXtYaf3uc8w6iBsbW5kR3kFxFxexI/edit#gid=1543663966
      
      - 서류요청시트 : https://docs.google.com/spreadsheets/d/15Vt2WHHbk2iFUVhjDSaNO4khobHxP7crgXuaWc59e0g/edit#gid=402280754
      
      - 반송 외 관리 시트 : https://docs.google.com/spreadsheets/d/1sMcQY1FqouNmgIPE2EdtPNIUJrlkkNKQVdKjbEAwEes/edit#gid=0
      
      ?
      
      7. 스냅스 팩스번호
      
      02-3402-5566
      
      ?
      
      8. 해외 발신 번호
      
      82-2-1577-4101 또는 82-70-7420-0106
      
      ?
      
      9. 실계좌
      
      - 국민 349401-04-049509
      
      - 농협 096-01-282446
      
      - 우리 1005-100-923252
      
      - 하나 591-910005-82604
      
      - 예금주:(주)위블링
      
      ?
      
      10. 고객이 직접 반송 시
      
      경기도 안양시 만안구 안양천서로 65 위블링
      
      ?
      
      11. 스냅스CS와이파이
      
      아이디 : snaps_cs 5G
      
      비번 : Ilovesnaps!
      
      ?
      
      12. 소프트폰 설치 (매트릭스)
      
      https://matrixcloudkr.notion.site/MatrixCloud-Software-b02b1c0eeb0f445ca5a7e9d4222b7cb9
    • • 知識:대량 구매하려는데 할인이 가능한가요? know_73803
      Q: 대량 구매하려는데 할인이 가능한가요?
      A: 대량구매를 통한 할인을 원하시는 경우?
      
      아래 대량구매 할인 링크를 클릭하시고 정보를 입력해주시면?
      
      수량, 상품, 사이즈, 형태 등 옵션에 따라 할인이 적용되는?
      
      쿠폰을 즉시 발급 받아 사용하실 수 있습니다
      
      ?
      
      https://www.snaps.com/special/heavy?category=calendar&subCategory=desk
    Q
    我的訂單狀態怎麼查?
    A
    要查詢訂單狀態,請先提供必要的個人資訊,像是訂單編號或是聯絡電話,這樣我才能幫你查詢相關的訂單資訊。
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:訂單查詢 847
      訂單查詢
      
      ## 1. 觸發條件
      - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
      
      訂單查詢的 Agent 情景
      
      ## 3. API 工具
      1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
      
      ## 4. 回覆規則
      - Provide clear and concise answers based on order search results from tool messages
      - If multiple relevant orders found, combine them logically
      - If no relevant order found, acknowledge and offer to check with customer service
    • • 知識:기본 URL know_73728
      Q: 기본 URL
      A: 1. 백오피스
      
      1) 
      http://bo.snaps.com/admin/
      
      2) http://bo2.snaps.co.kr/admin/
      
      ?
      
      2. 홈페이지 주소
      
      http://www.snaps.com/
      
      ?
      
      3. 메일 계정
      
      아이디 : snaps@snaps.com
      
      비번 : tmsoqtmakstp!!
      
      ?
      
      4. 이니시스
      
      https://iniweb.inicis.com/nxaview/index.jsp
      
      아이디 : Snapss17GI
      
      비번 : tmsoqtm13579@@
      
      ?
      
      5. 뱅크다
      
      http://www.bankda.com/index.html
      
      스냅스/오프린트미 공용 아이디 : dcpq
      
      비번 : snaps34
      
      ?
      
      6. 업무 시트 주소
      
      - CS센터 업무 : https://docs.google.com/spreadsheets/d/1FJfgkSEck3p6NSUnHj5sIiqUZchdfgd5kgj_T5f4jgg/edit#gid=112142622
      
      - 오류시트 : https://docs.google.com/spreadsheets/d/1FNrlCoQN1iO9AJ8uIaOXxtexA1w1pQ2L_CShQjX_5QA/edit#gid=677062418
      
      - 대량시트 : https://docs.google.com/spreadsheets/d/1t31aI05Hz8UC2tcXtYaf3uc8w6iBsbW5kR3kFxFxexI/edit#gid=1543663966
      
      - 서류요청시트 : https://docs.google.com/spreadsheets/d/15Vt2WHHbk2iFUVhjDSaNO4khobHxP7crgXuaWc59e0g/edit#gid=402280754
      
      - 반송 외 관리 시트 : https://docs.google.com/spreadsheets/d/1sMcQY1FqouNmgIPE2EdtPNIUJrlkkNKQVdKjbEAwEes/edit#gid=0
      
      ?
      
      7. 스냅스 팩스번호
      
      02-3402-5566
      
      ?
      
      8. 해외 발신 번호
      
      82-2-1577-4101 또는 82-70-7420-0106
      
      ?
      
      9. 실계좌
      
      - 국민 349401-04-049509
      
      - 농협 096-01-282446
      
      - 우리 1005-100-923252
      
      - 하나 591-910005-82604
      
      - 예금주:(주)위블링
      
      ?
      
      10. 고객이 직접 반송 시
      
      경기도 안양시 만안구 안양천서로 65 위블링
      
      ?
      
      11. 스냅스CS와이파이
      
      아이디 : snaps_cs 5G
      
      비번 : Ilovesnaps!
      
      ?
      
      12. 소프트폰 설치 (매트릭스)
      
      https://matrixcloudkr.notion.site/MatrixCloud-Software-b02b1c0eeb0f445ca5a7e9d4222b7cb9
    • • 知識:대량 구매하려는데 할인이 가능한가요? know_73803
      Q: 대량 구매하려는데 할인이 가능한가요?
      A: 대량구매를 통한 할인을 원하시는 경우?
      
      아래 대량구매 할인 링크를 클릭하시고 정보를 입력해주시면?
      
      수량, 상품, 사이즈, 형태 등 옵션에 따라 할인이 적용되는?
      
      쿠폰을 즉시 발급 받아 사용하실 수 있습니다
      
      ?
      
      https://www.snaps.com/special/heavy?category=calendar&subCategory=desk
    Q
    請問如果找不到我的訂單,系統會怎麼處理呢?
    A
    如果未找到相關訂單,系統會確認並建議您聯繫客服以獲得進一步的協助。
  • Judge LLM 拒絕 early_return
    Q
    今天天氣怎麼樣啊
    A
    這個問題不在我服務範圍內
    原因
    • No sources provided to answer the question.
    • Judge LLM 認為這題從資料來源無法答出來
  • Judge LLM 拒絕 early_return 第 2 次嘗試
    Q
    最近天氣怎麼樣啊
    A
    這個問題不在我服務範圍內。
    原因
    • No sources provided to support the question.
    • Judge LLM 認為這題從資料來源無法答出來
  • Judge LLM 拒絕 early_return 第 3 次嘗試
    Q
    今天天氣怎麼樣啊
    A
    您好,我是客服 AI,很高興為您服務。
    原因
    • The question is not answerable as there are no sources provided.
    • The answer does not address the question about the weather.
    • Judge LLM 認為答案與資料來源有事實出入
    • Judge LLM 信心度只有 0%(門檻 60%)—— 對「答案是否正確」的判斷不夠確定
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:訂單查詢 847
      訂單查詢
      
      ## 1. 觸發條件
      - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
      
      訂單查詢的 Agent 情景
      
      ## 3. API 工具
      1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
      
      ## 4. 回覆規則
      - Provide clear and concise answers based on order search results from tool messages
      - If multiple relevant orders found, combine them logically
      - If no relevant order found, acknowledge and offer to check with customer service
    • • 知識:기본 URL know_73728
      Q: 기본 URL
      A: 1. 백오피스
      
      1) 
      http://bo.snaps.com/admin/
      
      2) http://bo2.snaps.co.kr/admin/
      
      ?
      
      2. 홈페이지 주소
      
      http://www.snaps.com/
      
      ?
      
      3. 메일 계정
      
      아이디 : snaps@snaps.com
      
      비번 : tmsoqtmakstp!!
      
      ?
      
      4. 이니시스
      
      https://iniweb.inicis.com/nxaview/index.jsp
      
      아이디 : Snapss17GI
      
      비번 : tmsoqtm13579@@
      
      ?
      
      5. 뱅크다
      
      http://www.bankda.com/index.html
      
      스냅스/오프린트미 공용 아이디 : dcpq
      
      비번 : snaps34
      
      ?
      
      6. 업무 시트 주소
      
      - CS센터 업무 : https://docs.google.com/spreadsheets/d/1FJfgkSEck3p6NSUnHj5sIiqUZchdfgd5kgj_T5f4jgg/edit#gid=112142622
      
      - 오류시트 : https://docs.google.com/spreadsheets/d/1FNrlCoQN1iO9AJ8uIaOXxtexA1w1pQ2L_CShQjX_5QA/edit#gid=677062418
      
      - 대량시트 : https://docs.google.com/spreadsheets/d/1t31aI05Hz8UC2tcXtYaf3uc8w6iBsbW5kR3kFxFxexI/edit#gid=1543663966
      
      - 서류요청시트 : https://docs.google.com/spreadsheets/d/15Vt2WHHbk2iFUVhjDSaNO4khobHxP7crgXuaWc59e0g/edit#gid=402280754
      
      - 반송 외 관리 시트 : https://docs.google.com/spreadsheets/d/1sMcQY1FqouNmgIPE2EdtPNIUJrlkkNKQVdKjbEAwEes/edit#gid=0
      
      ?
      
      7. 스냅스 팩스번호
      
      02-3402-5566
      
      ?
      
      8. 해외 발신 번호
      
      82-2-1577-4101 또는 82-70-7420-0106
      
      ?
      
      9. 실계좌
      
      - 국민 349401-04-049509
      
      - 농협 096-01-282446
      
      - 우리 1005-100-923252
      
      - 하나 591-910005-82604
      
      - 예금주:(주)위블링
      
      ?
      
      10. 고객이 직접 반송 시
      
      경기도 안양시 만안구 안양천서로 65 위블링
      
      ?
      
      11. 스냅스CS와이파이
      
      아이디 : snaps_cs 5G
      
      비번 : Ilovesnaps!
      
      ?
      
      12. 소프트폰 설치 (매트릭스)
      
      https://matrixcloudkr.notion.site/MatrixCloud-Software-b02b1c0eeb0f445ca5a7e9d4222b7cb9
    • • 知識:대량 구매하려는데 할인이 가능한가요? know_73803
      Q: 대량 구매하려는데 할인이 가능한가요?
      A: 대량구매를 통한 할인을 원하시는 경우?
      
      아래 대량구매 할인 링크를 클릭하시고 정보를 입력해주시면?
      
      수량, 상품, 사이즈, 형태 등 옵션에 따라 할인이 적용되는?
      
      쿠폰을 즉시 발급 받아 사용하실 수 있습니다
      
      ?
      
      https://www.snaps.com/special/heavy?category=calendar&subCategory=desk
    Q
    如果有多個訂單,系統會怎麼處理這些訂單的資訊?
    A
    如果找到多個相關訂單,系統會邏輯性地合併這些訂單的資訊,提供清晰的回答。
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:知識與產品查詢 846
      知識與產品查詢
      
      ## 1. 觸發條件
      - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                          - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                          - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                          - Short queries under 10 characters
                          - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
      - 活動相關:
                          - 活動/報名/參加
                          - 優惠/折扣/促銷
                          - 抽獎/贈品/獎品
      - 公司資訊相關:
                          - 粉絲團/粉專/FB/Facebook/臉書
                          - Instagram/IG/社群/社群媒體
                          - 官網/網站/官方網站
                          - LINE/Line官方帳號
                          - Youtube/YT/影片/頻道
                          - 公司/品牌/關於我們
      - 服務相關:
                          - 服務時間/營業時間/上班時間
                          - 聯絡方式/電話/信箱/地址
                          - 退換貨/退款/退費
                          - 保固/維修/售後
                          - 配送/運費/到貨時間
                          - 付款方式/分期/優惠
                          - 會員/積分/紅利
                          - 發票/收據/證明
      - 政策相關:
                          - 政策/規定/條款
                          - 隱私/個資/資料
                          - 安全/保障/保護
                          - 責任/義務/權利
      - 技術問題:
                          - 無法/不能/不行
                          - 錯誤/異常/問題
                          - 當機/卡住/慢
                          - 登入/註冊/密碼
                          - 設定/安裝/使用
      - 產品使用方式:
                          - 怎麼用/如何使用/使用方法
                          - 使用方式/操作方式/使用步驟
                          - 安裝/設定/配置
                          - 第一次使用/新手使用/初次使用
                          - 使用技巧/使用建議/使...
    Q
    退換貨怎麼辦
    A
    退換貨的相關資訊可以查詢在我們的官網上,詳情包括退換貨的流程及條件。為了確保準確,建議你跟真人客服確認一下喔!
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:知識與產品查詢 846
      知識與產品查詢
      
      ## 1. 觸發條件
      - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                          - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                          - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                          - Short queries under 10 characters
                          - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
      - 活動相關:
                          - 活動/報名/參加
                          - 優惠/折扣/促銷
                          - 抽獎/贈品/獎品
      - 公司資訊相關:
                          - 粉絲團/粉專/FB/Facebook/臉書
                          - Instagram/IG/社群/社群媒體
                          - 官網/網站/官方網站
                          - LINE/Line官方帳號
                          - Youtube/YT/影片/頻道
                          - 公司/品牌/關於我們
      - 服務相關:
                          - 服務時間/營業時間/上班時間
                          - 聯絡方式/電話/信箱/地址
                          - 退換貨/退款/退費
                          - 保固/維修/售後
                          - 配送/運費/到貨時間
                          - 付款方式/分期/優惠
                          - 會員/積分/紅利
                          - 發票/收據/證明
      - 政策相關:
                          - 政策/規定/條款
                          - 隱私/個資/資料
                          - 安全/保障/保護
                          - 責任/義務/權利
      - 技術問題:
                          - 無法/不能/不行
                          - 錯誤/異常/問題
                          - 當機/卡住/慢
                          - 登入/註冊/密碼
                          - 設定/安裝/使用
      - 產品使用方式:
                          - 怎麼用/如何使用/使用方法
                          - 使用方式/操作方式/使用步驟
                          - 安裝/設定/配置
                          - 第一次使用/新手使用/初次使用
                          - 使用技巧/使用建議/使...
    Q
    請問這個產品的使用方法是什麼?
    A
    使用方式包括詳細的操作步驟和技巧,建議在首次使用時仔細閱讀說明書或參照美容專家的建議,以確保正確使用。若需進一步的資訊,歡迎查詢相關產品的具體資料。
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:訂單查詢 847
      訂單查詢
      
      ## 1. 觸發條件
      - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
      
      訂單查詢的 Agent 情景
      
      ## 3. API 工具
      1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
      
      ## 4. 回覆規則
      - Provide clear and concise answers based on order search results from tool messages
      - If multiple relevant orders found, combine them logically
      - If no relevant order found, acknowledge and offer to check with customer service
    • • 知識:기본 URL know_73728
      Q: 기본 URL
      A: 1. 백오피스
      
      1) 
      http://bo.snaps.com/admin/
      
      2) http://bo2.snaps.co.kr/admin/
      
      ?
      
      2. 홈페이지 주소
      
      http://www.snaps.com/
      
      ?
      
      3. 메일 계정
      
      아이디 : snaps@snaps.com
      
      비번 : tmsoqtmakstp!!
      
      ?
      
      4. 이니시스
      
      https://iniweb.inicis.com/nxaview/index.jsp
      
      아이디 : Snapss17GI
      
      비번 : tmsoqtm13579@@
      
      ?
      
      5. 뱅크다
      
      http://www.bankda.com/index.html
      
      스냅스/오프린트미 공용 아이디 : dcpq
      
      비번 : snaps34
      
      ?
      
      6. 업무 시트 주소
      
      - CS센터 업무 : https://docs.google.com/spreadsheets/d/1FJfgkSEck3p6NSUnHj5sIiqUZchdfgd5kgj_T5f4jgg/edit#gid=112142622
      
      - 오류시트 : https://docs.google.com/spreadsheets/d/1FNrlCoQN1iO9AJ8uIaOXxtexA1w1pQ2L_CShQjX_5QA/edit#gid=677062418
      
      - 대량시트 : https://docs.google.com/spreadsheets/d/1t31aI05Hz8UC2tcXtYaf3uc8w6iBsbW5kR3kFxFxexI/edit#gid=1543663966
      
      - 서류요청시트 : https://docs.google.com/spreadsheets/d/15Vt2WHHbk2iFUVhjDSaNO4khobHxP7crgXuaWc59e0g/edit#gid=402280754
      
      - 반송 외 관리 시트 : https://docs.google.com/spreadsheets/d/1sMcQY1FqouNmgIPE2EdtPNIUJrlkkNKQVdKjbEAwEes/edit#gid=0
      
      ?
      
      7. 스냅스 팩스번호
      
      02-3402-5566
      
      ?
      
      8. 해외 발신 번호
      
      82-2-1577-4101 또는 82-70-7420-0106
      
      ?
      
      9. 실계좌
      
      - 국민 349401-04-049509
      
      - 농협 096-01-282446
      
      - 우리 1005-100-923252
      
      - 하나 591-910005-82604
      
      - 예금주:(주)위블링
      
      ?
      
      10. 고객이 직접 반송 시
      
      경기도 안양시 만안구 안양천서로 65 위블링
      
      ?
      
      11. 스냅스CS와이파이
      
      아이디 : snaps_cs 5G
      
      비번 : Ilovesnaps!
      
      ?
      
      12. 소프트폰 설치 (매트릭스)
      
      https://matrixcloudkr.notion.site/MatrixCloud-Software-b02b1c0eeb0f445ca5a7e9d4222b7cb9
    • • 知識:대량 구매하려는데 할인이 가능한가요? know_73803
      Q: 대량 구매하려는데 할인이 가능한가요?
      A: 대량구매를 통한 할인을 원하시는 경우?
      
      아래 대량구매 할인 링크를 클릭하시고 정보를 입력해주시면?
      
      수량, 상품, 사이즈, 형태 등 옵션에 따라 할인이 적용되는?
      
      쿠폰을 즉시 발급 받아 사용하실 수 있습니다
      
      ?
      
      https://www.snaps.com/special/heavy?category=calendar&subCategory=desk
    Q
    我可以查詢我的訂單狀態嗎?
    A
    可以的,但需要您提供一些必要的個人資訊,像是訂單編號或聯絡電話,這樣我才能幫您查詢相關訂單的詳情。
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:知識與產品查詢 846
      知識與產品查詢
      
      ## 1. 觸發條件
      - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                          - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                          - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                          - Short queries under 10 characters
                          - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
      - 活動相關:
                          - 活動/報名/參加
                          - 優惠/折扣/促銷
                          - 抽獎/贈品/獎品
      - 公司資訊相關:
                          - 粉絲團/粉專/FB/Facebook/臉書
                          - Instagram/IG/社群/社群媒體
                          - 官網/網站/官方網站
                          - LINE/Line官方帳號
                          - Youtube/YT/影片/頻道
                          - 公司/品牌/關於我們
      - 服務相關:
                          - 服務時間/營業時間/上班時間
                          - 聯絡方式/電話/信箱/地址
                          - 退換貨/退款/退費
                          - 保固/維修/售後
                          - 配送/運費/到貨時間
                          - 付款方式/分期/優惠
                          - 會員/積分/紅利
                          - 發票/收據/證明
      - 政策相關:
                          - 政策/規定/條款
                          - 隱私/個資/資料
                          - 安全/保障/保護
                          - 責任/義務/權利
      - 技術問題:
                          - 無法/不能/不行
                          - 錯誤/異常/問題
                          - 當機/卡住/慢
                          - 登入/註冊/密碼
                          - 設定/安裝/使用
      - 產品使用方式:
                          - 怎麼用/如何使用/使用方法
                          - 使用方式/操作方式/使用步驟
                          - 安裝/設定/配置
                          - 第一次使用/新手使用/初次使用
                          - 使用技巧/使用建議/使...
    Q
    你們粉絲團或官網是什麼啊
    A
    我們的粉絲團在Facebook上,還有官方網站可以造訪:RaccoonAI官網: https://example.com。
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:訂單查詢 847
      訂單查詢
      
      ## 1. 觸發條件
      - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
      
      訂單查詢的 Agent 情景
      
      ## 3. API 工具
      1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
      
      ## 4. 回覆規則
      - Provide clear and concise answers based on order search results from tool messages
      - If multiple relevant orders found, combine them logically
      - If no relevant order found, acknowledge and offer to check with customer service
    • • 知識:기본 URL know_73728
      Q: 기본 URL
      A: 1. 백오피스
      
      1) 
      http://bo.snaps.com/admin/
      
      2) http://bo2.snaps.co.kr/admin/
      
      ?
      
      2. 홈페이지 주소
      
      http://www.snaps.com/
      
      ?
      
      3. 메일 계정
      
      아이디 : snaps@snaps.com
      
      비번 : tmsoqtmakstp!!
      
      ?
      
      4. 이니시스
      
      https://iniweb.inicis.com/nxaview/index.jsp
      
      아이디 : Snapss17GI
      
      비번 : tmsoqtm13579@@
      
      ?
      
      5. 뱅크다
      
      http://www.bankda.com/index.html
      
      스냅스/오프린트미 공용 아이디 : dcpq
      
      비번 : snaps34
      
      ?
      
      6. 업무 시트 주소
      
      - CS센터 업무 : https://docs.google.com/spreadsheets/d/1FJfgkSEck3p6NSUnHj5sIiqUZchdfgd5kgj_T5f4jgg/edit#gid=112142622
      
      - 오류시트 : https://docs.google.com/spreadsheets/d/1FNrlCoQN1iO9AJ8uIaOXxtexA1w1pQ2L_CShQjX_5QA/edit#gid=677062418
      
      - 대량시트 : https://docs.google.com/spreadsheets/d/1t31aI05Hz8UC2tcXtYaf3uc8w6iBsbW5kR3kFxFxexI/edit#gid=1543663966
      
      - 서류요청시트 : https://docs.google.com/spreadsheets/d/15Vt2WHHbk2iFUVhjDSaNO4khobHxP7crgXuaWc59e0g/edit#gid=402280754
      
      - 반송 외 관리 시트 : https://docs.google.com/spreadsheets/d/1sMcQY1FqouNmgIPE2EdtPNIUJrlkkNKQVdKjbEAwEes/edit#gid=0
      
      ?
      
      7. 스냅스 팩스번호
      
      02-3402-5566
      
      ?
      
      8. 해외 발신 번호
      
      82-2-1577-4101 또는 82-70-7420-0106
      
      ?
      
      9. 실계좌
      
      - 국민 349401-04-049509
      
      - 농협 096-01-282446
      
      - 우리 1005-100-923252
      
      - 하나 591-910005-82604
      
      - 예금주:(주)위블링
      
      ?
      
      10. 고객이 직접 반송 시
      
      경기도 안양시 만안구 안양천서로 65 위블링
      
      ?
      
      11. 스냅스CS와이파이
      
      아이디 : snaps_cs 5G
      
      비번 : Ilovesnaps!
      
      ?
      
      12. 소프트폰 설치 (매트릭스)
      
      https://matrixcloudkr.notion.site/MatrixCloud-Software-b02b1c0eeb0f445ca5a7e9d4222b7cb9
    • • 知識:대량 구매하려는데 할인이 가능한가요? know_73803
      Q: 대량 구매하려는데 할인이 가능한가요?
      A: 대량구매를 통한 할인을 원하시는 경우?
      
      아래 대량구매 할인 링크를 클릭하시고 정보를 입력해주시면?
      
      수량, 상품, 사이즈, 형태 등 옵션에 따라 할인이 적용되는?
      
      쿠폰을 즉시 발급 받아 사용하실 수 있습니다
      
      ?
      
      https://www.snaps.com/special/heavy?category=calendar&subCategory=desk
    Q
    我的訂單查詢找不到相關的資訊,這是怎麼回事?
    A
    如果未找到相關訂單,系統會確認並建議您聯繫客服以獲得更多幫助。
  • 已寫入 EvalSuite scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:訂單查詢 847
      訂單查詢
      
      ## 1. 觸發條件
      - When user has questions about specific order details, shipping status, or purchase history (only after user provides required personal info).
      
      訂單查詢的 Agent 情景
      
      ## 3. API 工具
      1. shopline_search_orders — 根據聊天記錄搜尋相關訂單資訊
      
      ## 4. 回覆規則
      - Provide clear and concise answers based on order search results from tool messages
      - If multiple relevant orders found, combine them logically
      - If no relevant order found, acknowledge and offer to check with customer service
    • • 知識:기본 URL know_73728
      Q: 기본 URL
      A: 1. 백오피스
      
      1) 
      http://bo.snaps.com/admin/
      
      2) http://bo2.snaps.co.kr/admin/
      
      ?
      
      2. 홈페이지 주소
      
      http://www.snaps.com/
      
      ?
      
      3. 메일 계정
      
      아이디 : snaps@snaps.com
      
      비번 : tmsoqtmakstp!!
      
      ?
      
      4. 이니시스
      
      https://iniweb.inicis.com/nxaview/index.jsp
      
      아이디 : Snapss17GI
      
      비번 : tmsoqtm13579@@
      
      ?
      
      5. 뱅크다
      
      http://www.bankda.com/index.html
      
      스냅스/오프린트미 공용 아이디 : dcpq
      
      비번 : snaps34
      
      ?
      
      6. 업무 시트 주소
      
      - CS센터 업무 : https://docs.google.com/spreadsheets/d/1FJfgkSEck3p6NSUnHj5sIiqUZchdfgd5kgj_T5f4jgg/edit#gid=112142622
      
      - 오류시트 : https://docs.google.com/spreadsheets/d/1FNrlCoQN1iO9AJ8uIaOXxtexA1w1pQ2L_CShQjX_5QA/edit#gid=677062418
      
      - 대량시트 : https://docs.google.com/spreadsheets/d/1t31aI05Hz8UC2tcXtYaf3uc8w6iBsbW5kR3kFxFxexI/edit#gid=1543663966
      
      - 서류요청시트 : https://docs.google.com/spreadsheets/d/15Vt2WHHbk2iFUVhjDSaNO4khobHxP7crgXuaWc59e0g/edit#gid=402280754
      
      - 반송 외 관리 시트 : https://docs.google.com/spreadsheets/d/1sMcQY1FqouNmgIPE2EdtPNIUJrlkkNKQVdKjbEAwEes/edit#gid=0
      
      ?
      
      7. 스냅스 팩스번호
      
      02-3402-5566
      
      ?
      
      8. 해외 발신 번호
      
      82-2-1577-4101 또는 82-70-7420-0106
      
      ?
      
      9. 실계좌
      
      - 국민 349401-04-049509
      
      - 농협 096-01-282446
      
      - 우리 1005-100-923252
      
      - 하나 591-910005-82604
      
      - 예금주:(주)위블링
      
      ?
      
      10. 고객이 직접 반송 시
      
      경기도 안양시 만안구 안양천서로 65 위블링
      
      ?
      
      11. 스냅스CS와이파이
      
      아이디 : snaps_cs 5G
      
      비번 : Ilovesnaps!
      
      ?
      
      12. 소프트폰 설치 (매트릭스)
      
      https://matrixcloudkr.notion.site/MatrixCloud-Software-b02b1c0eeb0f445ca5a7e9d4222b7cb9
    • • 知識:대량 구매하려는데 할인이 가능한가요? know_73803
      Q: 대량 구매하려는데 할인이 가능한가요?
      A: 대량구매를 통한 할인을 원하시는 경우?
      
      아래 대량구매 할인 링크를 클릭하시고 정보를 입력해주시면?
      
      수량, 상품, 사이즈, 형태 등 옵션에 따라 할인이 적용되는?
      
      쿠폰을 즉시 발급 받아 사용하실 수 있습니다
      
      ?
      
      https://www.snaps.com/special/heavy?category=calendar&subCategory=desk
    Q
    我的訂單查詢需要哪些個人資訊?
    A
    訂單查詢需要提供必要的個人資訊,例如訂購姓名或聯絡電話,才能查詢具體的訂單細節、運送狀態或購買歷史。
  • 語意近重複(被 Stage C 拒絕) scenario_focused
    來源素材(點擊查看完整內容)
    • • 對話流程:知識與產品查詢 846
      知識與產品查詢
      
      ## 1. 觸發條件
      - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                          - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                          - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                          - Short queries under 10 characters
                          - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
      - 活動相關:
                          - 活動/報名/參加
                          - 優惠/折扣/促銷
                          - 抽獎/贈品/獎品
      - 公司資訊相關:
                          - 粉絲團/粉專/FB/Facebook/臉書
                          - Instagram/IG/社群/社群媒體
                          - 官網/網站/官方網站
                          - LINE/Line官方帳號
                          - Youtube/YT/影片/頻道
                          - 公司/品牌/關於我們
      - 服務相關:
                          - 服務時間/營業時間/上班時間
                          - 聯絡方式/電話/信箱/地址
                          - 退換貨/退款/退費
                          - 保固/維修/售後
                          - 配送/運費/到貨時間
                          - 付款方式/分期/優惠
                          - 會員/積分/紅利
                          - 發票/收據/證明
      - 政策相關:
                          - 政策/規定/條款
                          - 隱私/個資/資料
                          - 安全/保障/保護
                          - 責任/義務/權利
      - 技術問題:
                          - 無法/不能/不行
                          - 錯誤/異常/問題
                          - 當機/卡住/慢
                          - 登入/註冊/密碼
                          - 設定/安裝/使用
      - 產品使用方式:
                          - 怎麼用/如何使用/使用方法
                          - 使用方式/操作方式/使用步驟
                          - 安裝/設定/配置
                          - 第一次使用/新手使用/初次使用
                          - 使用技巧/使用建議/使...
    Q
    你們的粉絲團在哪裡啊?
    A
    你可以在 Facebook 上找到我們的粉絲團,搜索 RaccoonAI 就可以了!
    原因
    • semantic duplicate of "你們粉絲團或官網是什麼啊" (cosine=0.805 ≥ 0.8)
  • 已寫入 EvalSuite scenario_focused 第 2 次嘗試
    來源素材(點擊查看完整內容)
    • • 對話流程:知識與產品查詢 846
      知識與產品查詢
      
      ## 1. 觸發條件
      - 通用查詢觸發(優先級最高 - ABSOLUTE PRIORITY):
                          - ⚠️ CRITICAL: ANY query with "?" "嗎" "呢" "嗎?" → MUST trigger knowledge and product search immediately
                          - Question words: "如何" "怎麼" "什麼" "哪裡" "哪個" "多少" "為什麼"
                          - Short queries under 10 characters
                          - OVERRIDE RULE: Question markers ALWAYS take precedence over order triggers
      - 活動相關:
                          - 活動/報名/參加
                          - 優惠/折扣/促銷
                          - 抽獎/贈品/獎品
      - 公司資訊相關:
                          - 粉絲團/粉專/FB/Facebook/臉書
                          - Instagram/IG/社群/社群媒體
                          - 官網/網站/官方網站
                          - LINE/Line官方帳號
                          - Youtube/YT/影片/頻道
                          - 公司/品牌/關於我們
      - 服務相關:
                          - 服務時間/營業時間/上班時間
                          - 聯絡方式/電話/信箱/地址
                          - 退換貨/退款/退費
                          - 保固/維修/售後
                          - 配送/運費/到貨時間
                          - 付款方式/分期/優惠
                          - 會員/積分/紅利
                          - 發票/收據/證明
      - 政策相關:
                          - 政策/規定/條款
                          - 隱私/個資/資料
                          - 安全/保障/保護
                          - 責任/義務/權利
      - 技術問題:
                          - 無法/不能/不行
                          - 錯誤/異常/問題
                          - 當機/卡住/慢
                          - 登入/註冊/密碼
                          - 設定/安裝/使用
      - 產品使用方式:
                          - 怎麼用/如何使用/使用方法
                          - 使用方式/操作方式/使用步驟
                          - 安裝/設定/配置
                          - 第一次使用/新手使用/初次使用
                          - 使用技巧/使用建議/使...
    Q
    你們的官網和社群媒體是什麼?
    A
    我們的官網是 https://www.raccoonai.tw,您可以在這裡找到我們的產品資訊及最新消息。我們的Facebook粉絲團則是 RaccoonAI,您也可以在Instagram上搜尋我們的帳號 @RaccoonAI,隨時關注我們的最新動態喔!