測試型 (bulk R1)

16 個案例 · 3 個產出 · 0 次執行 · drift ✓ 4分鐘 前

⋯ more
LLM 累計成本(Eris-tracked,含 generations + runs)
$0.0355 263,161 tokens · 138 calls
Generations $0.0355 138 calls
Runs (Judge) $0.0000 0 judgements
01

案例 (16)

項目 II.

情境調用與完成

scenario_funnel 10 cases
  • 我可以查詢我的訂單狀態嗎?
    📦 #647
    auto-83d6a51a-r1-054000407-f9b86090
    標準答案

    要查詢訂單狀態,我需要您的姓名和訂單編號。請提供這些資訊,我才能幫您查詢。

    核心必答 · n=1
    • 需要您的姓名和訂單編號來查詢訂單狀態
    補充說明 · n=1
    • 請提供這些資訊,我才能幫您查詢
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 我想要退貨,該怎麼做呢?
    📦 #647
    auto-83d6a51a-r1-054000407-514d4746
    標準答案

    我們收到您的需求,會盡速為您處理!請提供您的訂單編號或聯絡電話,我們會幫您搜尋相關資訊。

    核心必答 · n=1
    • 我們收到您的需求,會盡速為您處理
    重要限制 · n=1
    • 請提供您的訂單編號或聯絡電話
    補充說明 · n=1
    • 我們會幫您搜尋相關資訊
    預期觸發情境
    使用者退貨
    編輯
  • 請問目前有什麼活動或優惠嗎?
    📦 #647
    auto-83d6a51a-r1-054000407-47a1a225
    標準答案

    根據我的了解,您可以查詢最新的活動、報名、參加以及任何優惠、折扣或促銷資訊。如果想要更詳細的信息,建議您跟真人客服確認一下喔!

    核心必答 · n=1
    • 可以查詢最新的活動、報名、參加以及任何優惠、折扣或促銷資訊
    補充說明 · n=1
    • 建議您跟真人客服確認一下喔
    預期觸發情境
    知識與產品查詢
    預期呼叫工具
    search_unified
    編輯
  • 我想退貨,訂單編號是 TS100001,怎麼辦?
    📦 #647
    auto-83d6a51a-r1-054000407-54102086
    標準答案

    我們收到您的需求,會盡速為您處理!

    核心必答 · n=2
    • 我們收到您的需求
    • 會盡速為您處理
    預期觸發情境
    使用者退貨
    編輯
  • 多少算是短查詢?
    📦 #647
    auto-83d6a51a-r1-054000407-f77dff24
    標準答案

    短查詢是指少於10個字的問題,這樣的查詢會觸發通用查詢。

    核心必答 · n=2
    • 短查詢是指少於10個字的問題
    • 這樣的查詢會觸發通用查詢
    預期觸發情境
    知識與產品查詢
    預期呼叫工具
    search_unified
    編輯
  • 我的訂單怎麼退貨?
    📦 #647
    auto-83d6a51a-r1-054000407-7cb8a920
    標準答案

    我們收到您的需求,會盡速為您處理!

    核心必答 · n=2
    • 我們收到您的需求
    • 會盡速為您處理
    預期觸發情境
    使用者退貨
    編輯
  • 我的訂單編號是: TS100001,可以幫我查一下退貨的狀態嗎
    📦 #647
    auto-83d6a51a-r1-054000407-e7574248
    標準答案

    我們收到您的需求,會盡速為您處理!

    核心必答 · n=2
    • 我們收到您的需求
    • 會盡速為您處理
    預期觸發情境
    使用者退貨
    編輯
  • 我的訂單狀態是什麼?
    📦 #647
    auto-83d6a51a-r1-054000407-a5704905
    標準答案

    請您提供訂購的姓名或聯絡電話,我將幫您查詢訂單狀態。如果找到多個相關訂單,我會邏輯性地合併回覆您。

    核心必答 · n=1
    • 請提供訂購的姓名或聯絡電話
    重要限制 · n=1
    • 如果找到多個相關訂單,我會邏輯性地合併回覆您
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 退貨的流程是怎樣的?
    📦 #647
    auto-83d6a51a-r1-054000407-728f4c64
    標準答案

    我們收到您的需求,會盡速為您處理!系統會自動提取訂單識別資訊進行搜尋,並返回訂單狀態、物流進度等完整資訊。

    核心必答 · n=2
    • 系統會自動提取訂單識別資訊進行搜尋
    • 返回訂單狀態、物流進度等完整資訊
    補充說明 · n=1
    • 會盡速為您處理
    預期觸發情境
    使用者退貨
    編輯
  • 請問我可以查詢特定訂單的詳細資訊或運送狀態嗎?
    📦 #647
    auto-83d6a51a-r1-054000407-849add75
    標準答案

    可以的,若您提供訂單的基本個人資訊,我將能幫您查詢相關的訂單詳情和運送狀態。

    核心必答 · n=1
    • 可以查詢相關的訂單詳情和運送狀態
    重要限制 · n=1
    • 需提供訂單的基本個人資訊
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
項目 III.

對話素養(混合問答)

mixed_qa 6 cases
  • 我可以要求轉接至人類客服嗎
    📦 #648
    auto-83d6a51a-r1-054000407-09d6db20
    標準答案

    可以,當用戶明確要求人類客服代理時,可以轉接至人類客服代理。

    核心必答 · n=1
    • 可以轉接至人類客服代理
    重要限制 · n=1
    • 當用戶明確要求人類客服代理時
    預期觸發情境
    early_return
    預期呼叫工具
    transfer_to_human_agent
    編輯
  • 如果找不到我的訂單,怎麼辦?
    📦 #648
    auto-83d6a51a-r1-054000407-60ff4a28
    標準答案

    如果沒有找到相關訂單,我們會確認並提供客戶服務的查詢選項。

    核心必答 · n=1
    • 如果沒有找到相關訂單,我們會確認並提供客戶服務的查詢選項
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 請問退貨時需要提供哪些資訊呢?
    📦 #648
    auto-83d6a51a-r1-054000407-0448b632
    標準答案

    使用者在退貨時可以提供訂單編號或電話號碼等資訊。這些資訊會協助我們處理您的退貨申請!

    核心必答 · n=2
    • 使用者在退貨時可以提供訂單編號或電話號碼等資訊
    • 這些資訊會協助我們處理您的退貨申請
    預期觸發情境
    使用者退貨
    編輯
  • 轉接真人客服的回覆是什麼?
    📦 #648
    auto-83d6a51a-r1-054000407-50f07a2d
    標準答案

    轉接真人客服的時候,客服會先確認情況,然後以指定的格式回覆。

    核心必答 · n=2
    • 客服會先確認情況
    • 客服會以指定的格式回覆
    預期觸發情境
    轉接真人客服
    編輯
  • 有沒有查詢產品的方式?
    📦 #648
    auto-83d6a51a-r1-054000407-c563342a
    標準答案

    任何包含問號或疑問詞的查詢都會觸發知識與產品搜尋。例如,問「這個多少錢?」或「這款能不能戴著洗頭?」都會啟動相關查詢。

    核心必答 · n=1
    • 任何包含問號或疑問詞的查詢都會觸發知識與產品搜尋
    預期觸發情境
    知識與產品查詢
    預期呼叫工具
    search_unified
    編輯
  • 可以用什麼方式獲取完整的對話內容?
    📦 #648
    auto-83d6a51a-r1-054000407-8f0e9b28
    標準答案

    使用 trace/end_trace 參數可以獲取完整的對話內容。

    核心必答 · n=1
    • 使用 trace/end_trace 參數可以獲取完整的對話內容
    預期觸發情境
    early_return
    預期呼叫工具
    get_history
    編輯
02

最近執行

此套件尚未有執行紀錄。