demo (bulk R1)

16 個案例 · 3 個產出 · 2 次執行 · 最後執行 5分鐘 前 · drift ✓ 8分鐘 前

⋯ more
編輯套件 Gate 門檻 (0) + 新增案例
LLM 累計成本（Eris-tracked，含 generations + runs）
$0.0245 174,102 tokens · 97 calls
Generations $0.0245 97 calls
Runs (Judge) $0.0000 0 judgements
RUNNING
2 個 evaluation 進行中：
01

案例 (16)

項目 II.

情境調用與完成

scenario_funnel 10 cases
  • 我的訂單查詢時出現問題，系統會怎麼做?
    📦 #182
    auto-f3a42894-r1-053958694-17736c33
    標準答案

    如果系統沒有找到相關的訂單，會確認並提供聯繫客服的選項，協助處理問題。

    核心必答 · n=1
    • 系統沒有找到相關的訂單
    重要限制 · n=2
    • 會確認並提供聯繫客服的選項
    • 協助處理問題
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 現在有什麼活動或優惠嗎？
    📦 #182
    auto-f3a42894-r1-053958694-ae91082d
    標準答案

    目前的活動資訊還未更新，建議你查看我們的官方網站或社群媒體了解最新的優惠與活動。有任何問題，也可以跟真人客服確認喔！

    重要限制 · n=1
    • 目前的活動資訊還未更新
    補充說明 · n=2
    • 建議你查看我們的官方網站或社群媒體了解最新的優惠與活動
    • 有任何問題，也可以跟真人客服確認喔
    預期觸發情境
    知識與產品查詢
    預期呼叫工具
    search_unified
    編輯
  • 查詢我的訂單，是否有相關的紀錄?
    📦 #182
    auto-f3a42894-r1-053958694-cd528b9d
    標準答案

    我可以幫你查看訂單紀錄。請提供你的姓名或聯絡電話，我會為你搜尋相關的訂單資訊。如果找到多個相關訂單，我會將它們邏輯性地合併回覆。

    核心必答 · n=2
    • 我可以幫你查看訂單紀錄
    • 請提供你的姓名或聯絡電話
    重要限制 · n=1
    • 如果找到多個相關訂單，我會將它們邏輯性地合併回覆
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 我的訂單狀態怎麼樣？
    📦 #182
    auto-f3a42894-r1-053958694-835f5628
    標準答案

    我需要一些個人資訊才能幫你查詢訂單狀態。請提供你的姓名或訂單編號。

    核心必答 · n=2
    • 需要一些個人資訊才能查詢訂單狀態
    • 請提供你的姓名或訂單編號
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 請問我的訂單查詢怎麼進行？如果沒有找到相關訂單的話，會怎麼處理呢？
    📦 #182
    auto-f3a42894-r1-053958694-d0d02a80
    標準答案

    您可以提供訂單的相關資訊，我將協助您查詢。若系統沒有找到相關訂單，我會確認並提供聯繫客服的選項。

    核心必答 · n=2
    • 可以提供訂單的相關資訊
    • 將協助您查詢
    重要限制 · n=1
    • 若系統沒有找到相關訂單，我會確認並提供聯繫客服的選項
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 你們的服務時間是多久啊？
    📦 #182
    auto-f3a42894-r1-053958694-8fcdeff5
    標準答案

    我們的服務時間為週一到週五的上午九點到下午六點。若有其他問題，建議您可以跟真人客服確認喔！

    核心必答 · n=1
    • 服務時間為週一到週五的上午九點到下午六點
    補充說明 · n=1
    • 若有其他問題，建議您可以跟真人客服確認喔
    預期觸發情境
    知識與產品查詢
    預期呼叫工具
    search_unified
    編輯
  • 如果沒有相關的訂單，系統會怎麼處理？
    📦 #182
    auto-f3a42894-r1-053958694-17082ced
    標準答案

    如果系統沒有找到相關訂單，我會確認並提供聯繫客服的選項。

    核心必答 · n=1
    • 系統沒有找到相關訂單
    補充說明 · n=1
    • 提供聯繫客服的選項
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 我想查一下我的訂單狀況，怎麼查?
    📦 #182
    auto-f3a42894-r1-053958694-ad4aa674
    標準答案

    請提供您的訂購姓名和聯絡電話，我可以幫您查詢訂單狀況。

    補充說明 · n=1
    • 請提供您的訂購姓名和聯絡電話，我可以幫您查詢訂單狀況
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 如果我查詢我的訂單，系統會怎麼處理找到的多個相關訂單?
    📦 #182
    auto-f3a42894-r1-053958694-f1f9983a
    標準答案

    如果系統找到多個相關的訂單，會將它們邏輯性地合併回覆給你，以便讓你能夠清楚瞭解訂單的狀態。

    核心必答 · n=1
    • 系統找到多個相關的訂單會將它們邏輯性地合併回覆
    補充說明 · n=1
    • 以便讓你能夠清楚瞭解訂單的狀態
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 我想知道你們的服務時間和聯絡方式是什麼?
    📦 #182
    auto-f3a42894-r1-053958694-098a20de
    標準答案

    我們的服務時間是週一至週五，上午 9 點到下午 6 點。聯絡方式可以撥打我們的客服電話或發送電子郵件給我們，具體資訊可以參考我們的官網。根據我的了解，為了確保準確，建議你跟真人客服確認一下喔！

    核心必答 · n=1
    • 我們的服務時間是週一至週五，上午 9 點到下午 6 點
    重要限制 · n=1
    • 具體資訊可以參考我們的官網
    補充說明 · n=1
    • 建議你跟真人客服確認一下喔
    預期觸發情境
    知識與產品查詢
    預期呼叫工具
    search_unified
    編輯
項目 III.

對話素養（混合問答）

mixed_qa 6 cases
  • 如果 AI 無法回答我的問題，會轉接給真人客服嗎？
    📦 #183
    auto-f3a42894-r1-053958694-6b7d69da
    標準答案

    如果 AI 無法重複回答您的問題，則可以轉接給真人客服。

    核心必答 · n=1
    • 如果 AI 無法重複回答您的問題，則可以轉接給真人客服
    預期觸發情境
    early_return
    預期呼叫工具
    transfer_to_human_agent
    編輯
  • 轉接真人客服要怎麼做?
    📦 #183
    auto-f3a42894-r1-053958694-3a1db404
    標準答案

    要轉接真人客服，可以使用線上客服或直接請求轉接真人，客服會依照指定格式回覆你。

    核心必答 · n=1
    • 要轉接真人客服，可以使用線上客服或直接請求轉接真人
    重要限制 · n=1
    • 客服會依照指定格式回覆你
    預期觸發情境
    轉接真人客服
    編輯
  • 這個統一搜尋支援什麼功能?
    📦 #183
    auto-f3a42894-r1-053958694-5896e4e7
    標準答案

    統一搜尋支援多通道 BM25 與向量 RRF 融合，可以處理 5 種不同的來源類型。

    核心必答 · n=2
    • 統一搜尋支援多通道 BM25 與向量 RRF 融合
    • 可以處理 5 種不同的來源類型
    預期觸發情境
    early_return
    預期呼叫工具
    search_unified
    編輯
  • 如何使用髮片？
    📦 #183
    auto-f3a42894-r1-053958694-503e1cec
    標準答案

    髮片的使用方法包括先將自己的髮絲整理整齊，然後依據髮片的設計，將其固定在頭髮上。如果是首次使用，建議參考使用手冊或諮詢專業人士以獲得最佳效果。

    核心必答 · n=2
    • 髮片的使用方法包括先將自己的髮絲整理整齊
    • 將髮片固定在頭髮上
    重要限制 · n=1
    • 首次使用建議參考使用手冊或諮詢專業人士以獲得最佳效果
    預期觸發情境
    知識與產品查詢
    預期呼叫工具
    search_unified
    編輯
  • 電商訂單搜尋的功能名稱是什麼?
    📦 #183
    auto-f3a42894-r1-053958694-0d2d9dc5
    標準答案

    電商訂單搜尋的功能名稱為 shopline_search_orders。

    核心必答 · n=1
    • 電商訂單搜尋的功能名稱為 shopline_search_orders
    預期觸發情境
    early_return
    預期呼叫工具
    shopline_search_orders
    編輯
  • 如果查詢不到訂單怎麼辦?
    📦 #183
    auto-f3a42894-r1-053958694-ec943799
    標準答案

    如果沒有找到相關訂單，系統會確認並提供聯繫客服的選項。

    核心必答 · n=1
    • 系統會確認並提供聯繫客服的選項
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
02

最近執行