botty (bulk R1)

23 個案例 · 3 個產出 · 2 次執行 · 最後執行 5分鐘 前 · drift ✓ 8分鐘 前

⋯ more
LLM 累計成本(Eris-tracked,含 generations + runs)
$0.0501 375,298 tokens · 222 calls
Generations $0.0501 222 calls
Runs (Judge) $0.0000 0 judgements
RUNNING
2 個 evaluation 進行中:
01

案例 (23)

項目 I.

知識庫精準度

kb_accuracy 3 cases
  • 退換貨的商品有什麼要求嗎
    📦 #136
    auto-a3d64709-r1-053958512-8a6369a0
    標準答案

    退換貨的商品必須未使用且包裝完整。

    核心必答 · n=1
    • 退換貨的商品必須未使用且包裝完整
    預期觸發情境
    知識與產品查詢
    預期呼叫工具
    search_knowledges
    編輯
  • 請問如何查詢我的訂單狀態?
    📦 #136
    auto-a3d64709-r1-053958512-3bbc3c55
    標準答案

    請登入會員中心點選「訂單查詢」,即可查看訂單處理進度。

    核心必答 · n=1
    • 請登入會員中心點選「訂單查詢」,即可查看訂單處理進度
    預期觸發情境
    知識與產品查詢
    預期呼叫工具
    search_knowledges
    編輯
  • 訂單滿多少可以免運費?
    📦 #136
    auto-a3d64709-r1-053958512-02c429e4
    標準答案

    訂單滿1000元免運費,未滿則酌收80元運費。

    核心必答 · n=2
    • 訂單滿1000元免運費
    • 未滿則酌收80元運費
    預期觸發情境
    知識與產品查詢
    預期呼叫工具
    search_knowledges
    編輯
項目 II.

情境調用與完成

scenario_funnel 10 cases
  • 運費是怎麼計算的呢?
    📦 #137
    auto-a3d64709-r1-053958512-f208c334
    標準答案

    訂單滿1000元免運費,未滿則酌收80元運費。

    核心必答 · n=2
    • 訂單滿1000元免運費
    • 未滿則酌收80元運費
    預期觸發情境
    FAQ查詢
    預期呼叫工具
    search_knowledges
    編輯
  • 想查詢微增髮片
    📦 #137
    auto-a3d64709-r1-053958512-69bc2231
    標準答案

    請稍等,我正在為您搜尋微增髮片的相關資訊。

    補充說明 · n=1
    • 請稍等
    預期觸發情境
    產品查詢
    預期呼叫工具
    search_products
    編輯
  • 我想查詢運費如何計算,請問有相關的FAQ嗎?
    📦 #137
    auto-a3d64709-r1-053958512-743b129d
    標準答案

    關於運費的計算,訂單滿1000元免運費,未滿則酌收80元運費。您可以透過我們的FAQ查詢了解更多資訊。

    核心必答 · n=2
    • 訂單滿1000元免運費
    • 未滿則酌收80元運費
    補充說明 · n=1
    • 您可以透過我們的FAQ查詢了解更多資訊
    預期觸發情境
    FAQ查詢
    預期呼叫工具
    search_knowledges
    編輯
  • 我的訂單查詢有沒有進度?
    📦 #137
    auto-a3d64709-r1-053958512-643ab920
    標準答案

    如果找不到相關訂單,我可以幫你聯繫客戶服務以確認你的查詢選項。

    核心必答 · n=1
    • 如果找不到相關訂單,我可以幫你聯繫客戶服務
    補充說明 · n=1
    • 以確認你的查詢選項
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 請問我如何可以查詢我的訂單狀態呢?
    📦 #137
    auto-a3d64709-r1-053958512-f5134c4a
    標準答案

    您可以登入會員中心並點選「訂單查詢」,就能查看訂單的處理進度。

    核心必答 · n=2
    • 您可以登入會員中心並點選「訂單查詢」
    • 就能查看訂單的處理進度
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 我想要查詢有關髮片的產品,怎麼做?
    📦 #137
    auto-a3d64709-r1-053958512-28741942
    標準答案

    請告訴我你想查詢的髮片的相關資訊或需求,我會幫你搜尋適合的產品。

    補充說明 · n=1
    • 請告訴我你想查詢的髮片的相關資訊或需求
    預期觸發情境
    產品查詢
    預期呼叫工具
    search_products
    編輯
  • 查詢訂單的時候,如果找到多個訂單會怎麼處理啊
    📦 #137
    auto-a3d64709-r1-053958512-9cdeb702
    標準答案

    如果找到多個相關訂單,系統會將它們邏輯性地合併,方便您查看詳細資訊。

    核心必答 · n=1
    • 系統會將多個相關訂單邏輯性地合併
    補充說明 · n=1
    • 方便您查看詳細資訊
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 我想找有關黏的那種片片的推薦,怎麼查詢?
    📦 #137
    auto-a3d64709-r1-053958512-7bb9ce3e
    標準答案

    要查詢黏的那種片片的相關產品,請提供你想要了解的商品或需求,我可以幫你搜尋。

    補充說明 · n=1
    • 請提供你想要了解的商品或需求,我可以幫你搜尋
    預期觸發情境
    產品查詢
    預期呼叫工具
    search_products
    編輯
  • 我想查詢什麼商品比較好?
    📦 #137
    auto-a3d64709-r1-053958512-6b980ced
    標準答案

    請告訴我你想要查詢的商品或需求,我會根據你的意圖提供相關的產品推薦。

    補充說明 · n=2
    • 請告訴我你想要查詢的商品或需求
    • 我會根據你的意圖提供相關的產品推薦
    預期觸發情境
    產品查詢
    預期呼叫工具
    search_products
    編輯
  • 想查詢什麼產品啊?
    📦 #137
    auto-a3d64709-r1-053958512-75400457
    標準答案

    請告訴我你最想查詢的商品、需求或關鍵主題,我會幫你尋找相關產品資訊。

    補充說明 · n=1
    • 請告訴我你最想查詢的商品、需求或關鍵主題
    預期觸發情境
    產品查詢
    預期呼叫工具
    search_products
    編輯
項目 III.

對話素養(混合問答)

mixed_qa 10 cases
  • 滿1000元有免運費嗎
    📦 #138
    auto-a3d64709-r1-053958512-62383832
    標準答案

    訂單滿1000元免運費,未滿則酌收80元運費。

    核心必答 · n=2
    • 訂單滿1000元免運費
    • 未滿則酌收80元運費
    預期觸發情境
    early_return
    編輯
  • 請問你們的商品推薦是怎麼運作的?
    📦 #138
    auto-a3d64709-r1-053958512-07c86534
    標準答案

    商品推薦可以透過混合 RAG 搜尋或直接使用產品 ID 來推薦產品,返回經過供應商標準化的產品信息,包括標題、價格、庫存、變體等,適合用於購物對話。

    核心必答 · n=3
    • 商品推薦可以透過混合 RAG 搜尋或直接使用產品 ID 來推薦產品
    • 返回經過供應商標準化的產品信息,包括標題、價格、庫存、變體等
    • 適合用於購物對話
    預期觸發情境
    early_return
    預期呼叫工具
    shopline_recommend_products
    編輯
  • 如何查詢我的訂單詳細資訊?
    📦 #138
    auto-a3d64709-r1-053958512-57f43994
    標準答案

    請提供您的姓名或聯絡電話,我可以幫您查詢訂單的詳細資訊。

    補充說明 · n=1
    • 請提供您的姓名或聯絡電話,我可以幫您查詢訂單的詳細資訊
    預期觸發情境
    訂單查詢
    預期呼叫工具
    shopline_search_orders
    編輯
  • 統一搜尋要提供什麼關鍵字?
    📦 #138
    auto-a3d64709-r1-053958512-fa682ece
    標準答案

    統一搜尋需要提供每個地區的 BM25 關鍵字。

    核心必答 · n=1
    • 統一搜尋需要提供每個地區的 BM25 關鍵字
    預期觸發情境
    early_return
    預期呼叫工具
    search_unified
    編輯
  • 請問有什麼方法可以搜尋知識來源呢?
    📦 #138
    auto-a3d64709-r1-053958512-664a88c0
    標準答案

    您可以使用混合搜尋方法,這包括 BM25 和向量搜尋,針對知識來源進行查詢。

    核心必答 · n=2
    • 可以使用混合搜尋方法
    • 包括 BM25 和向量搜尋
    預期觸發情境
    early_return
    預期呼叫工具
    search_knowledges
    編輯
  • 退換貨要怎麼做啊?
    📦 #138
    auto-a3d64709-r1-053958512-c70f947e
    標準答案

    您可以在收到商品後7天內申請退換貨。請確保商品未使用且包裝完整。

    核心必答 · n=2
    • 您可以在收到商品後7天內申請退換貨
    • 請確保商品未使用且包裝完整
    預期觸發情境
    early_return
    編輯
  • 如果線上客服解決不了問題,可以轉接真人客服嗎
    📦 #138
    auto-a3d64709-r1-053958512-942af963
    標準答案

    是的,如果線上客服未能解決問題,可以轉接真人客服。

    核心必答 · n=1
    • 如果線上客服未能解決問題,可以轉接真人客服
    預期觸發情境
    轉接真人客服
    編輯
  • 我可以請你轉接給人類客服嗎?
    📦 #138
    auto-a3d64709-r1-053958512-75e04524
    標準答案

    可以,當用戶明確要求人類客服時,我們可以轉接給人類客服代理。

    核心必答 · n=1
    • 可以轉接給人類客服代理
    重要限制 · n=1
    • 當用戶明確要求人類客服時
    預期觸發情境
    early_return
    預期呼叫工具
    transfer_to_human_agent
    編輯
  • 有什麼髮片可以推薦?
    📦 #138
    auto-a3d64709-r1-053958512-d5717287
    標準答案

    我們有多款髮片可供選擇,請稍候幫你搜尋相關產品。

    核心必答 · n=1
    • 我們有多款髮片可供選擇
    補充說明 · n=1
    • 請稍候幫你搜尋相關產品
    預期觸發情境
    產品查詢
    預期呼叫工具
    search_products
    編輯
  • 你們的搜尋工具是怎麼運作的?
    📦 #138
    auto-a3d64709-r1-053958512-dcda82d0
    標準答案

    我們的搜尋工具使用混合搜尋,包含 BM25 和向量搜尋,專門針對產品來源進行查詢。

    核心必答 · n=3
    • 我們的搜尋工具使用混合搜尋
    • 包含 BM25 和向量搜尋
    • 專門針對產品來源進行查詢
    預期觸發情境
    early_return
    預期呼叫工具
    search_products
    編輯
02

最近執行