執行 #187
ONE BOY AI 小幫手 (bulk R1) → production-baseline
- 狀態
- 已完成
- 案例
- 30
- 開始時間
- 16 May 12:07
- 耗時
- 537.4s
Cost & Tokens
$1.0615
Total Bot Cost · USD
18.0%
Prompt Cache Hit
- cost per case
- $0.0354
- cost per 1k tokens
- $0.0018
- input tokens
- 587,190
- output tokens
- 5,668
- cached tokens — prompt-cache hit
- 105,472
- Total Tokens
- 592,858
- cost per correct
- $0.0018
- pass rate
- 70.0%
- 21 / 30
- judge cost
- $0.0384
設定快照（reproducibility）
Bot 設定快照
-
b1f95c95-249a-44ec-aaaf-509c4aab3aad
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
30 / 30
0
16
21709 ms
$1.0615
592,858
$0.0384
281,352
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
90.0%
[70.0% – 100.0%] · n=10
F1 30.0% · 相關率 21.1% · 精確 28.0%
10 / 10 適用
·
5 提示
不亂編造
平均
faithfulness
95.0%
[85.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
95.3%
[91.0% – 98.7%] · n=10
10 / 10 適用
-
案例 0D11137D
收到包裹後為什麼要詳細記錄商品狀況？
第 1 次嘗試 · 已完成 23077ms載入詳情中…
-
案例 B64E1A59
305g極輕量減震防滑休閒機能輕旅鞋有彈性嗎？
第 1 次嘗試 · 已完成 18871ms載入詳情中…
-
案例 26CCF27B
怎麼聯繫你們的私訊臉書客服?
第 1 次嘗試 · 已完成 15933ms載入詳情中…
-
案例 C0377D73
寵物輕鋒衣有什麼特點啊？
第 1 次嘗試 · 已完成 19765ms載入詳情中…
-
案例 27B40B14
請問下單結帳後是否可以取消部分商品或加購呢？
第 1 次嘗試 · 已完成 17258ms載入詳情中…
-
案例 22983942
升溫6.06度雙面布肌底發熱長袖T恤要怎麼洗?
第 1 次嘗試 · 已完成 16025ms載入詳情中…
-
案例 D8BF567D
ONE BOY有創立副品牌嗎?
第 1 次嘗試 · 已完成 14962ms載入詳情中…
-
案例 96F968B3
530G厚磅數素色LOGO長袖T恤洗衣水溫度要多少?
第 1 次嘗試 · 已完成 24529ms載入詳情中…
-
案例 7CA40AAB
商品尺寸或顏色不合的話，怎麼處理呢？
第 1 次嘗試 · 已完成 16513ms載入詳情中…
-
案例 3D66B386
這款高腰褲可以手洗嗎？
第 1 次嘗試 · 已完成 15424ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
100.0%
[100.0% – 100.0%] · n=10
F1 90.0% · 召回 100.0% · 精確 85.0%
10 / 10 適用
用對工具
召回
tool_usage
70.0%
[40.0% – 90.0%] · n=10
F1 70.0% · 召回 70.0% · 精確 70.0%
10 / 10 適用
答得到位
平均
answer_quality
64.3%
[49.0% – 80.3%] · n=10
10 / 10 適用
-
案例 727DEEE9
請問有關付款方式的問題，我想知道貴公司支持哪些付款選項?
第 1 次嘗試 · 已完成 19830ms載入詳情中…
-
案例 984CB182
你們有什麼活動或優惠嗎?
第 1 次嘗試 · 已完成 16714ms載入詳情中…
-
案例 98CA7983
請問我的訂單進度怎麼查詢？
第 1 次嘗試 · 已完成 17608ms載入詳情中…
-
案例 151CD419
均碼 F 內褲的尺寸是什麼？
第 1 次嘗試 · 已完成 22528ms載入詳情中…
-
案例 C4C4FB05
這款產品的保養要怎麼做?
第 1 次嘗試 · 已完成 28248ms載入詳情中…
-
案例 BFB514BC
請問迷你版內衣的胸寬是多少呢？
第 1 次嘗試 · 已完成 28249ms載入詳情中…
-
案例 BDEF5AFE
請問我想查詢我的訂單進度，需要提供哪些資訊呢？
第 1 次嘗試 · 已完成 29880ms載入詳情中…
-
案例 C1C918D9
我該怎麼找內褲的尺寸啊？
第 1 次嘗試 · 已完成 9504ms載入詳情中…
-
案例 F1F28788
請問我想要查詢內衣的尺寸表，應該怎麼做呢？
第 1 次嘗試 · 已完成 23866ms載入詳情中…
-
案例 641673E2
你們支持哪些付款方式?
第 1 次嘗試 · 已完成 22248ms載入詳情中…
對話素養（混合問答）
對話素養（混合問答）
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=8
F1 33.3% · 相關率 35.0% · 精確 20.0%
8 / 10 適用
·
7 提示
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
82.0%
[62.7% – 100.0%] · n=10
10 / 10 適用
-
案例 9E7C6D5C
ONE BOY 客服的服務時間是什麼時候?
第 1 次嘗試 · 已完成 16395ms載入詳情中…
-
案例 6C0CBB52
厚底增高工裝寬楦Q版大頭靴有彈性嗎
第 1 次嘗試 · 已完成 47895ms載入詳情中…
-
案例 E6CEA30E
請問可以查看之前的對話紀錄嗎？
第 1 次嘗試 · 已完成 18258ms載入詳情中…
-
案例 1D039A16
轉接真人客服需要怎麼回覆？
第 1 次嘗試 · 已完成 21645ms載入詳情中…
-
案例 5817E4BD
科技Clo+羽絨褲洗滌水溫是多少?
第 1 次嘗試 · 已完成 19998ms載入詳情中…
-
案例 DE07AEDC
無尺碼無縫中腰內褲可以烘乾嗎
第 1 次嘗試 · 已完成 18133ms載入詳情中…
-
案例 C1AE24D2
420g重磅刷毛保暖圓領拼接大學TEE的洗滌方式是什麼？
第 1 次嘗試 · 已完成 25878ms載入詳情中…
-
案例 FBC8AB30
請問內裏加絨保暖禦寒口罩可以烘乾嗎？
第 1 次嘗試 · 已完成 25853ms載入詳情中…
-
案例 7B806036
輕鋒衣3.0的洗滌方式是什麼？
第 1 次嘗試 · 已完成 28402ms載入詳情中…
-
案例 1C1820ED
莫代爾冰絲透氣四角內褲的材質是什麼？
第 1 次嘗試 · 已完成 19298ms載入詳情中…