執行 #188
ONE BOY AI 小幫手 (bulk R1) → production-canary (canary)
- 狀態
- 已完成
- 案例
- 30
- 開始時間
- 16 May 12:08
- 耗時
- 567.4s
Cost & Tokens
$0.4476
Total Bot Cost · USD
88.1%
Prompt Cache Hit
- cost per case
- $0.0149
- cost per 1k tokens
- $0.0008
- input tokens
- 587,050
- output tokens
- 6,127
- cached tokens — prompt-cache hit
- 516,992
- Total Tokens
- 593,177
- cost per correct
- $0.0019
- pass rate
- 66.7%
- 20 / 30
- judge cost
- $0.0378
設定快照（reproducibility）
Bot 設定快照
-
b1f95c95-249a-44ec-aaaf-509c4aab3aad
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
30 / 30
0
16
31455 ms
$0.4476
593,177
$0.0378
282,048
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
90.0%
[70.0% – 100.0%] · n=10
F1 30.0% · 相關率 21.1% · 精確 28.0%
10 / 10 適用
·
5 提示
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
93.3%
[82.7% – 99.3%] · n=10
10 / 10 適用
-
案例 0D11137D
收到包裹後為什麼要詳細記錄商品狀況？
第 1 次嘗試 · 已完成 47579ms載入詳情中…
-
案例 B64E1A59
305g極輕量減震防滑休閒機能輕旅鞋有彈性嗎？
第 1 次嘗試 · 已完成 34079ms載入詳情中…
-
案例 26CCF27B
怎麼聯繫你們的私訊臉書客服?
第 1 次嘗試 · 已完成 33069ms載入詳情中…
-
案例 C0377D73
寵物輕鋒衣有什麼特點啊？
第 1 次嘗試 · 已完成 49040ms載入詳情中…
-
案例 27B40B14
請問下單結帳後是否可以取消部分商品或加購呢？
第 1 次嘗試 · 已完成 35594ms載入詳情中…
-
案例 22983942
升溫6.06度雙面布肌底發熱長袖T恤要怎麼洗?
第 1 次嘗試 · 已完成 47373ms載入詳情中…
-
案例 D8BF567D
ONE BOY有創立副品牌嗎?
第 1 次嘗試 · 已完成 33961ms載入詳情中…
-
案例 96F968B3
530G厚磅數素色LOGO長袖T恤洗衣水溫度要多少?
第 1 次嘗試 · 已完成 33972ms載入詳情中…
-
案例 7CA40AAB
商品尺寸或顏色不合的話，怎麼處理呢？
第 1 次嘗試 · 已完成 36304ms載入詳情中…
-
案例 3D66B386
這款高腰褲可以手洗嗎？
第 1 次嘗試 · 已完成 45422ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
100.0%
[100.0% – 100.0%] · n=10
F1 90.0% · 召回 100.0% · 精確 85.0%
10 / 10 適用
用對工具
召回
tool_usage
70.0%
[40.0% – 100.0%] · n=10
F1 70.0% · 召回 70.0% · 精確 70.0%
10 / 10 適用
答得到位
平均
answer_quality
59.0%
[42.3% – 77.3%] · n=10
10 / 10 適用
-
案例 727DEEE9
請問有關付款方式的問題，我想知道貴公司支持哪些付款選項?
第 1 次嘗試 · 已完成 34798ms載入詳情中…
-
案例 984CB182
你們有什麼活動或優惠嗎?
第 1 次嘗試 · 已完成 47432ms載入詳情中…
-
案例 98CA7983
請問我的訂單進度怎麼查詢？
第 1 次嘗試 · 已完成 23582ms載入詳情中…
-
案例 151CD419
均碼 F 內褲的尺寸是什麼？
第 1 次嘗試 · 已完成 50906ms載入詳情中…
-
案例 C4C4FB05
這款產品的保養要怎麼做?
第 1 次嘗試 · 已完成 55117ms載入詳情中…
-
案例 BFB514BC
請問迷你版內衣的胸寬是多少呢？
第 1 次嘗試 · 已完成 43047ms載入詳情中…
-
案例 BDEF5AFE
請問我想查詢我的訂單進度，需要提供哪些資訊呢？
第 1 次嘗試 · 已完成 30789ms載入詳情中…
-
案例 C1C918D9
我該怎麼找內褲的尺寸啊？
第 1 次嘗試 · 已完成 24811ms載入詳情中…
-
案例 F1F28788
請問我想要查詢內衣的尺寸表，應該怎麼做呢？
第 1 次嘗試 · 已完成 64532ms載入詳情中…
-
案例 641673E2
你們支持哪些付款方式?
第 1 次嘗試 · 已完成 31755ms載入詳情中…
對話素養（混合問答）
對話素養（混合問答）
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=8
F1 33.3% · 相關率 35.0% · 精確 20.0%
8 / 10 適用
·
7 提示
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
81.3%
[64.7% – 97.3%] · n=10
10 / 10 適用
-
案例 9E7C6D5C
ONE BOY 客服的服務時間是什麼時候?
第 1 次嘗試 · 已完成 33160ms載入詳情中…
-
案例 6C0CBB52
厚底增高工裝寬楦Q版大頭靴有彈性嗎
第 1 次嘗試 · 已完成 38688ms載入詳情中…
-
案例 E6CEA30E
請問可以查看之前的對話紀錄嗎？
第 1 次嘗試 · 已完成 37930ms載入詳情中…
-
案例 1D039A16
轉接真人客服需要怎麼回覆？
第 1 次嘗試 · 已完成 42617ms載入詳情中…
-
案例 5817E4BD
科技Clo+羽絨褲洗滌水溫是多少?
第 1 次嘗試 · 已完成 48666ms載入詳情中…
-
案例 DE07AEDC
無尺碼無縫中腰內褲可以烘乾嗎
第 1 次嘗試 · 已完成 58346ms載入詳情中…
-
案例 C1AE24D2
420g重磅刷毛保暖圓領拼接大學TEE的洗滌方式是什麼？
第 1 次嘗試 · 已完成 52357ms載入詳情中…
-
案例 FBC8AB30
請問內裏加絨保暖禦寒口罩可以烘乾嗎？
第 1 次嘗試 · 已完成 54385ms載入詳情中…
-
案例 7B806036
輕鋒衣3.0的洗滌方式是什麼？
第 1 次嘗試 · 已完成 36744ms載入詳情中…
-
案例 1C1820ED
莫代爾冰絲透氣四角內褲的材質是什麼？
第 1 次嘗試 · 已完成 40841ms載入詳情中…