執行 #83
CHA CHA AI 小編 🤖 (bulk R1) → production-baseline
- 狀態
- 已完成
- 案例
- 30
- 開始時間
- 16 May 11:20
- 耗時
- 513.0s
Cost & Tokens
$0.2739
Total Bot Cost · USD
58.2%
Prompt Cache Hit
- cost per case
- $0.0091
- cost per 1k tokens
- $0.0012
- input tokens
- 219,445
- output tokens
- 3,323
- cached tokens — prompt-cache hit
- 127,744
- Total Tokens
- 222,768
- cost per correct
- $0.0011
- pass rate
- 73.3%
- 22 / 30
- judge cost
- $0.0246
設定快照（reproducibility）
Bot 設定快照
-
28c6cc65-dff1-40b8-ac8e-9514ac167c02
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
30 / 30
0
5
12070 ms
$0.2739
222,768
$0.0246
191,756
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
50.0%
[20.0% – 80.0%] · n=10
F1 16.7% · 相關率 17.1% · 精確 60.0%
10 / 10 適用
·
3 提示
不亂編造
平均
faithfulness
60.0%
[30.0% – 85.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
91.3%
[81.0% – 98.7%] · n=10
10 / 10 適用
-
案例 60AEAC72
請問買二送二的活動需要幾盒才可以參加？
第 1 次嘗試 · 已完成 15949ms載入詳情中…
-
案例 6699C056
Sami 彩色日拋的含水量是多少?
第 1 次嘗試 · 已完成 14233ms載入詳情中…
-
案例 7FB09B2E
下單後商品大概多久可以收到?
第 1 次嘗試 · 已完成 15659ms載入詳情中…
-
案例 F8D98269
Lens++ 彩色月拋是什麼類型的隱形眼鏡?
第 1 次嘗試 · 已完成 16858ms載入詳情中…
-
案例 EF62D559
請問若訂單狀態顯示已確認，可以取消訂單嗎？
第 1 次嘗試 · 已完成 16013ms載入詳情中…
-
案例 288F920D
威世VES 矽水膠月拋【日暮晨曦】是什麼類型的隱形眼鏡?
第 1 次嘗試 · 已完成 15369ms載入詳情中…
-
案例 9674634F
CHA CHA 美瞳有實體店面嗎？
第 1 次嘗試 · 已完成 11092ms載入詳情中…
-
案例 90E95FD6
Lens++ 抗藍光彩色日拋每包有幾片?
第 1 次嘗試 · 已完成 14925ms載入詳情中…
-
案例 A772DD91
拆封商品可以退換嗎
第 1 次嘗試 · 已完成 11573ms載入詳情中…
-
案例 7BB9C8F2
Lens++ 彩色日拋【星環金棕】是什麼設計？
第 1 次嘗試 · 已完成 20110ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
90.0%
[70.0% – 100.0%] · n=10
F1 76.7% · 召回 90.0% · 精確 70.0%
10 / 10 適用
用對工具
召回
tool_usage
10.0%
[0.0% – 30.0%] · n=10
F1 16.7% · 召回 15.0% · 精確 90.0%
10 / 10 適用
答得到位
平均
answer_quality
65.7%
[46.3% – 84.0%] · n=10
10 / 10 適用
-
案例 92DD6B40
我訂單編號是 TS100001，可以查詢一下出貨進度嗎
第 1 次嘗試 · 已完成 11200ms載入詳情中…
-
案例 92BA7E83
我收到的商品有錯誤，訂單編號是 TS100001，該怎麼辦？
第 1 次嘗試 · 已完成 10661ms載入詳情中…
-
案例 6CA34466
請問 oddI's 固定軸日拋 透光棕 什麼時候會補貨嗎？
第 1 次嘗試 · 已完成 9506ms載入詳情中…
-
案例 5ABC8CC2
這個透光棕的隱形眼鏡還會補貨嗎？
第 1 次嘗試 · 已完成 8049ms載入詳情中…
-
案例 B58B90C1
隱形眼鏡的保養需要注意什麼?
第 1 次嘗試 · 已完成 9712ms載入詳情中…
-
案例 BEBAE4B8
如果我的訂單狀態是處理中，可以怎麼取消訂單？
第 1 次嘗試 · 已完成 11486ms載入詳情中…
-
案例 B2A2E9D1
出貨進度查詢要提供什麼資訊?
第 1 次嘗試 · 已完成 15930ms載入詳情中…
-
案例 F4765FBC
請問如果我收到商品，但發現度數買錯了，應該怎麼處理呢？
第 1 次嘗試 · 已完成 13499ms載入詳情中…
-
案例 AEBBEE9B
我可以怎麼取消訂單？
第 1 次嘗試 · 已完成 11058ms載入詳情中…
-
案例 33157DC6
如果我有瑕疵的隱形眼鏡，請問需要提供什麼資訊來退換貨嗎？
第 1 次嘗試 · 已完成 9691ms載入詳情中…
對話素養（混合問答）
對話素養（混合問答）
維度總表
找對資料
召回
retrieval
12.5%
[0.0% – 37.5%] · n=8
F1 4.2% · 相關率 13.3% · 精確 90.0%
8 / 10 適用
·
2 提示
不亂編造
平均
faithfulness
50.0%
[22.2% – 77.8%] · n=9
10 / 10 適用
答得到位
平均
answer_quality
76.7%
[58.7% – 92.7%] · n=10
10 / 10 適用
-
案例 B167E3FE
退貨必須符合哪些退貨條件？
第 1 次嘗試 · 已完成 16683ms載入詳情中…
-
案例 4261D0C5
請問我可以用什麼方式搜尋產品？
第 1 次嘗試 · 已完成 14027ms載入詳情中…
-
案例 ABF5778A
收到錯誤商品該怎麼辦?
第 1 次嘗試 · 已完成 8402ms載入詳情中…
-
案例 3C1DE212
媞蜜多 彩色日拋能不能重覆配戴?
第 1 次嘗試 · 已完成 13627ms載入詳情中…
-
案例 D603F2D3
晶瞳彩色日拋直徑多少?
第 1 次嘗試 · 已完成 12478ms載入詳情中…
-
案例 50E55A74
Sami 彩色日拋【星曜灰】有多少片裝？
第 1 次嘗試 · 已完成 12942ms載入詳情中…
-
案例 1750C885
T-Garden Chu's me 日拋【微光心褐】的著色直徑多少?
第 1 次嘗試 · 已完成 14838ms載入詳情中…
-
案例 9E4EF0FA
使用 O'loLa 彩色月拋 之前需要怎樣的驗光呢？
第 1 次嘗試 · 已完成 12664ms載入詳情中…
-
案例 768C1684
Lensme 月拋 YOUS GRAY 直徑多少?
第 1 次嘗試 · 已完成 13981ms載入詳情中…
-
案例 F19E185F
這個商品的包裝有損壞嗎?
第 1 次嘗試 · 已完成 11547ms載入詳情中…