執行 #203
Rhinoshield DEV Chatbot (bulk R1) → production-baseline
- 狀態
- 已完成
- 案例
- 30
- 開始時間
- 16 May 12:15
- 耗時
- 331.5s
Cost & Tokens
$2.0346
Total Bot Cost · USD
49.0%
Prompt Cache Hit
- cost per case
- $0.0678
- cost per 1k tokens
- $0.0013
- input tokens
- 1,577,031
- output tokens
- 4,960
- cached tokens — prompt-cache hit
- 772,736
- Total Tokens
- 1,581,991
- cost per correct
- $0.0009
- pass rate
- 96.7%
- 29 / 30
- judge cost
- $0.0262
設定快照(reproducibility)
Bot 設定快照
-
83c4d73f-1208-4694-9880-6c93793b224f
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
30 / 30
0
0
4576 ms
$2.0346
1,581,991
$0.0262
203,674
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=10
F1 33.3% · 相關率 48.0% · 精確 20.0%
10 / 10 適用
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
97.3%
[94.7% – 99.7%] · n=10
10 / 10 適用
-
案例 B9DD6097
使用酒精清潔 AirPods 保護殼需要注意什麼?
第 1 次嘗試 · 已完成 17374ms載入詳情中…
-
案例 21D9D84C
如果 Clear 保護殼變黃了,怎麼辦?
第 1 次嘗試 · 已完成 19545ms載入詳情中…
-
案例 E6F7F746
犀牛盾磁吸環會影響NFC行動支付嗎
第 1 次嘗試 · 已完成 20678ms載入詳情中…
-
案例 D78B2D03
犀牛盾掛繩夾片可以用酒精清潔嗎?
第 1 次嘗試 · 已完成 22531ms載入詳情中…
-
案例 0A4A9ED8
包裹內有寄錯的商品,我該怎麼辦?
第 1 次嘗試 · 已完成 17532ms載入詳情中…
-
案例 04F0477E
你們的產品有含 BPA 嗎?
第 1 次嘗試 · 已完成 22570ms載入詳情中…
-
案例 D2AFA7AA
你們有什麼付款方式?
第 1 次嘗試 · 已完成 23345ms載入詳情中…
-
案例 D3F1B27F
壯撞貼能跟所有手機殼相容嗎?
第 1 次嘗試 · 已完成 26254ms載入詳情中…
-
案例 B5C24B0B
所有保護殼類產品可以回收嗎
第 1 次嘗試 · 已完成 20419ms載入詳情中…
-
案例 DF81AF9F
成功註冊會員後,有什麼優惠?
第 1 次嘗試 · 已完成 18438ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
90.0%
[70.0% – 100.0%] · n=10
F1 76.7% · 召回 90.0% · 精確 70.0%
10 / 10 適用
用對工具
召回
tool_usage
40.0%
[0.0% – 80.0%] · n=5
F1 53.3% · 召回 50.0% · 精確 60.0%
5 / 10 適用
答得到位
平均
answer_quality
93.3%
[89.3% – 96.7%] · n=10
10 / 10 適用
-
案例 A94C778E
如果要退貨,要怎麼辦?
第 1 次嘗試 · 已完成 24366ms載入詳情中…
-
案例 84CE8580
請問這款產品的重量和尺寸是多少?
第 1 次嘗試 · 已完成 11122ms載入詳情中…
-
案例 2FA7177F
請問我想要查詢訂購紀錄,需提供哪些資訊呢?
第 1 次嘗試 · 已完成 10225ms載入詳情中…
-
案例 C2BD74F3
請問退換貨的流程是什麼?
第 1 次嘗試 · 已完成 35786ms載入詳情中…
-
案例 4249AC05
iPhone 16 有推薦的手機殼嗎?
第 1 次嘗試 · 已完成 48756ms載入詳情中…
-
案例 E9191C49
這款產品在官網上看不到,有什麼問題嗎
第 1 次嘗試 · 已完成 17800ms載入詳情中…
-
案例 1D50A3F1
我買錯商品了,可以更換嗎?
第 1 次嘗試 · 已完成 15506ms載入詳情中…
-
案例 504B5693
請問那個手機保護殼的重量和尺寸是多少?
第 1 次嘗試 · 已完成 9039ms載入詳情中…
-
案例 B25A85EF
要修改寄送地址,訂單編號為什麼必須提供?
第 1 次嘗試 · 已完成 23303ms載入詳情中…
-
案例 B0C98787
退貨流程怎麼辦
第 1 次嘗試 · 已完成 18215ms載入詳情中…
對話素養(混合問答)
對話素養(混合問答)
維度總表
找對資料
召回
retrieval
88.9%
[66.7% – 100.0%] · n=9
F1 29.6% · 相關率 30.0% · 精確 28.9%
9 / 10 適用
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=9
10 / 10 適用
答得到位
平均
answer_quality
89.3%
[69.3% – 100.0%] · n=10
10 / 10 適用
-
案例 DB2C2B6B
壯撞貼會不會影響指紋辨識功能?
第 1 次嘗試 · 已完成 11881ms載入詳情中…
-
案例 8703A188
請問我的產品重量要怎麼詢問?
第 1 次嘗試 · 已完成 10421ms載入詳情中…
-
案例 CBBD52D5
Apple Watch壯撞貼有提供貼膜輔助工具嗎
第 1 次嘗試 · 已完成 25082ms載入詳情中…
-
案例 7DEC5CFF
犀牛盾編織手腕掛繩要怎麼清潔?
第 1 次嘗試 · 已完成 23309ms載入詳情中…
-
案例 B3BAC966
犀牛盾9H鋼化玻璃貼會影響指紋辨識嗎?
第 1 次嘗試 · 已完成 18004ms載入詳情中…
-
案例 26466950
固架MINI可以用酒精清潔嗎
第 1 次嘗試 · 已完成 22346ms載入詳情中…
-
案例 01BDE861
犀牛盾機能快扣掛繩能承受多少重量?
第 1 次嘗試 · 已完成 11181ms載入詳情中…
-
案例 44B03370
CircularBlue 是什麼計畫?
第 1 次嘗試 · 已完成 27477ms載入詳情中…
-
案例 FCC1845C
註冊禮金如果逾期未使用會怎樣?
第 1 次嘗試 · 已完成 24774ms載入詳情中…
-
案例 8207F651
AirX 手機殼側邊有吊飾孔嗎
第 1 次嘗試 · 已完成 13923ms載入詳情中…