執行 #216
Service Client Intelligent - Rhino (bulk R1) → production-canary (canary)
- 狀態
- 已完成
- 案例
- 28
- 開始時間
- 16 May 12:23
- 耗時
- 549.7s
Cost & Tokens
$0.2084
Total Bot Cost · USD
75.4%
Prompt Cache Hit
- cost per case
- $0.0074
- cost per 1k tokens
- $0.0011
- input tokens
- 192,738
- output tokens
- 5,109
- cached tokens — prompt-cache hit
- 145,280
- Total Tokens
- 197,847
- cost per correct
- $0.0013
- pass rate
- 67.9%
- 19 / 28
- judge cost
- $0.0249
設定快照（reproducibility）
Bot 設定快照
-
e2abf68d-eac9-40ab-9535-1b538aaf95ed
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
28 / 28
0
6
12597 ms
$0.2084
197,847
$0.0249
189,541
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
80.0%
[50.0% – 100.0%] · n=10
F1 26.7% · 相關率 15.7% · 精確 36.0%
10 / 10 適用
·
6 提示
不亂編造
平均
faithfulness
93.8%
[81.3% – 100.0%] · n=8
10 / 10 適用
答得到位
平均
answer_quality
82.7%
[62.0% – 97.3%] · n=10
10 / 10 適用
-
案例 A0283982
Janice Sung 的作品主題是什麼?
第 1 次嘗試 · 已完成 42500ms載入詳情中…
-
案例 59105728
One Piece 手機殼是跟誰合作推出的？
第 1 次嘗試 · 已完成 32288ms載入詳情中…
-
案例 C8D05B58
SKY STORY 的手機殼適用於什麼手機?
第 1 次嘗試 · 已完成 36419ms載入詳情中…
-
案例 B6F6BEF2
CircularBlue配備了什麼技術來檢測海洋垃圾？
第 1 次嘗試 · 已完成 45142ms載入詳情中…
-
案例 3335FEB0
6:Siege 是什麼產品?
第 1 次嘗試 · 已完成 49337ms載入詳情中…
-
案例 745A5273
Antique Housing Art 手機保護殼是什麼？
第 1 次嘗試 · 已完成 34597ms載入詳情中…
-
案例 7C54E0C6
RHINOSHIELD RhinoBuff 外殼有含 BPA 嗎?
第 1 次嘗試 · 已完成 15003ms載入詳情中…
-
案例 C793BBD8
Le Tour de France 手機殼有什麼樣的設計？
第 1 次嘗試 · 已完成 48659ms載入詳情中…
-
案例 E9BF8411
AquaStand RHINOSHIELD 有 DGCCRF 認證嗎
第 1 次嘗試 · 已完成 35412ms載入詳情中…
-
案例 3B797558
這款透明 iPhone 保護殼能自訂嗎
第 1 次嘗試 · 已完成 38347ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
100.0%
[100.0% – 100.0%] · n=10
F1 83.3% · 召回 100.0% · 精確 75.0%
10 / 10 適用
用對工具
召回
tool_usage
0.0%
[0.0% – 0.0%] · n=3
F1 66.7% · 召回 50.0% · 精確 100.0%
3 / 10 適用
答得到位
平均
answer_quality
67.3%
[46.3% – 87.0%] · n=10
10 / 10 適用
-
案例 2723FEFE
請問如果產品有刮傷的情況，我該怎麼處理？
第 1 次嘗試 · 已完成 26137ms載入詳情中…
-
案例 61AF13D1
可以問一下你們的產品容量是幾公升嗎？
第 1 次嘗試 · 已完成 29399ms載入詳情中…
-
案例 8409C19B
各型號的重量跟尺寸是多少?
第 1 次嘗試 · 已完成 25140ms載入詳情中…
-
案例 F7FDBE69
如果我的付款失敗了，該怎麼辦嗎?
第 1 次嘗試 · 已完成 24678ms載入詳情中…
-
案例 79728264
請問你們的產品有什麼重量和尺寸的資訊？
第 1 次嘗試 · 已完成 22114ms載入詳情中…
-
案例 60EC2982
如果我在付款時遇到問題，我應該怎麼做？
第 1 次嘗試 · 已完成 27976ms載入詳情中…
-
案例 A2487ECB
請問如何查詢產品的使用方法和教學呢？
第 1 次嘗試 · 已完成 19577ms載入詳情中…
-
案例 064935B8
我看到我的保護殼有刮傷，這算產品異常嗎?
第 1 次嘗試 · 已完成 40032ms載入詳情中…
-
案例 43FFF280
我有個產品皮膚出現剝落的情況，這算異常嗎？
第 1 次嘗試 · 已完成 17618ms載入詳情中…
-
案例 14839ABA
產品的重量尺寸是多少?
第 1 次嘗試 · 已完成 16660ms載入詳情中…
對話素養（混合問答）
對話素養（混合問答）
維度總表
找對資料
召回
retrieval
83.3%
[50.0% – 100.0%] · n=6
F1 27.8% · 相關率 21.7% · 精確 16.7%
6 / 8 適用
不亂編造
平均
faithfulness
83.3%
[50.0% – 100.0%] · n=6
8 / 8 適用
答得到位
平均
answer_quality
69.2%
[42.9% – 92.1%] · n=8
8 / 8 適用
-
案例 28DC4056
get_file_resource 是用來做什麼的?
第 1 次嘗試 · 已完成 19746ms載入詳情中…
-
案例 31CD6AAD
你們的不同型號重多少、尺寸有多大?
第 1 次嘗試 · 已完成 18208ms載入詳情中…
-
案例 8706CE5A
AquaStand可以讓冷飲保持多久涼?
第 1 次嘗試 · 已完成 20918ms載入詳情中…
-
案例 897017EC
Apple Watch 編織手環有含 BPS 嗎
第 1 次嘗試 · 已完成 34715ms載入詳情中…
-
案例 A861C9D1
RHINOSHIELD SolidX/ SolidSuit 有沒有 BPA/BPF/BPS？
第 1 次嘗試 · 已完成 39030ms載入詳情中…
-
案例 A8D940E0
要怎麼刪除我的會員帳號?
第 1 次嘗試 · 已完成 24459ms載入詳情中…
-
案例 CBD6417C
Apple Watch 的外殼能吸收多少衝擊力?
第 1 次嘗試 · 已完成 35984ms載入詳情中…
-
案例 0531AA00
請問 RHINOSHIELD AirX 的殼子可以回收嗎？還有 Jujutsu Kaisen 的系列可以選擇嗎？
第 1 次嘗試 · 已完成 50531ms載入詳情中…