執行 #215
Service Client Intelligent - Rhino (bulk R1) → production-baseline
- 狀態
- 已完成
- 案例
- 28
- 開始時間
- 16 May 12:22
- 耗時
- 507.5s
Cost & Tokens
$0.2403
Total Bot Cost · USD
59.4%
Prompt Cache Hit
- cost per case
- $0.0086
- cost per 1k tokens
- $0.0013
- input tokens
- 182,105
- output tokens
- 4,787
- cached tokens — prompt-cache hit
- 108,160
- Total Tokens
- 186,892
- cost per correct
- $0.0013
- pass rate
- 67.9%
- 19 / 28
- judge cost
- $0.0249
設定快照(reproducibility)
Bot 設定快照
-
e2abf68d-eac9-40ab-9535-1b538aaf95ed
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
28 / 28
0
5
6669 ms
$0.2403
186,892
$0.0249
189,472
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
80.0%
[50.0% – 100.0%] · n=10
F1 26.7% · 相關率 17.1% · 精確 36.0%
10 / 10 適用
·
5 提示
不亂編造
平均
faithfulness
93.8%
[81.3% – 100.0%] · n=8
10 / 10 適用
答得到位
平均
answer_quality
85.0%
[69.0% – 97.0%] · n=10
10 / 10 適用
-
案例 A0283982
Janice Sung 的作品主題是什麼?
第 1 次嘗試 · 已完成 3285ms載入詳情中…
-
案例 59105728
One Piece 手機殼是跟誰合作推出的?
第 1 次嘗試 · 已完成 16806ms載入詳情中…
-
案例 C8D05B58
SKY STORY 的手機殼適用於什麼手機?
第 1 次嘗試 · 已完成 24880ms載入詳情中…
-
案例 B6F6BEF2
CircularBlue配備了什麼技術來檢測海洋垃圾?
第 1 次嘗試 · 已完成 27247ms載入詳情中…
-
案例 3335FEB0
6:Siege 是什麼產品?
第 1 次嘗試 · 已完成 24680ms載入詳情中…
-
案例 745A5273
Antique Housing Art 手機保護殼是什麼?
第 1 次嘗試 · 已完成 22286ms載入詳情中…
-
案例 7C54E0C6
RHINOSHIELD RhinoBuff 外殼有含 BPA 嗎?
第 1 次嘗試 · 已完成 10699ms載入詳情中…
-
案例 C793BBD8
Le Tour de France 手機殼有什麼樣的設計?
第 1 次嘗試 · 已完成 25701ms載入詳情中…
-
案例 E9BF8411
AquaStand RHINOSHIELD 有 DGCCRF 認證嗎
第 1 次嘗試 · 已完成 23768ms載入詳情中…
-
案例 3B797558
這款透明 iPhone 保護殼能自訂嗎
第 1 次嘗試 · 已完成 31801ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
100.0%
[100.0% – 100.0%] · n=10
F1 83.3% · 召回 100.0% · 精確 75.0%
10 / 10 適用
用對工具
召回
tool_usage
0.0%
[0.0% – 0.0%] · n=3
F1 66.7% · 召回 50.0% · 精確 100.0%
3 / 10 適用
答得到位
平均
answer_quality
71.0%
[52.0% – 88.0%] · n=10
10 / 10 適用
-
案例 2723FEFE
請問如果產品有刮傷的情況,我該怎麼處理?
第 1 次嘗試 · 已完成 22176ms載入詳情中…
-
案例 61AF13D1
可以問一下你們的產品容量是幾公升嗎?
第 1 次嘗試 · 已完成 16631ms載入詳情中…
-
案例 8409C19B
各型號的重量跟尺寸是多少?
第 1 次嘗試 · 已完成 10085ms載入詳情中…
-
案例 F7FDBE69
如果我的付款失敗了,該怎麼辦嗎?
第 1 次嘗試 · 已完成 18363ms載入詳情中…
-
案例 79728264
請問你們的產品有什麼重量和尺寸的資訊?
第 1 次嘗試 · 已完成 12618ms載入詳情中…
-
案例 60EC2982
如果我在付款時遇到問題,我應該怎麼做?
第 1 次嘗試 · 已完成 21420ms載入詳情中…
-
案例 A2487ECB
請問如何查詢產品的使用方法和教學呢?
第 1 次嘗試 · 已完成 12659ms載入詳情中…
-
案例 064935B8
我看到我的保護殼有刮傷,這算產品異常嗎?
第 1 次嘗試 · 已完成 16492ms載入詳情中…
-
案例 43FFF280
我有個產品皮膚出現剝落的情況,這算異常嗎?
第 1 次嘗試 · 已完成 17418ms載入詳情中…
-
案例 14839ABA
產品的重量尺寸是多少?
第 1 次嘗試 · 已完成 11019ms載入詳情中…
對話素養(混合問答)
對話素養(混合問答)
維度總表
找對資料
召回
retrieval
83.3%
[50.0% – 100.0%] · n=6
F1 27.8% · 相關率 23.3% · 精確 16.7%
6 / 8 適用
不亂編造
平均
faithfulness
83.3%
[50.0% – 100.0%] · n=6
8 / 8 適用
答得到位
平均
answer_quality
68.8%
[42.9% – 95.8%] · n=8
8 / 8 適用
-
案例 28DC4056
get_file_resource 是用來做什麼的?
第 1 次嘗試 · 已完成 10735ms載入詳情中…
-
案例 31CD6AAD
你們的不同型號重多少、尺寸有多大?
第 1 次嘗試 · 已完成 10359ms載入詳情中…
-
案例 8706CE5A
AquaStand可以讓冷飲保持多久涼?
第 1 次嘗試 · 已完成 17616ms載入詳情中…
-
案例 897017EC
Apple Watch 編織手環有含 BPS 嗎
第 1 次嘗試 · 已完成 17998ms載入詳情中…
-
案例 A861C9D1
RHINOSHIELD SolidX/ SolidSuit 有沒有 BPA/BPF/BPS?
第 1 次嘗試 · 已完成 20349ms載入詳情中…
-
案例 A8D940E0
要怎麼刪除我的會員帳號?
第 1 次嘗試 · 已完成 26181ms載入詳情中…
-
案例 CBD6417C
Apple Watch 的外殼能吸收多少衝擊力?
第 1 次嘗試 · 已完成 26713ms載入詳情中…
-
案例 0531AA00
請問 RHINOSHIELD AirX 的殼子可以回收嗎?還有 Jujutsu Kaisen 的系列可以選擇嗎?
第 1 次嘗試 · 已完成 45672ms載入詳情中…