執行 #201
REAL POWER (bulk R1) → production-baseline
- 狀態
- 已完成
- 案例
- 30
- 開始時間
- 16 May 12:15
- 耗時
- 927.4s
Cost & Tokens
$0.1970
Total Bot Cost · USD
70.7%
Prompt Cache Hit
- cost per case
- $0.0066
- cost per 1k tokens
- $0.0012
- input tokens
- 162,141
- output tokens
- 5,566
- cached tokens — prompt-cache hit
- 114,560
- Total Tokens
- 167,707
- cost per correct
- $0.0012
- pass rate
- 83.3%
- 25 / 30
- judge cost
- $0.0297
設定快照(reproducibility)
Bot 設定快照
-
35d312f3-dcbd-45d8-8351-f3618e8ba67a
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
30 / 30
0
5
3123 ms
$0.1970
167,707
$0.0297
219,524
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=10
F1 33.3% · 相關率 19.0% · 精確 20.0%
10 / 10 適用
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
98.7%
[96.7% – 100.0%] · n=10
10 / 10 適用
-
案例 0EF9D1ED
瑞威寵糧到底要吃完一包再換嗎
第 1 次嘗試 · 已完成 21004ms載入詳情中…
-
案例 BE05EA51
3號海洋魚貝舒敏護膚適合什麼毛孩?
第 1 次嘗試 · 已完成 24541ms載入詳情中…
-
案例 753C6782
狗狗腸胃敏感要選什麼配方?
第 1 次嘗試 · 已完成 13701ms載入詳情中…
-
案例 E226101B
2號森林燉雞適合消化敏感的毛孩嗎?
第 1 次嘗試 · 已完成 30696ms載入詳情中…
-
案例 4F816250
熟齡犬的 5號配方有什麼特點?
第 1 次嘗試 · 已完成 24501ms載入詳情中…
-
案例 C719CFAC
6號田園野虻體態關節適合什麼毛孩?
第 1 次嘗試 · 已完成 11941ms載入詳情中…
-
案例 7765BE81
全齡寵糧可以針對什麼需求選配方?
第 1 次嘗試 · 已完成 16569ms載入詳情中…
-
案例 E3133507
4號河岸雁鴨適合什麼毛孩?
第 1 次嘗試 · 已完成 13427ms載入詳情中…
-
案例 5FE0BE1E
瑞威寵糧的配方有什麼特別之處?
第 1 次嘗試 · 已完成 22075ms載入詳情中…
-
案例 C434A74E
5號湖畔水鱉有心臟保健功能嗎?
第 1 次嘗試 · 已完成 12336ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
90.0%
[70.0% – 100.0%] · n=10
F1 86.7% · 召回 90.0% · 精確 85.0%
10 / 10 適用
用對工具
召回
tool_usage
80.0%
[50.0% – 100.0%] · n=10
F1 80.0% · 召回 80.0% · 精確 80.0%
10 / 10 適用
答得到位
平均
answer_quality
65.0%
[48.3% – 80.3%] · n=10
10 / 10 適用
-
案例 FDEE5DF3
你們的服務時間是什麼時候?
第 1 次嘗試 · 已完成 14682ms載入詳情中…
-
案例 4338A5BD
我該怎麼選擇幼犬和全齡狗狗的飼料?
第 1 次嘗試 · 已完成 20023ms載入詳情中…
-
案例 CD71B83F
你們有沒有活動或優惠的資訊呢?
第 1 次嘗試 · 已完成 21268ms載入詳情中…
-
案例 FEA14086
如果我遇到技術問題,像是無法使用或登錄錯誤,應該怎麼處理?
第 1 次嘗試 · 已完成 15998ms載入詳情中…
-
案例 616B1251
幼犬的飼料功能和價格大概是多少?
第 1 次嘗試 · 已完成 22363ms載入詳情中…
-
案例 3715B416
訂單查詢,要提供什麼資訊?
第 1 次嘗試 · 已完成 13414ms載入詳情中…
-
案例 7FFEEC4C
請問全犬糧和幼犬糧有什麼差別?
第 1 次嘗試 · 已完成 15220ms載入詳情中…
-
案例 72872B53
我的訂單編號是 TS100001,可以幫我查詢訂單進度嗎?
第 1 次嘗試 · 已完成 7469ms載入詳情中…
-
案例 65C0C11F
我的訂單進度查詢怎麼做?
第 1 次嘗試 · 已完成 10280ms載入詳情中…
-
案例 ADCB1A93
請問狗狗如果遇到技術問題,比如無法使用或設定出錯,該怎麼辦呢?
第 1 次嘗試 · 已完成 16451ms載入詳情中…
對話素養(混合問答)
對話素養(混合問答)
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=9
F1 33.3% · 相關率 20.0% · 精確 20.0%
9 / 10 適用
不亂編造
平均
faithfulness
90.0%
[70.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
93.7%
[87.3% – 98.7%] · n=10
10 / 10 適用
-
案例 B82BE1B2
狗狗腸胃敏感要選什麼配方?
第 1 次嘗試 · 已完成 30453ms載入詳情中…
-
案例 7F1B8E70
6號田園野虻體態關節適合什麼毛孩?
第 1 次嘗試 · 已完成 14497ms載入詳情中…
-
案例 30AB7DED
什麼情況下可以轉接真人客服?
第 1 次嘗試 · 已完成 14033ms載入詳情中…
-
案例 B63EC9BA
全齡寵糧可以根據什麼挑選配方?
第 1 次嘗試 · 已完成 19643ms載入詳情中…
-
案例 F89A63C1
毛孩有健康問題,可以不用吃藥嗎
第 1 次嘗試 · 已完成 12184ms載入詳情中…
-
案例 4102898E
瑞威寵糧的配方有使用水解技術嗎?
第 1 次嘗試 · 已完成 13915ms載入詳情中…
-
案例 BEE50FF8
獸醫建議吃處方飼料後,什麼時候可以換回日常飼料?
第 1 次嘗試 · 已完成 20207ms載入詳情中…
-
案例 99A0A4F6
瑞威寵糧應該吃完一包再換嗎
第 1 次嘗試 · 已完成 12067ms載入詳情中…
-
案例 AAF56552
濕食餵食法可以包括哪些食物?
第 1 次嘗試 · 已完成 13060ms載入詳情中…
-
案例 C8ABDF2A
請問熟齡犬或大型犬需要哪些保健食品?
第 1 次嘗試 · 已完成 15755ms載入詳情中…