執行 #239
TransBiz AI 小幫手 (bulk R1) → production-baseline
- 狀態
- 已完成
- 案例
- 30
- 開始時間
- 16 May 12:34
- 耗時
- 296.5s
Cost & Tokens
$0.3567
Total Bot Cost · USD
41.1%
Prompt Cache Hit
- cost per case
- $0.0119
- cost per 1k tokens
- $0.0016
- input tokens
- 217,257
- output tokens
- 7,029
- cached tokens — prompt-cache hit
- 89,344
- Total Tokens
- 224,286
- cost per correct
- $0.0018
- pass rate
- 86.7%
- 26 / 30
- judge cost
- $0.0462
設定快照（reproducibility）
Bot 設定快照
-
addfc40e-d5e6-46bd-b481-18e19740caa1
Judge 設定快照
model: gpt-4o-mini
T=0.0
max=4096
prompt: v1
30 / 30
0
3
3360 ms
$0.3567
224,286
$0.0462
326,384
知識庫精準度
知識庫精準度
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=10
F1 18.2% · 相關率 22.5% · 精確 10.0%
10 / 10 適用
·
2 提示
不亂編造
平均
faithfulness
100.0%
[100.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
94.0%
[91.0% – 97.0%] · n=10
10 / 10 適用
-
案例 E66C918E
亞馬遜開通 ACCS 服務是什麼意思？
第 1 次嘗試 · 已完成 19238ms載入詳情中…
-
案例 203EAF2A
在 Amazon 上賣特殊商品要怎麼申請批准？
第 1 次嘗試 · 已完成 22650ms載入詳情中…
-
案例 17285C00
影片中有介紹 Amazon 的金物流處理方式嗎?
第 1 次嘗試 · 已完成 12463ms載入詳情中…
-
案例 232CF5F8
怎麼註冊美國商標?
第 1 次嘗試 · 已完成 21133ms載入詳情中…
-
案例 AC2ED1C0
可以針對我的現況給建議嗎?
第 1 次嘗試 · 已完成 17103ms載入詳情中…
-
案例 0239AFDC
第一階段的免費評估包含哪些內容？
第 1 次嘗試 · 已完成 16114ms載入詳情中…
-
案例 125AE0FA
請問在 Amazon 上可以賣什麼商品呢？
第 1 次嘗試 · 已完成 27494ms載入詳情中…
-
案例 B0D14F1F
使用 Amazon 物流 FBA 退貨時需要付費嗎?
第 1 次嘗試 · 已完成 19989ms載入詳情中…
-
案例 A4E3940F
開立亞馬遜賣家帳戶需要提供什麼信用卡?
第 1 次嘗試 · 已完成 12045ms載入詳情中…
-
案例 93E126EB
請問可以透過哪些平台把產品賣到全世界？
第 1 次嘗試 · 已完成 17888ms載入詳情中…
情境調用與完成
情境調用與完成
維度總表
走對流程
召回
scenario
90.0%
[70.0% – 100.0%] · n=10
F1 80.0% · 召回 90.0% · 精確 75.0%
10 / 10 適用
用對工具
召回
tool_usage
50.0%
[16.7% – 83.3%] · n=6
F1 50.0% · 召回 50.0% · 精確 50.0%
6 / 10 適用
答得到位
平均
answer_quality
80.0%
[64.0% – 93.3%] · n=10
10 / 10 適用
-
案例 FBB807CB
隱私政策包含哪些內容？
第 1 次嘗試 · 已完成 16773ms載入詳情中…
-
案例 ADA8A9E6
我的訂單現在狀態是什麼?
第 1 次嘗試 · 已完成 15063ms載入詳情中…
-
案例 807D5917
退貨的政策是什麼？
第 1 次嘗試 · 已完成 16809ms載入詳情中…
-
案例 EE9239D9
我想要預約諮詢，手機號碼需要什麼格式?
第 1 次嘗試 · 已完成 14236ms載入詳情中…
-
案例 949C6712
你們有什麼免費資源可以下載嗎？
第 1 次嘗試 · 已完成 12854ms載入詳情中…
-
案例 0E04B969
我想要預約免費諮詢，請問需要幾分鐘的時間？
第 1 次嘗試 · 已完成 12867ms載入詳情中…
-
案例 ED9D70D0
商品退回後怎麼處理？
第 1 次嘗試 · 已完成 21229ms載入詳情中…
-
案例 971B5581
請問可以查詢我的訂單狀態嗎？
第 1 次嘗試 · 已完成 12243ms載入詳情中…
-
案例 7B3D7215
查詢我的訂單需要提供什麼個人資訊?
第 1 次嘗試 · 已完成 14741ms載入詳情中…
-
案例 F9FE74CB
有沒有什麼免費的教學資源可以下載?
第 1 次嘗試 · 已完成 11277ms載入詳情中…
對話素養（混合問答）
對話素養（混合問答）
維度總表
找對資料
召回
retrieval
100.0%
[100.0% – 100.0%] · n=8
F1 18.2% · 相關率 27.5% · 精確 10.0%
8 / 10 適用
不亂編造
平均
faithfulness
91.7%
[80.0% – 100.0%] · n=10
10 / 10 適用
答得到位
平均
answer_quality
87.7%
[74.7% – 97.3%] · n=10
10 / 10 適用
-
案例 B4A0522C
可以根據什麼資訊搜尋訂單詳情?
第 1 次嘗試 · 已完成 12956ms載入詳情中…
-
案例 69A137E8
我預約諮詢需要提供什麼資訊?
第 1 次嘗試 · 已完成 13990ms載入詳情中…
-
案例 904A4EF4
現在個人賣家怎麼在 Amazon 申請新帳號?
第 1 次嘗試 · 已完成 20709ms載入詳情中…
-
案例 8E7BEFA6
在 Amazon 賣東西有哪些特殊品類的規定？
第 1 次嘗試 · 已完成 18810ms載入詳情中…
-
案例 7B958642
請問 Amazon 的成交抽成大約是多少？
第 1 次嘗試 · 已完成 13185ms載入詳情中…
-
案例 B3AB6D71
請問使用亞馬遜賣家貨幣轉換器 ACCS 轉帳至台灣帳戶的匯率怎麼樣？
第 1 次嘗試 · 已完成 17004ms載入詳情中…
-
案例 987AE59E
跨境電商可以用什麼方式進行交易?
第 1 次嘗試 · 已完成 20742ms載入詳情中…
-
案例 9BB51FFC
開立亞馬遜賣家帳戶需要提供什麼文件啊
第 1 次嘗試 · 已完成 17892ms載入詳情中…
-
案例 2262A838
為什麼我在 Amazon 賣特殊商品時要聯繫賣家支援請求批准？
第 1 次嘗試 · 已完成 19754ms載入詳情中…
-
案例 BEF1B0A1
開 Amazon 全球開店需要繳幾個賣家月費？
第 1 次嘗試 · 已完成 11928ms載入詳情中…