產出 #768
env=production · 魔法科學班|AI 課程顧問 (8e144b8e-2bb5-470b-9479-abd0221f1683) · eval_kind=mixed_qa
已完成
10 / 10
10
1 / 6
$0.0089
↑64515 / ↓2773
MISSED
5 個 scenario 未被任何 case 涵蓋:
3256, 3255, 3803, 3799, 3802。可以重新派發、增加 N 來補。
SUITE
✅ 已寫入 EvalSuite auto-8e144b8e-r1-054000723。
案例明細(12 筆 — 含已寫入、被拒、retry 軌跡)
-
已寫入 EvalSuite 直接問答來源素材(點擊查看完整內容)
-
• 知識:距離太遠了 know_325067
Q: 距離太遠了 A: 我們目前正在努力增加分點喔~ 可以留言許願,有機會會在您許願的地方開設新的分點喔~
Q有可能在我住所附近開新分點嗎A有機會會在您許願的地方開設新的分點喔~ -
-
Judge LLM 拒絕 直接問答來源素材(點擊查看完整內容)
-
• 工具:get_history 3
get_history (get_history) Retrieve earlier conversation traces (before the recent 7 rounds). No params = condensed summaries; with trace/end_trace = full content.
Q可以檢索幾輪之前的對話?A可以檢索最近 7 輪之前的對話。原因- The answer states '最近 7 輪之前的對話', which implies retrieving conversations from 7 rounds ago, but the source indicates it can retrieve conversations before the recent 7 rounds, not specifically from 7 rounds ago.
- Judge LLM 認為答案與資料來源有事實出入
-
-
Judge LLM 拒絕 直接問答 第 2 次嘗試來源素材(點擊查看完整內容)
-
• 工具:get_history 3
get_history (get_history) Retrieve earlier conversation traces (before the recent 7 rounds). No params = condensed summaries; with trace/end_trace = full content.
Q可以檢索幾輪之前的對話?A可以檢索最近 7 輪之前的對話。原因- The answer incorrectly states '最近 7 輪之前的對話' instead of '最近 7 輪之前的對話' which implies retrieval of conversations older than 7 rounds.
-
-
已寫入 EvalSuite 直接問答 第 3 次嘗試來源素材(點擊查看完整內容)
-
• 工具:get_history 3
get_history (get_history) Retrieve earlier conversation traces (before the recent 7 rounds). No params = condensed summaries; with trace/end_trace = full content.
Q可以調出之前的對話嗎A可以透過 get_history 來檢索最近 7 輪之前的對話,沒有參數會顯示簡要摘要。 -
-
已寫入 EvalSuite 直接問答來源素材(點擊查看完整內容)
-
• 對話流程:孩童受傷腳本 6147
孩童受傷腳本 ## 1. 觸發條件 - 當使用者反應:「學生小孩受傷、學生小孩燙傷、學生小孩噴到、受傷疑慮、小朋友碰到、小朋友用到、小朋友摸到、小朋友撞到、小朋友跌倒、小朋友流血」時,觸發此回覆規則。 ## 2. 資訊收集 ### 小朋友資料搜集 — 蒐集孩童的聯絡資料 - 小朋友姓名 [text] (必填): 提供家長孩童的名字 - 小朋友年齡 [number]: 請家長提供小孩的年紀 - 電話號碼 [phone] (必填): 請家長提供電話號碼 - 受傷情況 [text] (必填): 使用者描述孩童受傷的狀況 - 孩童與家長的關係 [text] (必填): 描述要聯繫的對象是爸爸還是媽媽 ## 4. 回覆規則 - 一、 觸發條件 當使用者反應以下關鍵字時觸發: 「學生/小孩受傷、燙傷、噴到(化學品/熱水)、碰撞、受傷疑慮、流血」。 二、 回覆規則 (Response Rules) 【執行邏輯:第一時間安撫與關懷 → 責任聲明(保險) → 標準化資訊收集 → 優先處理承諾】 Step 1: 優先關懷與同理心開場 「非常抱歉聽到這個消息,孩子的安全與健康一直是我們魔法科學最重視的事,我們對此深表關心。請您先別擔心,我們會第一時間全力協助處理。」 Step 2: 說明保險保障(建立安心感) 「為了保障每位學生的安全權益,校方均備有完善的『公共意外責任險』作為保障後盾。後續我們將由專人根據孩子的具體受傷狀況,提供必要的協助與相關流程諮詢。」 Step 3: 事故資訊搜集 (初步通報) 「為了讓負責老師能第一時間掌握狀況,並協助保障孩子的相關權益,請您先幫我們提供以下資訊 a. 孩童姓名: b. 孩童年紀: c. 聯繫者電話: d. 聯繫者與學生的關係: e. 事故受傷狀況描述:」 Step 4: 轉真人與優先處理承諾 當使用者提供完Step3資訊時回覆以下內容: 「謝謝您的耐心提供。我們已將您的需求列為**『最優先處理項目』**,並立即通知隨班導師與主管。導師將於最短時間內回電聯繫您並提供後續協助。有任何進一步疑慮,請隨時告知我們。」
Q小朋友受傷怎麼處理?A非常抱歉聽到這個消息,孩子的安全與健康一直是我們魔法科學最重視的事,我們對此深表關心。請您先別擔心,我們會第一時間全力協助處理。為了保障每位學生的安全權益,校方均備有完善的『公共意外責任險』作為保障後盾。後續我們將由專人根據孩子的具體受傷狀況,提供必要的協助與相關流程諮詢。請您先幫我們提供以下資訊: a. 孩童姓名: b. 孩童年紀: c. 聯繫者電話... -
-
已寫入 EvalSuite 直接問答來源素材(點擊查看完整內容)
-
• 知識:可以退費嗎? know_325032
Q: 可以退費嗎? A: 若因為任何原因無法出席課程,請事先提出請假調課申請,我們提供免費的調課服務(常態課調換單堂課)。 若時間仍無法將依請假類別,依定型化契約退費。
Q退費的規定是什麼呢?A退費將依請假類別,依定型化契約的規定進行。 -
-
已寫入 EvalSuite 直接問答來源素材(點擊查看完整內容)
-
• 知識:目前小三課程有哪些? know_325063
Q: 目前小三課程有哪些? A: 小學三年級可以參考以下課程連結 https://mofascience.com/product/2026-spring-course-g23/
Q小學三年級可以參加哪些課程?A小學三年級可以參考以下課程連結 https://mofascience.com/product/2026-spring-course-g23/ -
-
已寫入 EvalSuite 直接問答來源素材(點擊查看完整內容)
-
• 知識:有線上課程嗎? know_325054
Q: 有線上課程嗎? A: 因為實驗需要小孩親自動手操作 所以目前沒有提供線上課程喔
Q你們有線上課程嗎?A目前沒有提供線上課程喔,因為實驗需要小孩親自動手操作。 -
-
已寫入 EvalSuite 直接問答來源素材(點擊查看完整內容)
-
• 知識:夏令營的接送時間 know_325060
Q: 夏令營的接送時間 A: 我們上課時間是9:00~17:00 最早可以8:00送來 最晚可以18:00接送 如有偶發特殊情況可以私訊我們處理喔
Q夏令營接送時間是幾點?A我們上課時間是9:00~17:00,最早可以8:00送來,最晚可以18:00接送。如有偶發特殊情況可以私訊我們處理喔。 -
-
已寫入 EvalSuite 直接問答來源素材(點擊查看完整內容)
-
• 知識:你們有其他優惠嗎? know_325035
Q: 你們有其他優惠嗎? A: "我們有新生推薦優惠金呦~ 把握時間填寫表單, 即可拿到優惠喔! 推薦新生雙方都可以享有折抵金額"
Q有優惠要填表單嗎A有,新生推薦優惠需要填寫表單才能獲得,填寫後即可拿到優惠。 -
-
已寫入 EvalSuite 直接問答來源素材(點擊查看完整內容)
-
• 知識:大安教室附近有停車場嗎? know_325047
Q: 大安教室附近有停車場嗎? A: 大安教室附近有:羅斯福路三停車場、Hi PARKING 台北耕莘文教院停車場、新南停車場
Q大安教室附近有 Hi PARKING 嗎?A大安教室附近有 Hi PARKING 台北耕莘文教院停車場。 -
-
已寫入 EvalSuite 直接問答來源素材(點擊查看完整內容)
-
• 知識:目前小五課程有哪些? know_325065
Q: 目前小五課程有哪些? A: 小學五年級可以參考以下連結 https://mofascience.com/product/2026-spring-course-g45/
Q小學五年級的課程有哪些?A小學五年級可以參考以下連結:https://mofascience.com/product/2026-spring-course-g45/ -