跳轉到

搜集回饋

發布 Web Client 後,用戶可以直接在聊天介面上提供回饋,幫助你了解 Agent 的表現並持續改進。

為什麼搜集回饋很重要

真實的用戶回饋是改進 Agent 最寶貴的資源。透過回饋,你可以:

  • 發現 Agent 回答不理想的地方
  • 了解用戶的實際需求和期望
  • 持續優化 Agent 的表現

每一輪發布 → 回饋 → 改進的循環,都會讓你的 Agent 更成熟、更有信心面對更大的受眾。

用戶端:提供回饋

在聊天介面中提供回饋

用戶在使用 Web Client 時,可以在每則 AI 回答下方看到回饋選項。

正面回饋(有幫助)

如果回答有幫助,用戶可以點擊 👍 按鈕來表達滿意:

Web Client 正面回饋

點擊後,系統會記錄這則回答獲得了正面回饋。

待改善回饋

如果回答需要改進,用戶可以點擊「Improve」按鈕:

Web Client 待改善回饋

點擊「Improve」後,會彈出回饋表單:

Web Client 回饋表單

用戶可以在表單中:

  • 描述問題或建議:詳細說明哪裡需要改進(最多 500 字)
  • 說明希望如何改進:提供具體的改進方向

提示

鼓勵用戶提供具體的回饋,例如「回應太長了」、「答案不夠準確」、「希望提供更多範例」等,這樣更有助於改進。

回饋限制

每個訊息只能提供一個回饋。如果用戶已經對某則回答提供過回饋,將無法再次提供。

後台管理:查看回饋

在歷史紀錄中查看回饋

發布後,你可以在後台查看所有用戶提供的回饋:

  1. 進入你的工作空間
  2. 點擊「歷史」分頁
  3. 在歷史紀錄列表中,可以看到每則對話的回饋狀態

歷史紀錄列表中的回饋顯示

在列表中,你可以看到:

  • 👍 圖示:表示有正面回饋
  • 🚩 圖示:表示有待改善的回饋
  • 回饋數量:顯示該對話收到的回饋數量

查看回饋詳情

點擊有回饋的對話紀錄,可以查看完整的回饋內容。

正面回饋詳情

單一對話中的正面回饋

在對話詳情頁面中,你可以看到:

  • 完整的對話內容
  • 用戶點擊「有幫助」的時間
  • 回饋的用戶資訊(如果用戶有登入)

待改善回饋詳情

單一對話中的待改善回饋

對於待改善的回饋,你可以看到:

  • 完整的對話內容
  • 用戶填寫的回饋文字
  • 回饋的時間
  • 回饋的用戶資訊(如果用戶有登入)

篩選回饋

在歷史紀錄頁面的篩選欄中,你可以:

  • 選擇「回饋」篩選條件
  • 查看所有有回饋的對話
  • 分別查看正面回饋或待改善的回饋

這讓你可以快速找出需要改進的對話,優先處理。

利用回饋改進 Agent

收集到回饋後,建議的改進流程:

  1. 分析回饋模式:找出常見的回饋類型

    • 哪些問題經常被提到?
    • 哪些回答風格用戶不喜歡?
    • 哪些資訊用戶覺得不夠?
  2. 建立測試案例:將問題轉化為 Eval Cases

    • 把用戶的問題和期望回答記錄下來
    • 作為未來改進的驗證標準
  3. 調整 Agent:修改 Instruction 或工具設定

    • 根據回饋調整回答風格
    • 補充缺少的資訊來源
    • 優化回答的長度和結構
  4. 驗證改進:透過 Live Test 驗證改進效果

    • 測試類似的問題
    • 確認改進符合預期
  5. 重新發布:改進後重新發布給用戶

    • 持續收集新的回饋
    • 形成持續改進的循環

→ 了解更多:安心迭代

常見問題

用戶可以匿名提供回饋嗎?

不可以。用戶必須登入自己的帳號,才能使用 Agent 並提供回饋。

回饋會保存多久?

回饋會永久保存在歷史紀錄中,方便你隨時查看和分析。

可以匯出回饋資料嗎?

目前回饋資料會顯示在歷史紀錄中,你可以手動查看和分析。未來可能會提供匯出功能。

如何鼓勵用戶提供回饋?

建議在 Agent 的介紹或歡迎訊息中,友善地提醒用戶可以提供回饋,幫助改進服務品質。

回饋會影響 Agent 的回答嗎?

不會。回饋僅用於記錄和分析,不會即時影響 Agent 的回答。你需要根據回饋手動調整 Agent 的設定。