フィードバックを収集
Webクライアントを公開した後、ユーザーはチャットインターフェースで直接フィードバックを提供でき、エージェントのパフォーマンスを理解し、継続的に改善するのに役立ちます。
フィードバック収集が重要な理由
実際のユーザーフィードバックは、エージェントを改善するための最も貴重なリソースです。フィードバックを通じて、以下が可能になります:
- エージェントの回答が不十分な箇所を発見
- ユーザーの実際のニーズと期待を理解
- エージェントのパフォーマンスを継続的に最適化
公開 → フィードバック → 改善のサイクルを繰り返すたびに、エージェントはより成熟し、より大きなオーディエンスに対応できる自信がつきます。
ユーザー側: フィードバックを提供
チャットインターフェースでフィードバックを提供
Webクライアントを使用する際、ユーザーは各AI回答の下にフィードバックオプションを見ることができます。
ポジティブなフィードバック(役に立った)
回答が役に立った場合、ユーザーは👍ボタンをクリックして満足を表現できます:
クリック後、システムはこの回答がポジティブなフィードバックを受けたことを記録します。
改善フィードバック
回答に改善が必要な場合、ユーザーは「Improve」ボタンをクリックできます:
「Improve」をクリックすると、フィードバックフォームがポップアップします:
ユーザーはフォームで以下ができます:
- 問題や提案を記述: 改善が必要な点を詳しく説明(最大500文字)
- 改善方法を説明: 具体的な改善方向を提供
ヒント
「回答が長すぎる」「答えが不正確」「もっと例を提供してほしい」など、具体的なフィードバックを提供するようユーザーに促してください。これは改善により役立ちます。
フィードバック制限
各メッセージは1つのフィードバックのみ受け取ることができます。ユーザーがある回答に既にフィードバックを提供した場合、再度提供することはできません。
管理側: フィードバックを表示
履歴でフィードバックを表示
公開後、管理パネルですべてのユーザーフィードバックを表示できます:
- ワークスペースに入る
- 「履歴」タブをクリック
- 履歴リストで、各会話のフィードバックステータスを確認できます
リストで以下が確認できます:
- 👍 アイコン: ポジティブなフィードバックを示す
- 🚩 アイコン: 改善フィードバックを示す
- フィードバック数: その会話が受け取ったフィードバック数を表示
フィードバック詳細を表示
フィードバックがある会話記録をクリックすると、完全なフィードバック内容を表示できます。
ポジティブなフィードバック詳細
会話詳細ページで以下が確認できます:
- 完全な会話内容
- ユーザーが「役に立った」をクリックした時刻
- フィードバックユーザー情報(ユーザーがログインしている場合)
改善フィードバック詳細
改善フィードバックについては、以下が確認できます:
- 完全な会話内容
- ユーザーが記入したフィードバックテキスト
- フィードバック時刻
- フィードバックユーザー情報(ユーザーがログインしている場合)
フィードバックをフィルタリング
履歴ページのフィルターバーで、以下ができます:
- 「フィードバック」フィルター条件を選択
- フィードバックがあるすべての会話を表示
- ポジティブなフィードバックまたは改善フィードバックを個別に表示
これにより、改善が必要な会話を素早く見つけ、優先的に処理できます。
フィードバックを使用してエージェントを改善
フィードバックを収集した後、推奨される改善プロセス:
-
フィードバックパターンを分析: 一般的なフィードバックタイプを特定
- どの問題が頻繁に言及されているか?
- ユーザーがどの回答スタイルを好まないか?
- ユーザーがどの情報が不足していると感じているか?
-
テストケースを構築: 問題を評価ケースに変換
- ユーザーの質問と期待される回答を記録
- 将来の改善の検証基準として使用
-
エージェントを調整: 指示またはツール設定を変更
- フィードバックに基づいて回答スタイルを調整
- 不足している情報源を補完
- 回答の長さと構造を最適化
-
改善を検証: ライブテストを通じて改善効果を検証
- 類似の質問をテスト
- 改善が期待通りであることを確認
-
再公開: 改善後、ユーザーに再公開
- 新しいフィードバックを継続的に収集
- 継続的な改善サイクルを形成
→ 詳細: 安心して反復
よくある質問
ユーザーは匿名でフィードバックを提供できますか?
いいえ。ユーザーは自分のアカウントでログインしないと、エージェントを使用したりフィードバックを提供したりできません。
フィードバックはどのくらい保存されますか?
フィードバックは履歴に永久に保存され、いつでも表示・分析できます。
フィードバックデータをエクスポートできますか?
現在、フィードバックデータは履歴に表示され、手動で表示・分析できます。将来的にエクスポート機能が提供される可能性があります。
ユーザーにフィードバックを提供するよう促すにはどうすればよいですか?
エージェントの紹介またはウェルカムメッセージで、サービス品質の向上に役立つフィードバックを提供できることを友好的に知らせることをお勧めします。
フィードバックはエージェントの回答に影響しますか?
いいえ。フィードバックは記録と分析のみに使用され、エージェントの回答に即座に影響を与えません。フィードバックに基づいてエージェントの設定を手動で調整する必要があります。