コパイロットの成果を測定する

  • [アーティクル]

重要

Power Virtual Agents 機能は、生成 AI への多大な投資と Microsoft Copilot 全体の統合の強化により、現在 Microsoft Copilot Studio の一部となっています。

ドキュメントやトレーニング コンテンツが更新される間、一部の記事やスクリーンショットで Power Virtual Agents が参照される場合があります。

会話のエンゲージメントと成果を追跡することは、分析ダッシュボードでコパイロットのパフォーマンス指標を測定し、改善点を見つけるために非常に重要です。

重要

エンドユーザーとコパイロット間の Copilot Studio 会話により、1 つまたは複数の分析セッションが生成されます。 すべての分析セッションは エンゲージメントに寄与した または エンゲージメントに寄与していない です。

分析セッションの結果を理解する

分析セッションにはそれぞれ、次の結果があります。

  • エンゲージメントに寄与していない セッションの結果は、常に なし です。

  • エンゲージメントに寄与した セッションの結果は次のいずれかになります。

    • 解決済み、
    • エスカレーション済み、
    • 破棄済み。

エンゲージメントと成果

会話分析セッション、エンゲージメントの状態、その結果は、分析ダッシュボード の一部として、または Dataverse の ConversationTranscriptテーブル で利用できます。

エンゲージメント 結果 Definition
エンゲージメントに寄与していない なし (None) エンゲージメントに寄与していない、すべてのセッションの結果は なし です。
エンゲージメントに寄与している エスカレーション済み (HandOff) エスカレーション トピックがトリガーされるか、会話の転送 ノードに到達すると、セッションは エスカレーション済み とみなされます。
エンゲージメントに寄与している 解決済み (Resolved) 会話の終了 トピックがトリガーされ、ユーザーが対話の成功を確認するか (impliedSuccess = FALSE)、応答せずにセッションをタイムアウトさせると (impliedSuccess = TRUE)、セッションは 解決済み とみなされます。
エンゲージメントに寄与している 破棄済み (Abandoned) 参加中のセッションが終了し、解決済み や エスカレーション済み 状態に達しなかった場合、セッションは 破棄 とみなされます。

会話を適切に終了して成果を測定する

エンドユーザーの問題が解決したかどうかを確認できるように (エスカレーションする可能性もある)、会話の終了 トピックで会話を終了することが重要です。

コパイロットが成功を確認すると、エンドユーザー に CSAT 調査が表示され、0-5 のスコアを獲得します。

トピックのロジックに基づいて会話の成果が確実である場合は、成功確認済みとして直接フラグを付けるか、またはエスカレート トピックにリダイレクトできます。

チップ

統合作成キャンバスのコード エディターで、アクションに conversationOutcome を設定できます。 たとえば、確認された成功の場合は conversationOutcome: ResolvedConfirmed、暗黙の成功の場合は conversationOutcome: ResolvedImplied です。