Analyse de votre agent avec des métriques personnalisées (aperçu)

[Cet article fait partie de la documentation en version préliminaire et peut faire l’objet de modifications.]

Utilisez le langage naturel pour définir jusqu’à trois métriques personnalisées que vous souhaitez créer Copilot Studio. Personnalisez les métriques personnalisées de votre agent pour mesurer les résultats de l’agent et l’impact métier sur les messages conversationnels. Affichez graphiquement vos métriques personnalisées sous forme de graphiques en anneau étiquetés sous Métriques personnalisées dans la page Analytics .

Important

Cet article contient la documentation en préversion de Microsoft Copilot Studio et est susceptible d'être modifié.

Les fonctionnalités en version préliminaire ne sont pas destinées à une utilisation en production et peuvent être restreintes. Ces fonctionnalités sont disponibles avant une publication officielle afin que vous puissiez y accéder en avant-première et fournir des commentaires.

Si vous créez un assistant prêt pour la production, consultez Vue d’ensemble de Microsoft Copilot Studio.

Proposition de valeur clé

Cette fonctionnalité utilise l'IA pour générer une instruction qui calcule les résultats d'une métrique personnalisée définie par vous grâce au langage naturel. La métrique s’applique à un échantillonnage des données de message conversationnel (session). Vous pouvez ajuster et itérer sur la métrique avant de l’enregistrer dans votre agent. Créez jusqu’à trois métriques personnalisées par agent. Vous pouvez tester des métriques à l’aide d’exemples de données de session et passer en revue les résultats à l’aide du raisonnement intégré. Vous pouvez ensuite affiner les métriques pour mieux refléter les résultats et l’impact de l’entreprise.

Créer une mesure personnalisée

  1. Dans la page Analytique de votre agent, sélectionnez Métriques personnalisées au-dessus de la carte Résumé .

    Capture d’écran du bouton Métriques personnalisées sur la page Analytics.

  2. Dans Créer une métrique personnalisée, décrivez ce que vous souhaitez mesurer en langage brut, en termes de résultats que vous souhaitez suivre dans toutes les conversations.

    Capture d’écran de la description de la métrique de « Créer une métrique personnalisée ».

  3. Pour chaque résultat possible souhaité pour la métrique que vous avez définie, ajoutez une catégorie de résultats et décrivez comment l’IA doit reconnaître quand ce résultat de métrique se produit.

    Note

    • Pour chaque métrique, vous pouvez définir jusqu’à 10 catégories de résultats.
    • Tous les résultats de session sans correspondance sont mappés à la catégorie par défaut Autre.

  4. Sélectionnez Suivant.

    L’IA utilise vos descriptions de métriques et de résultats, ainsi que les métadonnées existantes de votre agent, pour créer un prompt. La commande calcule les résultats de la nouvelle métrique en fonction des données de session. La vignette de la nouvelle métrique personnalisée s’affiche sous l’onglet Aperçu .

  5. Affichez un aperçu et itérer sur l’invite de votre métrique personnalisée. L'invite est utilisée pour calculer les résultats des métriques personnalisées.

Afficher un aperçu et itérer sur l'invite de votre métrique personnalisée

Utilisez la fonctionnalité d’aperçu des métriques personnalisées pour affiner l’invite de votre métrique. Lorsque vous testez votre métrique personnalisée dans le panneau Créer une métrique personnalisée , la métrique s’appuie sur des données provenant d’un échantillonnage allant jusqu’à 20 sessions.

  1. Dans la première page de Créer une métrique personnalisée, sélectionnez Suivant.

  2. Sélectionnez Aperçu pour afficher l’apparence de votre métrique personnalisée lorsqu’elle s’affiche graphiquement sur une vignette.

    Capture d’écran de la préversion de vignette de métrique personnalisée.

  3. Sélectionnez Résultats pour afficher une liste de résultats pour les données échantillonées et une description du raisonnement de l’IA pour chaque résultat.

    Capture d’écran des résultats de métrique personnalisés à partir d’exemples de données.

  4. Évaluez si le raisonnement et les résultats sont corrects.

  5. Sélectionnez Invite pour afficher une description de la compréhension de l’IA de ce que vous souhaitez que la métrique personnalisée mesure et calcule et avec les catégories de résultats. L’onglet Invite fournit une transparence et un aperçu de la logique sous-jacente utilisée pour générer les résultats.

    Capture d’écran de l’onglet Invite de « Créer une métrique personnalisée » montrant l’invite générée par l’IA.

  6. Si vous souhaitez paramétrer votre invite pour fournir des résultats plus précis ou plus pertinents, apportez des ajustements aux entrées que vous avez initialement fournies sur la première page du panneau Créer une métrique personnalisée . Puis retestez l’invite ajustée avec les données d'échantillon.

  7. Sélectionnez Enregistrer la métrique.

    La nouvelle vignette de métrique personnalisée apparaît dans la page Analytics sous Métriques personnalisées.

    Une fois la métrique créée, il existe un calcul unique de la sortie de la nouvelle métrique en fonction des données de session des sept derniers jours. Ce calcul initial peut prendre un certain temps, en fonction du nombre de sessions dont dispose l’agent. Après le calcul initial, il existe un calcul quotidien de la sortie de votre métrique en fonction des données des sessions du dernier jour. Le calcul quotidien se produit la nuit dans votre fuseau horaire et conserve votre métrique à jour.

    Tous les calculs, à la fois les calculs initiaux et nocturnes, pour les métriques personnalisées sont effectués sur un échantillon des sessions et non sur toutes les sessions dans la période.

Supprimer une métrique personnalisée

  1. Dans la page Analytics de votre agent, dans la vignette de métrique personnalisée que vous souhaitez supprimer, sélectionnez les trois points (...), puis sélectionnez Supprimer.

  2. Dans la boîte de dialogue de confirmation, sélectionnez Supprimer.

  • Last updated on