Exercice – Détection du fondement
L’implémentation d’un agent d’assistance à la clientèle basé sur l’intelligence artificielle change la donne pour Contoso Camping Store ! Les clients peuvent demander à l’agent de support des recommandations et des conseils sur l’utilisation des produits Contoso Camping Store. Toutefois, nous voulons vérifier que le modèle fournit des réponses qui sont fondées dans le matériau source transmis dans le modèle.
Nous allons tester les invites avec le modèle pour détecter le fondement de sa sortie.
Détection d’une sortie fondée
Nous pouvons fournir une source fondée, envoyer une invite et fournir un achèvement pour tester la capacité du modèle à détecter une sortie fondée. Essayons ce test avec le coût d’une tente.
Sur la page Sécurité du contenu, sélectionnez Détection de l’ancrage.
Dans la section Choisir une tâche, sélectionnez Q&R.
Dans la section Test, saisissez les éléments suivants dans chaque zone :
Sources de fondement – La tente coûte 250 $
Invite – coût de tente ?
Achèvement – 250 $
Sélectionnez Exécuter le test.
Étant donné que la Source de fondement et la sortie de Saisie semi-automatique sont alignées, le modèle peut détecter que la sortie est fondée.
Détection d’une sortie non fondée
Comme les modèles peuvent parfois fournir des informations incorrectes, nous voulons être sûrs que le modèle peut détecter si un résultat est non fondé. Comme dans l’exemple précédent, nous pouvons tester une sortie non fondée, mais à la place, nous fournissons une Saisie semi-automatique qui contredit ou manque d’alignement avec la Source fondée.
Dans la section Test, saisissez les éléments suivants dans chaque zone :
Sources de fondement – La tente coûte 250 $
Invite – coût de tente ?
Achèvement – 350 $
Sélectionnez Exécuter le test.
Étant donné que la Saisie semi-automatique fournit le coût incorrect d’une tente, la sortie n’est pas fondée et le modèle peut le détecter.
Génération de sortie résumée
Pour un agent de support client, nous voulons nous assurer que le modèle peut générer une sortie résumée. Par exemple, si un client fournit un long rapport sur les problèmes qu’il rencontre avec un produit. Nous souhaitons vérifier que le modèle récapitule correctement le contexte dans la demande du client et fournit en retour une sortie résumée fondée. Nous pouvons tester le fondement en transmettant l’enquête du client en tant que Source de Fondement et en fournissant un Achèvement basé sur le contexte de l’enquête.
Dans la section Choisir une tâche, sélectionnez Résumé.
Dans la section Test, saisissez les éléments suivants dans chaque zone :
Sources de fondement - J’ai récemment acheté trois tentes TrailMaster X4 pour une virée camping en famille. Dans l’ensemble, ils ont bien fonctionné, mais j’ai tout de même remarqué quelques problèmes mineurs. Les fermetures à glissière sur l’une des tentes semblaient un peu collantes, et il y avait une petite déchirure dans le sac de rangement. Ce n’est rien de grave, mais je me suis dit que je devais attirer votre attention sur ces quelques problèmes.
Achèvement – J’ai acheté 4 tentes qui ont bien fonctionné, sans problème.
Sélectionnez Exécuter le test.
Étant donné que le client a acheté 3 tentes et a rencontré quelques problèmes mineurs avec les tentes, l’Achèvement n’est pas fondé. Le modèle a pu détecter que la sortie résumée n’était pas fondée.
