Problemen opsporen: na een wijziging de testsets opnieuw draaien

Les 10 van 11 · Problemen opsporen. Na een wijziging draai je de testsets uit les 4 opnieuw en vergelijk je elk antwoord met de vorige run.

Les 10 van 11 · Problemen opsporen. Na een wijziging draai je de testsets uit les 4 opnieuw en vergelijk je elk antwoord met de vorige run.

Het scenario

Het artikel achter een vreemd antwoord is aangepast, zoals in les 7, en een collega heeft veranderd hoe je AI-agent een bestelling opzoekt. Voordat je je team laat weten dat het klaar is, wil je zeker weten dat de vraag van de klant nu goed wordt beantwoord, en dat er niets anders per ongeluk is veranderd.

Doel: de oplossing bevestigen en bijwerkingen opsporen, met een run die je naast de vorige kunt leggen.

Wat je nodig hebt

• De testsets uit les 4, in dezelfde Chrome waarin je ze maakte.

Stappen

1. Open een test van je AI-agent in de preview en klik op Testsets in de werkbalk. Het paneel staat in Een AI-agent testen met testsets.
2. Klik op Bewerken bij de set voor het onderwerp dat je hebt aangepast. Voeg de vraag van de klant uit het ticket toe, met het juiste feit onder Antwoord bevat, als je dat in les 7 nog niet deed, en klik op Opslaan.
3. Open de resultaten van de set en klik op Opnieuw starten. De run begint een nieuw testgesprek, net als de vorige keer.

4. Vergelijk. Een antwoord dat afwijkt van de vorige run, is gemarkeerd als Gewijzigd, met de weggehaalde en toegevoegde woorden gemarkeerd. Bij een antwoord dat niet veranderde, staat Hetzelfde antwoord als de vorige run., gevolgd door de oude uitkomst als die anders was, zoals Was: Mislukt.

   

5. Bekijk elke markering Gewijzigd, niet alleen de mislukte berichten. Een gewijzigd antwoord op een vraag waar je niet aan kwam, is de bijwerking die je zoekt.
6. Wil je vergelijken met een oudere run, kies die dan in de lijst Run. De laatste 10 runs van elke set blijven bewaard.
7. Bij een bericht dat mislukt, klik je op Openen in gesprekslogboeken en zoek je het uit zoals in les 7, met Een gesprek uit het gesprekslogboek bekijken in de preview en De inspector gebruiken.
8. Draai elke set na elke wijziging, voordat je het team laat weten dat het klaar is.

Waarom dit belangrijk is

• Een wijziging in één artikel of procedure kan antwoorden op andere onderwerpen veranderen. Alle sets draaien laat dat zien, bericht voor bericht, in dezelfde lijst als de vorige keer, zodat je het vindt voordat je klanten het merken.
• Schrijft je AI-agent zijn antwoorden met generatieve AI, dan kan de formulering per run verschillen. Een markering Gewijzigd toont dan de nieuwe formulering, en Antwoord bevat zegt of het feit er nog in staat.
• Een overdracht die verschijnt of verdwijnt, telt ook als wijziging: het resultaat meldt De overdracht is gewijzigd.