Welke testvragen stel je opnieuw na een wijziging?
Dit is de situatie: Je gebruikt al een paar weken een eigen Agent die vragen over het verlofbeleid van je team beantwoordt. Voor het testen heb je vier vaste vragen bewaard. Nu wil je iets aanpassen, en je vraagt je af welke van die vier vragen je daarna opnieuw moet stellen.
Wat je leert: Je bepaalt na een wijziging aan je eigen Agent welke testvragen je opnieuw stelt.
Je opdracht bij deze situatie
Voorspel bij elke wijziging welke van je vier testvragen een ander antwoord kunnen krijgen.
Lees het materiaal hieronder, voorspel wat er verandert en bekijk daarna de uitkomsten.
Wat je moet weten
Een Agent is een eigen versie van Copilot voor één soort taak. Je stelt hem in Agent Builder in met een naam, een pictogram, instructies en kennisbronnen. De instructies zijn zinnen in gewone taal die zeggen wat de Agent doet en hoe hij antwoordt. Een kennisbron is bijvoorbeeld een document waar de Agent zijn antwoorden uit haalt.
In een testvenster kun je de Agent vragen stellen terwijl je hem bouwt of aanpast. Een werkwijze die in deze Snack wordt voorgesteld: bewaar een paar vragen waarvan je het goede antwoord kent. Die vragen heten hier je vaste testvragen; het is geen knop of functie in Agent Builder. Na een wijziging stel je die vragen opnieuw en vergelijk je de antwoorden met eerst.
- Waar
- Agent Builder
- Wat
- Een Agent testen na een wijziging
- Begin hier
- Open je Agent in Agent Builder. Bij 'Configureren' pas je de 'Instructies' en de kennis aan; in het testvenster stel je je testvragen.
Zo doe je dit later in Microsoft 365 Copilot zelf
- Doe dit
- Pas je Agent aan en test hem daarna in het testvenster met een testvraag.
- Toegang
- Voor deze oefening heb je geen Copilot nodig. Of je zelf Agents kunt bouwen en aanpassen, hangt af van je licentie en de instellingen van je organisatie.
Je oefent op deze pagina met fictief materiaal en Copilot blijft dicht.
De casus
Dit zijn je vier vaste testvragen. Daaronder zie je drie wijzigingen die je zou kunnen doen.
Materiaal uit de casus
Je vaste testvragen
Gegevens uit de bron
- Vraag 1
- Hoeveel verlofdagen heb ik per jaar bij een fulltime contract?
- Vraag 2
- Hoe ver vooruit moet ik verlof aanvragen?
- Vraag 3
- Mag ik verlof meenemen naar volgend jaar?
- Vraag 4
- Mijn collega en ik willen in dezelfde week vrij. Wie beslist dan?
Wat er verandert
- Een nieuw pictogram
-
Voorbeeld van een Copilot-antwoord (verzonnen)
Als jullie allebei in dezelfde week verlof aanvragen, beslist de teamleider. Die kijkt naar de bezetting van het team en naar wie het eerst heeft aangevraagd. Overleg daarom eerst samen, en dien daarna je aanvraag in.
Het antwoord blijft in dit voorbeeld gelijk aan het antwoord van vóór de wijziging. Een pictogram is hoe de Agent eruitziet; het staat niet in de instructies en niet in de kennis. Een korte controle dat de Agent nog opent en antwoordt, is hier genoeg.
- Een nieuwe versie van het verlofdocument
-
Voorbeeld van een Copilot-antwoord (verzonnen)
Als jullie allebei in dezelfde week verlof aanvragen, beslist de teamleider. Die kijkt naar de bezetting van het team en naar wie het eerst heeft aangevraagd. Overleg daarom eerst samen, en dien daarna je aanvraag in.
Het antwoord op vraag 4 blijft in dit voorbeeld vrijwel gelijk, want daarover veranderde niets in het document. Vraag 1 over het aantal dagen stel je wel opnieuw: controleer of de Agent het nieuwe getal noemt en niet het oude. Bij een nieuwe kennisversie test je dus de vragen die uit dat document putten.
- Eén zin erbij in de instructies
-
Voorbeeld van een Copilot-antwoord (verzonnen)
De teamleider beslist. Vraag je verlof op tijd aan.
Je wilde met deze zin vooral vraag 1 korter maken. Maar de zin geldt voor elk antwoord. Bij vraag 4 is daardoor het advies verdwenen om eerst samen te overleggen, en ook dat de teamleider kijkt naar wie het eerst aanvroeg. Het antwoord is niet fout, maar mist precies wat je collega's nodig hebben. Na een wijziging in de instructies stel je daarom al je testvragen opnieuw, niet alleen de vraag die je wilde verbeteren.
Een zin in de instructies geldt voor elk antwoord van de Agent, niet alleen voor de vraag die je in gedachten had. Een Agent kan een nieuwe regel bij alle vragen toepassen, ook waar die regel slecht uitkomt. Een collega zou zo'n regel met gezond verstand toepassen. Een Agent doet dat niet vanzelf, en daarom laat je hem het opnieuw bewijzen met je vaste testvragen.
Niet elke wijziging vraagt dezelfde test. Een nieuw pictogram raakt in dit voorbeeld de antwoorden niet. Een nieuwe kennisversie raakt de vragen die uit dat document putten. Een wijziging in de instructies kan alle antwoorden raken, dus dan stel je alle testvragen opnieuw.
De andere optie
Zo stel je na een wijziging je vaste testvragen opnieuw
De film hieronder laat zien hoe je na de nieuwe zin in de instructies testvraag 4 opnieuw stelt en daarna alle vier je testvragen afloopt.
Tekstversie van de video
Deze video duurt ongeveer een minuut. Dit staat er in beeld.
De video heet: zo stel je na een wijziging je vaste testvragen opnieuw. Agent Builder: welke testvragen stel je opnieuw na een wijziging?
Bij ‘Configureren’ pas je de ‘Instructies’ en de kennis aan; in het testvenster stel je je testvragen.
Je voegt toe aan de instructies: ‘Antwoord altijd in hooguit twee zinnen.’
Stel na elke wijziging je vaste testvragen opnieuw, en vergelijk de antwoorden met die van vóór de wijziging. Testvraag 4: ‘Mijn collega en ik willen in dezelfde week vrij. Wie beslist dan?’
De Agent antwoordt, met het label ‘Fictief voorbeeld’: ‘De teamleider beslist. Vraag je verlof op tijd aan.’ Vóór de wijziging was het antwoord: ‘Als jullie allebei in dezelfde week verlof aanvragen, beslist de teamleider. Die kijkt naar de bezetting van het team en naar wie het eerst heeft aangevraagd. Overleg daarom eerst samen, en dien daarna je aanvraag in.’
Bij vraag 4 is daardoor het advies verdwenen om eerst samen te overleggen, en ook dat de teamleider kijkt naar wie het eerst aanvroeg.
Na een wijziging in de instructies stel je daarom al je testvragen opnieuw, niet alleen de vraag die je wilde verbeteren. Op jouw eigen lijst, je vaste testvragen, staat bij elke vraag of je hem opnieuw hebt gesteld. Vraag 1, 2 en 3 krijgen een vinkje: ‘Hoeveel verlofdagen heb ik per jaar bij een fulltime contract?’, ‘Hoe ver vooruit moet ik verlof aanvragen?’ en ‘Mag ik verlof meenemen naar volgend jaar?’ Vraag 4 krijgt een uitroepteken: ‘Mijn collega en ik willen in dezelfde week vrij. Wie beslist dan?’ Daaronder staat: advies verdwenen.
Wat doe je morgen anders? Bewaar voor je eigen Agent drie tot vijf vaste testvragen en stel ze opnieuw na elke wijziging in de instructies.
Wat je hieraan hebt
Je weet na een wijziging welke testvragen je opnieuw stelt. Je collega's houden zo een Agent die blijft doen wat hij deed, terwijl jij hem verbetert.
De verlof-Agent uit de opening wordt zo korter waar je dat wilde, zonder dat het advies bij vraag 4 ongemerkt verdwijnt.
In je eigen werk
Schrijf voor je eigen Agent drie tot vijf vaste testvragen op, met bij elke vraag in één zin wat een goed antwoord bevat. Stel ze opnieuw na elke wijziging in de instructies, en vergelijk de antwoorden met die zin.
Wijzig je alleen een kennisdocument, stel dan in elk geval de vragen opnieuw die uit dat document putten. Zet in je testvragen alleen gegevens die je mag verwerken.
Na afronding komen er 5 punten bij je totaal.