Robuuste prompts ontwerpen en testen

Een professionele prompt is een overdracht van werk. Begin met het eindresultaat en voeg daarna de relevante context, gewenste uitvoervorm en noodzakelijke grenzen toe. Geef aan welke broninformatie leidend is en wat bij ontbrekende gegevens moet gebeuren.

Een rol kan perspectief of jargon sturen, maar bewijst geen deskundigheid. Gebruik daarom liever concrete beoordelingscriteria dan een indrukwekkende functietitel. Sluit belangrijke opdrachten af met een controle-instructie: laat ontbrekende informatie, niet-onderbouwde claims en afwijkingen van de opdracht afzonderlijk rapporteren.

• Resultaat
• Relevante context
• Bruikbaar formaat
• Echte grenzen
• Controle achteraf

Met voorbeeldgestuurde instructie toon je invoer en gewenste uitvoer. Dit helpt vooral bij classificatie, vaste formats, tone of voice en uitzonderingen. Kies voorbeelden die samen de normale gevallen én belangrijke grenzen dekken.

Leg uit wat het model uit een voorbeeld moet overnemen: structuur, detailniveau, criterium of toon. Laat namen, feiten en toevallige formuleringen niet automatisch hergebruiken. Voeg minstens één afwijkend of onvolledig geval toe en definieer het juiste gedrag, bijvoorbeeld 'onvoldoende informatie' in plaats van een gok.

• Representatieve voorbeelden
• Gewenst kenmerk benoemen
• Randgeval opnemen
• Geen ongewenste feitkopie

Voor professioneel werk wil je kunnen volgen waarop een uitkomst steunt. Vraag daarom om bronextracties, aannames, berekeningen, besliscriteria en een beknopte motivering. Zulke artefacten kun je controleren zonder te doen alsof een gegenereerde uitleg het werkelijke interne redeneerproces volledig onthult.

Kies tussenstappen die fouten lokaliseren. Bij een vergelijking zijn dat bijvoorbeeld criteria, bronwaarden, ontbrekende gegevens en scores. Bij een tekstcontrole zijn dat claims, bewijs en voorgestelde correcties. Een lange gedachtegang is geen bewijs; controleerbare gegevens en herhaalbare tests zijn dat wel.

• Bronextractie
• Aannames apart
• Berekening of criterium
• Beknopte motivering
• Resterende onzekerheid

Een prompt die één voorbeeld goed verwerkt is nog geen betrouwbare workflow. Maak een testset met representatieve invoer, een moeilijk geval, ontbrekende informatie, tegenstrijdige bronnen en eventueel een ongepaste instructie in bronmateriaal. Definieer per test vooraf wat minimaal goed gedrag is.

Gebruik geen echte gevoelige gegevens wanneer fictieve voorbeelden volstaan. Beoordeel zowel inhoud als veiligheid: volgt de output het schema, worden feiten niet verzonnen, blijft broninhoud ondergeschikt aan de opdracht en stopt de workflow waar dat moet? Bewaar mislukte voorbeelden als regressietest.

• Normaal geval
• Onvolledig geval
• Tegenstrijdigheid
• Buiten scope
• Onbetrouwbare broninstructie

Vergelijk promptversies niet op gevoel of op één toevallig antwoord. Gebruik dezelfde testset en dezelfde beoordelingscriteria. Wijzig bij voorkeur één factor, zoals broninstructie, uitvoerschema of foutafhandeling. Zo weet je welke aanpassing waarschijnlijk het verschil maakte.

Registreer versienummer, wijziging, reden, tests en bekende beperking. Meet naast kwaliteit ook correctiewerk, consistentie en benodigde tijd. Een versie met een hoger gemiddeld cijfer kan toch ongeschikt zijn als ze één kritisch grensgeval fout behandelt.

• Zelfde testset
• Eén hoofdwijziging
• Criteria vóór test
• Kritieke fouten apart
• Versielog