Legal Prompt van de Week: De reviewer reviewen

Elke week delen we op onze website de Legal Prompt van de Week om juristen te inspireren bij het gebruik van taalmodellen in hun dagelijkse werk. Of je nu op zoek bent naar een nieuwe invalshoek, een efficiëntere manier om informatie te analyseren of een innovatieve aanpak voor juridische vraagstukken, onze prompts helpen je slimmer gebruik te maken van taalmodellen en AI. Deze week gaat het over het moment waarop je commentaar terugkrijgt op je eigen tekst, van een collega, een redactie of een opdrachtgever. Klopt elk punt, en staat het er eigenlijk wel? In deze editie introduceren we de Feedbacktoets. Volg ons via social media of schrijf je in voor onze nieuwsbrief om op de hoogte te blijven.

Commentaar is ook tekst die kan kloppen of niet

Wie publiceert, krijgt commentaar. Een redactie stuurt vijftien opmerkingen, een collega zet er twintig in de kantlijn, een opdrachtgever reageert met een lijst punten. Het meeste is waardevol. Sommige punten zijn onjuist. En af en toe gaat een opmerking over een passage die helemaal niet in je tekst staat.

Dat laatste klinkt onwaarschijnlijk, maar het gebeurt geregeld. Bij de beoordeling van een artikel voor een vaktijdschrift zaten in de externe feedback twee foutmeldingen over formuleringen die in het origineel niet voorkwamen. De reviewer had gewerkt in een versie met wijzigingen bijhouden, waarin een verwijderde en een ingevoegde tekst door elkaar liepen. Wat er voor hem stond, was een zin die de auteur nooit had geschreven.

Bij de herziening van een ander artikel lagen er reacties van twee reviewers, die elkaar op een paar punten tegenspraken. De verleiding is dan om alles te verwerken, omdat het veilig voelt. Het resultaat is een langere tekst die op sommige plekken slechter is geworden.

Waarom een model hier goed in is

Commentaar beoordelen vraagt drie dingen die een taalmodel snel en nauwkeurig kan: de passage vinden waarop een opmerking slaat, nagaan of die passage er staat zoals de reviewer zegt, en de opmerking naast de rest van de tekst leggen. Bij lange teksten en lange lijsten opmerkingen kost dat een mens uren, en het is precies het werk waarbij je op een drukke dag slordig wordt.

Wat het model niet voor je beslist, is of een inhoudelijk punt terecht is. Het kan argumenten voor en tegen geven en aanwijzen waar een reviewer verder gaat dan de bron. De afweging blijft van jou als auteur.

Een voorbeeld

Je legt het model je artikel voor plus zes opmerkingen van een reviewer. De Feedbacktoets levert onder meer:

Opmerking 2: "In paragraaf 3 stelt de auteur dat de uitzondering
nooit van toepassing is op journalistieke content."
Passage gevonden: nee. Paragraaf 3 bevat de zin "is de uitzondering
in de regel niet van toepassing op journalistieke content".
Beoordeling: de opmerking gaat uit van een stelliger formulering dan
er staat. Geen aanpassing nodig.

Opmerking 4: "De verwijzing in voetnoot 12 is onjuist."
Passage gevonden: ja.
Beoordeling: de opmerking is waarschijnlijk terecht. Voetnoot 12
verwijst naar een artikelnummer dat in de geldende tekst anders is.
Kleinste reparatie: nummer in voetnoot 12 aanpassen.

Opmerking 5: "Werk het onderscheid tussen beide uitzonderingen
verder uit."
Passage gevonden: ja.
Beoordeling: inhoudelijk punt. Uitwerking maakt het artikel
duidelijker en ook langer. Spanning met opmerking 6 van dezelfde
reviewer, die vraagt om inkorting.

Opmerking 2 had je zonder deze toets misschien verwerkt, met een tekst die daarna onnodig voorzichtig wordt. Opmerking 5 en 6 laten zien waar jij moet kiezen.

Concrete prompts

Feedbacktoets

Wanneer gebruiken: zodra je commentaar terugkrijgt op een eigen tekst.

Waarvoor: per opmerking vaststellen of ze klopt en waar ze op slaat.

Hieronder staan mijn tekst en een lijst opmerkingen van een reviewer.

Behandel elke opmerking afzonderlijk:
1. Citeer de passage in mijn tekst waarop de opmerking slaat. Als je
   die passage niet kunt vinden, of als ze anders luidt dan de
   reviewer stelt, zeg dat en citeer wat er wel staat.
2. Beoordeel of de opmerking klopt. Maak onderscheid tussen een
   feitelijke fout, een inhoudelijk standpunt en een stijlvoorkeur.
3. Geef bij een terechte opmerking de kleinste aanpassing die het
   probleem oplost.
4. Markeer opmerkingen die elkaar tegenspreken.

Herschrijf mijn tekst niet. Voeg geen eigen opmerkingen toe.

Twee reviewers naast elkaar

Wanneer gebruiken: als je commentaar van meer dan één lezer hebt gekregen.

Waarvoor: zien waar reviewers het eens zijn, waar ze botsen en wat je moet kiezen.

Hieronder staan mijn tekst en de opmerkingen van twee reviewers,
aangeduid als A en B.

Maak drie lijsten:
1. Punten waarover A en B het eens zijn.
2. Punten waarover A en B elkaar tegenspreken. Geef per punt beide
   standpunten in een zin en wat het voor mijn tekst betekent als
   ik de een of de ander volg.
3. Punten die slechts een van beiden noemt.

Kies geen kant.

Wat je zelf blijft doen

Lees bij elke opmerking die het model als “passage niet gevonden” markeert zelf na wat er staat. Een model kan een passage missen, vooral als de reviewer haar in andere woorden samenvat. Bij inhoudelijke punten beslis je zelf, met het argument van de reviewer en je eigen bronnen naast elkaar.

Wie commentaar namens een redactie terugstuurt naar een auteur, kan dezelfde toets gebruiken op de eigen opmerkingen. Een opmerking die je niet aan een passage kunt koppelen, hoort niet in de lijst.

Volgende
Volgende

ChatGPT schrijft snel. Maar schrijft het ook zoals jij?