Legal-AI hallucineert nog in 1 op de 5 tot 3 op de 10 zoekopdrachten: zo bouwt u een verificatielaag

U moet een aparte verificatielaag inrichten die AI-antwoorden van primaire bronnen scheidt, citaten controleert en menselijke goedkeuring vastlegt voordat juridische bevindingen in dossiers met hoge inzet gebruikt worden.

De aanleiding is een analyse van 10 september 2026 van hallucinatie- en foutpercentages bij gespecialiseerde juridische AI-tools, die aantoont dat toonaangevende tools in 15 tot 35 procent van realistische zoekopdrachten onjuiste of verouderde antwoorden geven. Onafhankelijk benchmarkonderzoek van het Stanford RegLab meet deze foutquotes bij tools als Lexis+ AI, Westlaw AI-Assisted Research en Ask Practical Law AI. In onze beoordeling rechtvaardigt dit cijfer een bestuurde controlelaag: een tool die aantoonbaar beter presteert dan een junior medewerker verliest daardoor niet de noodzaak tot toezicht, vooral niet in werk waar een fout kostbaar is.

Wat zeggen de benchmarks over juridische AI-nauwkeurigheid?

Recent onderzoek toont aan dat juridisch-specifieke AI-tools ongeveer 60 tot 65 procent nauwkeurigheid halen op complexe taken. Dit betekent dat zij beter presteren dan algemene taalmodellen, maar dat een aanzienlijk deel van de antwoorden fout blijft. De Stanford RegLab-benchmark meet hallucinatie- en foutpercentages op gestructureerde wettelijke taken en vindt dat deze producten in ongeveer 17 tot 33 procent van de onderzochte zoekopdrachten hallucineren of onjuist antwoorden. Dit zijn resultaten uit gecontroleerde tests met vaste vraagstellingen; in de dagelijkse praktijk variëren vragen sterker, wat de foutmarge in sommige contexten kan vergroten.

Een belangrijk risico schuilt in de verleiding om minder te controleren wanneer een tool aantoonbaar beter is dan menselijke collega's. In werk met hoge inzet — hoger beroep, toezichtadvies, grensoverschrijdende opinies — is een restfout van deze omvang te groot om blind op een interface te vertrouwen. Daarnaast kunnen AI-antwoorden verouderde wetgeving bevatten of op achterhaalde rechtspraak rusten, ook wanneer zij overtuigend zijn geformuleerd.

Welke risico's ontstaan zonder aparte controle?

• Hallucinatie en foutieve rechtsstelling — AI-tools geven in 15 tot 35 procent van zoekopdrachten onjuiste of verzonnen antwoorden.
• Verouderde of achterhaalde rechtsbronnen — een overtuigend geformuleerd antwoord kan op verjaard recht of ingetrokken regelgeving rusten.
• Onzichtbare besluitvorming — wanneer een AI-vondst rechtstreeks in een dossier terechtkomt, is niet traceerbaar welke stappen tot het antwoord leidden.
• Onvoldoende citaatcontrole — AI-tools produceren citaten die niet bestaan of onjuist zijn aangehaald.
• Gemengde verantwoordelijkheid — zonder vastgestelde goedkeuringsstap blijft onduidelijk wie het eindresultaat verantwoordt.

Hoe richt u een werkbare verificatielaag in?

Een verificatielaag is geen extra tool, maar een governance-workflow die zichtbaar maakt hoe een AI-vondst een gecontroleerde autoriteit wordt. De volgende stappen vormen een praktische route:

1. Documenteer welke AI-tool voor welke taak gebruikt wordt — leg vast welk model, welke gegevensbron en welke rechtmatige grondslag voor elke workflow geldt.
2. Scheidt vondst van validatie — laat de AI zoeken en antwoorden formuleren, maar voer citaatcontrole en bronverificatie in een aparte stap uit.
3. Controleer citaten tegen primaire bronnen — verifieer dat aangehaalde wetten, uitspraken en regelgeving werkelijk bestaan en correct zijn weergegeven.
4. Leg menselijke goedkeuring vast — documenteer wie het eindresultaat heeft beoordeeld en goedgekeurd voordat het in een dossier terechtkomt.
5. Maak correcties en meningsverschillen zichtbaar — registreer waar de AI-vondst is aangepast, waar bronnen niet klopten en waar menselijke beoordeling afweek van het AI-antwoord.

Wat kan tooling doen en wat blijft uw verantwoordelijkheid?

Een verificatielaag kan routering van taken naar geselecteerde modellen automatiseren, citaatcontrole ondersteund maken en geanonimiseerde inhoud naar onafhankelijke systemen sturen. Zij kan ook vastleggen welke bronnen zijn nagelopen en waar menselijke goedkeuring het eindresultaat verankerde. Wat tooling niet kan doen: zij garandeert geen juistheid en neemt hallucinaties niet weg. Het eindoordeel over juridische inhoud blijft bij u. Een verificatielaag maakt dat oordeel navolgbaar en laat zien welke stappen tot een conclusie leidden — zij verplaatst de verantwoordelijkheid niet, maar maakt deze inzichtelijk.