Hoe werkt antwoorden uit eigen documenten?
Een documentassistent zoekt eerst relevante passages en laat een taalmodel daarover antwoorden. Dit patroon heet vaak retrieval augmented generation, of RAG. Microsoft beschrijft dat een zoekindex en een model verschillende onderdelen zijn. Je hoeft daarvoor het model meestal niet opnieuw te trainen. De kwaliteit hangt af van de gekozen documenten, de zoekresultaten en de manier waarop het antwoord bronnen toont.
Begin met een beperkte, opgeschoonde set: een actuele handleiding, een versie van het beleid en een document met bewust ontbrekende informatie. Vraag welke passages zijn gebruikt. Open die passages vervolgens zelf. Een bronvermelding is alleen nuttig als zij naar het juiste document en de relevante plek leidt. Laat het systeem aangeven dat informatie ontbreekt wanneer de set geen antwoord bevat.
Welke documenten komen in de eerste set?
Kies documenten met een duidelijke eigenaar, versie en geldigheidsdatum. Verwijder dubbele of verlopen kopieën en zet de nieuwe versie op één herkenbare plek. Schrijf op welke vragen de assistent wél moet kunnen beantwoorden. Meng geen personeelsdossiers met algemene handleidingen in dezelfde eerste proef. De bronset moet klein genoeg zijn dat een medewerker handmatig kan nagaan of het juiste document is gevonden.
Een zoekindex kan documenten opdelen in kleinere stukken. OpenAI's retrieval-documentatie beschrijft bijvoorbeeld hoe bestanden worden verwerkt en zoekresultaten kunnen worden gefilterd op attributen. De exacte werking verschilt per product. Test daarom geen abstracte 'AI over alle documenten', maar een concrete set in de gekozen omgeving, met geregistreerde documentversies.
Blijven bronrechten na indexering gelden?
Ga hier niet automatisch van uit. Een nieuwe index is een nieuwe gegevenslaag met eigen beheer. De toepassing moet bij zoeken de identiteit of rol van de gebruiker gebruiken en documenten filteren die deze niet mag zien. Microsoft beschrijft methoden voor documentniveau-toegangscontrole; de juiste keuze hangt af van bron, index en identiteitsmodel. Een prompt als 'toon geen geheime informatie' vervangt die controle niet.
Maak twee fictieve documenten en twee testrollen. Rol A mag beide documenten lezen, rol B slechts één. Stel exact dezelfde vraag en controleer de opgehaalde passages, het antwoord en de bronverwijzingen. Test ook wat gebeurt nadat een recht wordt ingetrokken en of een verouderde index de oude inhoud nog toont. Pas als de rechtenketen werkt, kun je over een bredere documentset nadenken.
Hoe beoordeel je de inhoud van een antwoord?
Maak een testset met vier gevallen: een duidelijke vraag, een dubbelzinnige vraag, een vraag waarvan het antwoord niet in de set staat en een vraag over een verlopen document. Voor elk geval noteer je het verwachte gedrag. Het systeem mag een juiste passage vinden en toch een foutieve conclusie trekken. Een beoordelaar kijkt dus zowel naar de gevonden bron als naar de samenvatting.
Vraag het systeem bronpassages, documenttitel en versie te tonen waar het product dat ondersteunt. Controleer getallen, uitzonderingen en negaties afzonderlijk. Als twee documenten elkaar tegenspreken, moet de assistent de spanning benoemen of terugvallen op de eigenaar van de bron. Met alleen een hoge zoekscore of een soepel antwoord is de taak niet bewezen. NIST koppelt meten aan de specifieke gebruikscontext.
Wanneer ga je van proef naar werkproces?
Breid pas uit wanneer de documenteigenaar oude versies kan verwijderen, de rechten voor verschillende rollen worden afgedwongen en de belangrijkste vragen een controleerbaar antwoord opleveren. Leg vast wie nieuwe documenten toevoegt, wie de index opnieuw bouwt, hoe fouten worden gemeld en wat er gebeurt bij uitval. Een documentassistent is een beheerde informatievoorziening, geen eenmalige upload.
Is de bronset klein en verandert zij weinig, dan kan handmatig zoeken goedkoper en duidelijker zijn. Is de set groter, dan helpt een ontwerp met bronbeheer, toegangscontrole en een vaste evaluatieset. Gebruik eerst de systeemkaart en daarna de testgids voor antwoorden en bronnen.
Bronnen en controle
- Auteur
- Jesse Dekkers, Redactioneel verantwoordelijke, Palisade. Verantwoordelijk voor de inhoud en actualisering van deze Palisade Kennisgids.
- Inhoudelijke controle
- Jesse Dekkers op 25 oktober 2026
- Werkwijze
- Brononderzoek in officiële Microsoft-, OpenAI- en NIST-documentatie, gecontroleerd op 25 oktober 2026. De roltest is voorgesteld; er is geen productie-index getest.
- Microsoft — Retrieval augmented generation (gecontroleerd 25 oktober 2026)
- OpenAI — Retrieval (gecontroleerd 25 oktober 2026)
- Microsoft — Document-level access control (gecontroleerd 25 oktober 2026)
- NIST — AI RMF Core (gecontroleerd 25 oktober 2026)