Chunking is het opdelen van documenten in kleinere delen voor zoeken en contextselectie. De juiste grootte hangt af van de documentstructuur en de vragen. Er bestaat geen universele chunkgrootte die voor ieder handboek, contract of tabel het beste werkt.
Begin met de structuur van de bron
Een procedure met stappen, een prijstabel en een lange beleidsnotitie hebben verschillende grenzen. Bewaar waar mogelijk koppen, tabelcontext en de relatie tussen een regel en haar uitzondering. Als een uitzondering in een ander fragment verdwijnt, kan een zoekresultaat op zichzelf juist lijken maar een verkeerd antwoord uitlokken. Inspecteer daarom echte voorbeeldfragmenten voordat je een grote bronset verwerkt.
Vergelijk enkele gerichte varianten
Test bijvoorbeeld vaste blokken tegenover segmenten op basis van koppen en alinea’s. Overlap kan helpen bij informatie rond een grens, maar levert ook dubbele context op. Gebruik dezelfde vragen om varianten te vergelijken. Meer opgehaalde tekst is geen automatische verbetering: extra herhaling kan het relevante antwoord verdringen en het gebruik duurder maken.
Bewaar herkomst en rechten bij ieder fragment
Een los tekstdeel moet terug te voeren zijn naar document, versie en locatie. Behoud ook de benodigde toegangsmetadata. Bij vervanging van een document moeten oude fragmenten herkenbaar kunnen worden verwijderd. Beoordeel chunking samen met retrieval en het uiteindelijke antwoord, maar verander in een experiment liefst één onderdeel tegelijk. Zie RAG evalueren voor die testopzet.
Chunkingkeuzes per documenttype
| Bron | Aandachtspunt | Te controleren met een vraag |
|---|---|---|
| Stappenplan | Volgorde en voorwaarden samenhouden | Wordt een noodzakelijke voorwaarde meegenomen? |
| Tabel | Kolomkoppen en eenheden behouden | Hoort het bedrag bij de juiste categorie? |
| Beleidsdocument | Regel en uitzondering verbinden | Blijft de uitzondering vindbaar? |
De uitzondering onder de retourregel
Een handboek vermeldt een retourtermijn en enkele alinea’s later een uitzondering voor maatwerk. Een te grove of ongelukkig geknipte index levert alleen de hoofdregel op. De testvraag gaat daarom expliciet over maatwerk. De chunkingvariant is pas bruikbaar als het juiste fragment of een combinatie van fragmenten beide onderdelen beschikbaar maakt.
Neem mee naar je team.
- Inspecteer fragmenten van tekst, tabellen en uitzonderingen.
- Bewaar document-ID, versie en bronlocatie.
- Vergelijk varianten met dezelfde gelabelde vragen.
Met ruimte voor je besluit, eigenaar en testbewijs. Geen e-mailadres nodig.
Bronnen & verantwoording
Technische achtergrond bij dit onderwerp. De keuzetabel, checklist en fictieve voorbeelden zijn een eigen redactionele uitwerking van Instellect. De beschreven patronen zijn geen overzicht van reeds beschikbare productfuncties.
Geraadpleegd op 11 oktober 2026. Een correctie doorgeven? Mail Instellect.