Chunking

Chunking ist das Zerlegen längerer Texte in kleinere, handhabbare Abschnitte, bevor ein KI-System sie weiterverarbeitet. Das ist nötig, weil Modelle nur eine begrenzte Textmenge auf einmal betrachten können und kürzere Abschnitte sich gezielter durchsuchen lassen. Wie man die Abschnitte schneidet, beeinflusst stark, wie gut eine spätere Suche passende Stellen findet.