Kurs Kursraum

Tokenisierung und Batching: zwei Wartungstexte gemeinsam verarbeiten

Zusammenfassung

Eine Meldung ergibt drei Tokens, eine zweite fünf. Damit beide Eingaben in einen rechteckigen Tensor passen, braucht die kürzere Zeile zusätzliche Positionen. Die entscheidende Frage ist, ob das Modell diese Positionen als Inhalt behandelt.

Lektion 2 / 2 · 2 Min. · Einstieg · DeutschVideosprache · English
Videosprache · English

Eine Meldung ergibt drei Tokens, eine zweite fünf. Damit beide Eingaben in einen rechteckigen Tensor passen, braucht die kürzere Zeile zusätzliche Positionen. Die entscheidende Frage ist, ob das Modell diese Positionen als Inhalt behandelt.