Ein Token ist die kleinste vom Sprachmodell verarbeitete Einheit – oft ein Wortbestandteil.
glossar token