Preprocessing: Tokenisation

Question

Beschreibe was ein Token ist, welche Probleme bei der Tokenisation auftreten können und welche Ansätze es gibt!

Nur angemeldete Nutzer dürfen die Antwort sehen. Hier geht's zur kostenlosen Registrierung.

Kommentare