Broken Words, Broken Performance: Effect of Tokenization on Performance of LLMs

Fuente: arXiv
Salvato in:
Dettagli Bibliografici
Autori principali: Pawar, Sachin, Apte, Manoj, Jadhav, Kshitij, Palshikar, Girish Keshav, Ramrakhiyani, Nitin
Natura: Preprint
Pubblicazione: 2025
Soggetti:
Accesso online:
Tags: Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!