Dispersion Loss Counteracts Embedding Condensation and Improves Generalization in Small Language Models

Fuente: arXiv
Enregistré dans:
Détails bibliographiques
Auteurs principaux: Liu, Chen, Sun, Xingzhi, Xiao, Xi, Van Tassel, Alexandre, Xu, Ke, Reimann, Kristof, Liao, Danqi, Gerstein, Mark, Wang, Tianyang, Wang, Xiao, Krishnaswamy, Smita
Format: Preprint
Publié: 2026
Sujets:
Accès en ligne:
Tags: Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!