Dirichlet-Prior Shaping: Guiding Expert Specialization in Upcycled MoEs

Fuente: arXiv
Guardado en:
Detalles Bibliográficos
Autores principales: Mirvakhabova, Leyla, Bejnordi, Babak Ehteshami, Kumar, Gaurav, Liang, Hanxue, Zhao, Wanru, Whatmough, Paul
Formato: Preprint
Publicado: 2025
Materias:
Acceso en línea:
Etiquetas: Agregar Etiqueta
Sin Etiquetas, Sea el primero en etiquetar este registro!