Pangu Pro MoE: Mixture of Grouped Experts for Efficient Sparsity

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Tang, Yehui, Li, Xiaosong, Liu, Fangcheng, Guo, Wei, Zhou, Hang, Wang, Yaoyuan, Han, Kai, Yu, Xianzhi, Li, Jinpeng, Zang, Hui, Mi, Fei, Meng, Xiaojun, Liu, Zhicheng, Chen, Hanting, Zheng, Binfan, Chen, Can, Yan, Youliang, Tang, Ruiming, Qin, Peifeng, Chen, Xinghao, Tao, Dacheng, Wang, Yunhe
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Online

https://arxiv.org/abs/2505.21411