DFRot: Achieving Outlier-Free and Massive Activation-Free for Rotated LLMs with Refined Rotation

Fuente: arXiv
Enregistré dans:
Détails bibliographiques
Auteurs principaux: Xiang, Jingyang, Zhang, Sai Qian
Format: Preprint
Publié: 2024
Sujets:
Accès en ligne:
Tags: Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!