RateQuant: Optimal Mixed-Precision KV Cache Quantization via Rate-Distortion Theory

Fuente: arXiv

Enregistré dans:

Détails bibliographiques
Auteurs principaux:	Zuo, Fei, Zhou, Zikang, Cong, Hao, Xi, Xiaoyan, Leung, Ho Fai
Format:	Preprint
Publié:	2026
Sujets:	Machine Learning Computation and Language Information Theory
Accès en ligne:	Acceder al recurso
Tags:	Ajouter un tag Pas de tags, Soyez le premier à ajouter un tag!

Internet

https://arxiv.org/abs/2605.06675