Spectral Flattening Is All Muon Needs: How Orthogonalization Controls Learning Rate and Convergence

Fuente: arXiv
Salvato in:
Dettagli Bibliografici
Autori principali: Nguyen, Tien-Phat, Nguyen, Truong, Truong, Minh-Phuc, Nguyen, Tuc, Bailey, James, Le, Trung
Natura: Preprint
Pubblicazione: 2026
Soggetti:
Accesso online:
Tags: Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!