Understanding the RoPE Extensions of Long-Context LLMs: An Attention Perspective

Fuente: arXiv
Salvato in:
Dettagli Bibliografici
Autori principali: Zhong, Meizhi, Zhang, Chen, Lei, Yikun, Liu, Xikai, Gao, Yan, Hu, Yao, Chen, Kehai, Zhang, Min
Natura: Preprint
Pubblicazione: 2024
Soggetti:
Accesso online:
Tags: Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!