GoodSpeed: Optimizing Fair Goodput with Adaptive Speculative Decoding in Distributed Edge Inference

Fuente: arXiv
Salvato in:
Dettagli Bibliografici
Autori principali: Tran, Phuong, Liu, Tzu-Hao, Le, Long Tan, Nguyen, Tung-Anh, La, Van Quan, Yu, Eason, Shu, Han, Hong, Choong Seon, Tran, Nguyen H.
Natura: Preprint
Pubblicazione: 2025
Soggetti:
Accesso online:
Tags: Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!