Duration Aware Scheduling for ASR Serving Under Workload Drift
Fuente:
arXiv
Salvato in:
| Autori principali: | Makwana, Darshan, Jogi, Yash, Kotta, Harsh, Kubba, Aayush |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2026
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Some Theoretical Results on Layerwise Effective Dimension Oscillations in Finite Width ReLU Networks
di: Makwana, Darshan
Pubblicazione: (2025)
di: Makwana, Darshan
Pubblicazione: (2025)
Improving Rare-Word Recognition of Whisper in Zero-Shot Settings
di: Jogi, Yash, et al.
Pubblicazione: (2025)
di: Jogi, Yash, et al.
Pubblicazione: (2025)
Adopting Whisper for Confidence Estimation
di: Aggarwal, Vaibhav, et al.
Pubblicazione: (2025)
di: Aggarwal, Vaibhav, et al.
Pubblicazione: (2025)
MorphServe: Efficient and Workload-Aware LLM Serving via Runtime Quantized Layer Swapping and KV Cache Resizing
di: Su, Zhaoyuan, et al.
Pubblicazione: (2025)
di: Su, Zhaoyuan, et al.
Pubblicazione: (2025)
Priority-Aware Preemptive Scheduling for Mixed-Priority Workloads in MoE Inference
di: Siavashi, Mohammad, et al.
Pubblicazione: (2025)
di: Siavashi, Mohammad, et al.
Pubblicazione: (2025)
SALSA: Speedy ASR-LLM Synchronous Aggregation
di: Mittal, Ashish, et al.
Pubblicazione: (2024)
di: Mittal, Ashish, et al.
Pubblicazione: (2024)
FineServe: Precision-Aware KV Slab and Two-Level Scheduling for Heterogeneous Precision LLM Serving
di: Bin, Kyungmin, et al.
Pubblicazione: (2025)
di: Bin, Kyungmin, et al.
Pubblicazione: (2025)
Prompt-Aware Scheduling for Low-Latency LLM Serving
di: Tao, Yiheng, et al.
Pubblicazione: (2025)
di: Tao, Yiheng, et al.
Pubblicazione: (2025)
Tracking Drift: Variation-Aware Entropy Scheduling for Non-Stationary Reinforcement Learning
di: Wang, Tongxi, et al.
Pubblicazione: (2026)
di: Wang, Tongxi, et al.
Pubblicazione: (2026)
Apt-Serve: Adaptive Request Scheduling on Hybrid Cache for Scalable LLM Inference Serving
di: Gao, Shihong, et al.
Pubblicazione: (2025)
di: Gao, Shihong, et al.
Pubblicazione: (2025)
RAGPulse: An Open-Source RAG Workload Trace to Optimize RAG Serving Systems
di: Wang, Zhengchao, et al.
Pubblicazione: (2025)
di: Wang, Zhengchao, et al.
Pubblicazione: (2025)
Speech Diarization and ASR with GMM
di: Sharma, Aayush Kumar, et al.
Pubblicazione: (2023)
di: Sharma, Aayush Kumar, et al.
Pubblicazione: (2023)
Analytical Provisioning for Attention-FFN Disaggregated LLM Serving under Stochastic Workloads
di: Song, Chendong, et al.
Pubblicazione: (2026)
di: Song, Chendong, et al.
Pubblicazione: (2026)
PASCAL: A Phase-Aware Scheduling Algorithm for Serving Reasoning-based Large Language Models
di: Cho, Eunyeong, et al.
Pubblicazione: (2026)
di: Cho, Eunyeong, et al.
Pubblicazione: (2026)
Counterfactual Explanations Under Concept Drift
di: Kostrzewa, Marcin, et al.
Pubblicazione: (2026)
di: Kostrzewa, Marcin, et al.
Pubblicazione: (2026)
Domain Generalization Under Posterior Drift
di: Zhu, Yilun, et al.
Pubblicazione: (2025)
di: Zhu, Yilun, et al.
Pubblicazione: (2025)
Dislocation cartography: Representations and unsupervised classification of dislocation networks with unique fingerprints
di: Udofia, Benjamin, et al.
Pubblicazione: (2024)
di: Udofia, Benjamin, et al.
Pubblicazione: (2024)
FedTeddi: Temporal Drift and Divergence Aware Scheduling for Timely Federated Edge Learning
di: Bai, Yuxuan, et al.
Pubblicazione: (2025)
di: Bai, Yuxuan, et al.
Pubblicazione: (2025)
Fairness Under Group-Conditional Prior Probability Shift: Invariance, Drift, and Target-Aware Post-Processing
di: Asiaee, Amir, et al.
Pubblicazione: (2026)
di: Asiaee, Amir, et al.
Pubblicazione: (2026)
ViBE: Co-Optimizing Workload Skew and Hardware Variability for MoE Serving
di: Go, Seokjin, et al.
Pubblicazione: (2026)
di: Go, Seokjin, et al.
Pubblicazione: (2026)
Duration-Informed Workload Scheduler
di: Loreti, Daniela, et al.
Pubblicazione: (2026)
di: Loreti, Daniela, et al.
Pubblicazione: (2026)
Locality-aware Fair Scheduling in LLM Serving
di: Cao, Shiyi, et al.
Pubblicazione: (2025)
di: Cao, Shiyi, et al.
Pubblicazione: (2025)
PRISM: Fast Online LLM Serving via Scheduling-Memory Co-design
di: Qu, Xingyu, et al.
Pubblicazione: (2026)
di: Qu, Xingyu, et al.
Pubblicazione: (2026)
Preble: Efficient Distributed Prompt Scheduling for LLM Serving
di: Srivatsa, Vikranth, et al.
Pubblicazione: (2024)
di: Srivatsa, Vikranth, et al.
Pubblicazione: (2024)
Optimal Linear Decay Learning Rate Schedules and Further Refinements
di: Defazio, Aaron, et al.
Pubblicazione: (2023)
di: Defazio, Aaron, et al.
Pubblicazione: (2023)
Assessing the Impact of Upselling in Online Fantasy Sports
di: Chaudhary, Aayush
Pubblicazione: (2024)
di: Chaudhary, Aayush
Pubblicazione: (2024)
Taming the Tail: NoI Topology Synthesis for Mixed DL Workloads on Chiplet-Based Accelerators
di: Shukla, Arnav, et al.
Pubblicazione: (2025)
di: Shukla, Arnav, et al.
Pubblicazione: (2025)
Prediction-Assisted Online Distributed Deep Learning Workload Scheduling in GPU Clusters
di: Luo, Ziyue, et al.
Pubblicazione: (2025)
di: Luo, Ziyue, et al.
Pubblicazione: (2025)
Agent.xpu: Efficient Scheduling of Agentic LLM Workloads on Heterogeneous SoC
di: Wei, Xinming, et al.
Pubblicazione: (2025)
di: Wei, Xinming, et al.
Pubblicazione: (2025)
Privacy Drift: Evolving Privacy Concerns in Incremental Learning
di: Ahamed, Sayyed Farid, et al.
Pubblicazione: (2024)
di: Ahamed, Sayyed Farid, et al.
Pubblicazione: (2024)
Category-Aware Semantic Caching for Heterogeneous LLM Workloads
di: Wang, Chen, et al.
Pubblicazione: (2025)
di: Wang, Chen, et al.
Pubblicazione: (2025)
Hierarchical Semi-Markov Models with Duration-Aware Dynamics for Activity Sequences
di: Dube, Rohit, et al.
Pubblicazione: (2025)
di: Dube, Rohit, et al.
Pubblicazione: (2025)
TokenFlow: Responsive LLM Text Streaming Serving under Request Burst via Preemptive Scheduling
di: Chen, Junyi, et al.
Pubblicazione: (2025)
di: Chen, Junyi, et al.
Pubblicazione: (2025)
Stream-CQSA: Avoiding Out-of-Memory in Attention Computation via Flexible Workload Scheduling
di: Bian, Yiming, et al.
Pubblicazione: (2026)
di: Bian, Yiming, et al.
Pubblicazione: (2026)
Online Detection of Water Contamination Under Concept Drift
di: Li, Jin, et al.
Pubblicazione: (2025)
di: Li, Jin, et al.
Pubblicazione: (2025)
The impact of allocation strategies in subset learning on the expressive power of neural networks
di: Schlisselberg, Ofir, et al.
Pubblicazione: (2025)
di: Schlisselberg, Ofir, et al.
Pubblicazione: (2025)
Llumnix: Dynamic Scheduling for Large Language Model Serving
di: Sun, Biao, et al.
Pubblicazione: (2024)
di: Sun, Biao, et al.
Pubblicazione: (2024)
Learning to Solve Resource-Constrained Project Scheduling Problems with Duration Uncertainty using Graph Neural Networks
di: Infantes, Guillaume, et al.
Pubblicazione: (2025)
di: Infantes, Guillaume, et al.
Pubblicazione: (2025)
Signal-Aware Workload Shifting Algorithms with Uncertainty-Quantified Predictors
di: Johnson, Ezra, et al.
Pubblicazione: (2025)
di: Johnson, Ezra, et al.
Pubblicazione: (2025)
The Road Less Scheduled
di: Defazio, Aaron, et al.
Pubblicazione: (2024)
di: Defazio, Aaron, et al.
Pubblicazione: (2024)
Documenti analoghi
-
Some Theoretical Results on Layerwise Effective Dimension Oscillations in Finite Width ReLU Networks
di: Makwana, Darshan
Pubblicazione: (2025) -
Improving Rare-Word Recognition of Whisper in Zero-Shot Settings
di: Jogi, Yash, et al.
Pubblicazione: (2025) -
Adopting Whisper for Confidence Estimation
di: Aggarwal, Vaibhav, et al.
Pubblicazione: (2025) -
MorphServe: Efficient and Workload-Aware LLM Serving via Runtime Quantized Layer Swapping and KV Cache Resizing
di: Su, Zhaoyuan, et al.
Pubblicazione: (2025) -
Priority-Aware Preemptive Scheduling for Mixed-Priority Workloads in MoE Inference
di: Siavashi, Mohammad, et al.
Pubblicazione: (2025)