Progressive Weight Loading: Accelerating Initial Inference and Gradually Boosting Performance on Resource-Constrained Environments

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Kim, Hyunwoo, Lee, Junha, Choi, Mincheol, Lee, Jeonghwan, Cho, Jaeshin
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Machine Learning Artificial Intelligence
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Beyond Gaussian Initializations: Signal Preserving Weight Initialization for Odd-Sigmoid Activations
von: Lee, Hyunwoo, et al.
Veröffentlicht: (2025)

Robust Weight Initialization for Tanh Neural Networks with Fixed Point Analysis
von: Lee, Hyunwoo, et al.
Veröffentlicht: (2024)

Memory-Efficient Acceleration of Block Low-Rank Foundation Models on Resource Constrained GPUs
von: Abillama, Pierre, et al.
Veröffentlicht: (2025)

Frictional Q-Learning
von: Kim, Hyunwoo, et al.
Veröffentlicht: (2025)

Learning to Transfer Human Hand Skills for Robot Manipulations
von: Park, Sungjae, et al.
Veröffentlicht: (2025)

Temporal Dynamic Embedding for Irregularly Sampled Time Series
von: Kim, Mincheol, et al.
Veröffentlicht: (2025)

On Accelerating Edge AI: Optimizing Resource-Constrained Environments
von: Sander, Jacob, et al.
Veröffentlicht: (2025)

Constant Acceleration Flow
von: Park, Dogyun, et al.
Veröffentlicht: (2024)

Revisiting Weight Averaging for Model Merging
von: Choi, Jiho, et al.
Veröffentlicht: (2024)

LiteVLM: A Low-Latency Vision-Language Model Inference Pipeline for Resource-Constrained Environments
von: Huang, Jin, et al.
Veröffentlicht: (2025)

Sparse Weight Averaging with Multiple Particles for Iterative Magnitude Pruning
von: Choi, Moonseok, et al.
Veröffentlicht: (2023)

TRACED: Transition-aware Regret Approximation with Co-learnability for Environment Design
von: Cho, Geonwoo, et al.
Veröffentlicht: (2025)

Wafer-Level Etch Spatial Profiling for Process Monitoring from Time-Series with Time-LLM
von: Kim, Hyunwoo, et al.
Veröffentlicht: (2026)

Inversion-based Latent Bayesian Optimization
von: Chu, Jaewon, et al.
Veröffentlicht: (2024)

Assigning Distinct Roles to Quantized and Low-Rank Matrices Toward Optimal Weight Decomposition
von: Cho, Yoonjun, et al.
Veröffentlicht: (2025)

ARCLE: The Abstraction and Reasoning Corpus Learning Environment for Reinforcement Learning
von: Lee, Hosung, et al.
Veröffentlicht: (2024)

Learning Equi-angular Representations for Online Continual Learning
von: Seo, Minhyuk, et al.
Veröffentlicht: (2024)

Learning to Act Robustly with View-Invariant Latent Actions
von: Jeong, Youngjoon, et al.
Veröffentlicht: (2026)

MONAQ: Multi-Objective Neural Architecture Querying for Time-Series Analysis on Resource-Constrained Devices
von: Trirat, Patara, et al.
Veröffentlicht: (2025)

RILQ: Rank-Insensitive LoRA-based Quantization Error Compensation for Boosting 2-bit Large Language Model Accuracy
von: Lee, Geonho, et al.
Veröffentlicht: (2024)

Rethinking Multimodal Fusion for Time Series: Auxiliary Modalities Need Constrained Fusion
von: Lee, Seunghan, et al.
Veröffentlicht: (2026)

TraM : Enhancing User Sleep Prediction with Transformer-based Multivariate Time Series Modeling and Machine Learning Ensembles
von: Kim, Jinjae, et al.
Veröffentlicht: (2024)

Generating Multi-Table Time Series EHR from Latent Space with Minimal Preprocessing
von: Cho, Eunbyeol, et al.
Veröffentlicht: (2025)

Self-Supervised Pre-Training for Precipitation Post-Processor
von: An, Sojung, et al.
Veröffentlicht: (2023)

WiSparse: Boosting LLM Inference Efficiency with Weight-Aware Mixed Activation Sparsity
von: Chen, Lei, et al.
Veröffentlicht: (2026)

Adaptive Sparsified Graph Learning Framework for Vessel Behavior Anomalies
von: Kim, Jeehong, et al.
Veröffentlicht: (2025)

Fast Training of Sinusoidal Neural Fields via Scaling Initialization
von: Yeom, Taesun, et al.
Veröffentlicht: (2024)

Multidimensional Adaptive Coefficient for Inference Trajectory Optimization in Flow and Diffusion
von: Lee, Dohoon, et al.
Veröffentlicht: (2024)

Grokfast: Accelerated Grokking by Amplifying Slow Gradients
von: Lee, Jaerin, et al.
Veröffentlicht: (2024)

WINA: Weight Informed Neuron Activation for Accelerating Large Language Model Inference
von: Chen, Sihan, et al.
Veröffentlicht: (2025)

MetaCLBench: Meta Continual Learning Benchmark on Resource-Constrained Edge Devices
von: Li, Sijia, et al.
Veröffentlicht: (2025)

Leveraging Knowledge Distillation for Efficient Deep Reinforcement Learning in Resource-Constrained Environments
von: Meng, Guanlin
Veröffentlicht: (2023)

FALQON: Accelerating LoRA Fine-tuning with Low-Bit Floating-Point Arithmetic
von: Choi, Kanghyun, et al.
Veröffentlicht: (2025)

Perturb-and-Compare Approach for Detecting Out-of-Distribution Samples in Constrained Access Environments
von: Lee, Heeyoung, et al.
Veröffentlicht: (2024)

Latent Bayesian Optimization via Autoregressive Normalizing Flows
von: Lee, Seunghun, et al.
Veröffentlicht: (2025)

STEER: Inference-Time Risk Control via Constrained Quality-Diversity Search
von: Yang, Eric, et al.
Veröffentlicht: (2026)

NNiT: Width-Agnostic Neural Network Generation with Structurally Aligned Weight Spaces
von: Kim, Jiwoo, et al.
Veröffentlicht: (2026)

LION-DG: Layer-Informed Initialization with Deep Gradient Protocols for Accelerated Neural Network Training
von: Kim, Hyunjun
Veröffentlicht: (2026)

Aligning Few-Step Generative Models by Amortizing Sample-based Variational Inference
von: Lee, Jaewoo, et al.
Veröffentlicht: (2026)

Protein Language Models Diverge from Natural Language: Comparative Analysis and Improved Inference
von: Hart, Anna, et al.
Veröffentlicht: (2026)