Conditional LoRA Parameter Generation
Fuente:
arXiv
Salvato in:
| Autori principali: | Jin, Xiaolong, Wang, Kai, Tang, Dongwen, Zhao, Wangbo, Zhou, Yukun, Tang, Junshu, You, Yang |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Recurrent Diffusion for Large-Scale Parameter Generation
di: Wang, Kai, et al.
Pubblicazione: (2025)
di: Wang, Kai, et al.
Pubblicazione: (2025)
Semantic-guided LoRA Parameters Generation
di: Li, Miaoge, et al.
Pubblicazione: (2025)
di: Li, Miaoge, et al.
Pubblicazione: (2025)
ORAL: Prompting Your Large-Scale LoRAs via Conditional Recurrent Diffusion
di: Khan, Rana Muhammad Shahroz, et al.
Pubblicazione: (2025)
di: Khan, Rana Muhammad Shahroz, et al.
Pubblicazione: (2025)
Text-to-LoRA: Instant Transformer Adaption
di: Charakorn, Rujikorn, et al.
Pubblicazione: (2025)
di: Charakorn, Rujikorn, et al.
Pubblicazione: (2025)
LoRA-Mixer: Coordinate Modular LoRA Experts Through Serial Attention Routing
di: Li, Wenbing, et al.
Pubblicazione: (2025)
di: Li, Wenbing, et al.
Pubblicazione: (2025)
SCALE-LoRA: Auditing Post-Retrieval LoRA Composition with Residual Merging and View Reliability
di: Zhou, Shuaipeng, et al.
Pubblicazione: (2026)
di: Zhou, Shuaipeng, et al.
Pubblicazione: (2026)
LoRA Dropout as a Sparsity Regularizer for Overfitting Control
di: Lin, Yang, et al.
Pubblicazione: (2024)
di: Lin, Yang, et al.
Pubblicazione: (2024)
HiLoRA: Adaptive Hierarchical LoRA Routing for Training-Free Domain Generalization
di: Han, Ziyi, et al.
Pubblicazione: (2025)
di: Han, Ziyi, et al.
Pubblicazione: (2025)
Kron-LoRA: Hybrid Kronecker-LoRA Adapters for Scalable, Sustainable Fine-tuning
di: Shen, Yixin
Pubblicazione: (2025)
di: Shen, Yixin
Pubblicazione: (2025)
R-LoRA: Randomized Multi-Head LoRA for Efficient Multi-Task Learning
di: Liu, Jinda, et al.
Pubblicazione: (2025)
di: Liu, Jinda, et al.
Pubblicazione: (2025)
LoRA Done RITE: Robust Invariant Transformation Equilibration for LoRA Optimization
di: Yen, Jui-Nan, et al.
Pubblicazione: (2024)
di: Yen, Jui-Nan, et al.
Pubblicazione: (2024)
SC-LoRA: Balancing Efficient Fine-tuning and Knowledge Preservation via Subspace-Constrained LoRA
di: Luo, Minrui, et al.
Pubblicazione: (2025)
di: Luo, Minrui, et al.
Pubblicazione: (2025)
mLoRA: Fine-Tuning LoRA Adapters via Highly-Efficient Pipeline Parallelism in Multiple GPUs
di: Ye, Zhengmao, et al.
Pubblicazione: (2023)
di: Ye, Zhengmao, et al.
Pubblicazione: (2023)
S-LoRA: Serving Thousands of Concurrent LoRA Adapters
di: Sheng, Ying, et al.
Pubblicazione: (2023)
di: Sheng, Ying, et al.
Pubblicazione: (2023)
Parameter-Efficient Fine-Tuning for HAR: Integrating LoRA and QLoRA into Transformer Models
di: Seregina, Irina, et al.
Pubblicazione: (2025)
di: Seregina, Irina, et al.
Pubblicazione: (2025)
LoRA on the Go: Instance-level Dynamic LoRA Selection and Merging
di: Lee, Seungeon, et al.
Pubblicazione: (2025)
di: Lee, Seungeon, et al.
Pubblicazione: (2025)
Echo-LoRA: Parameter-Efficient Fine-Tuning via Cross-Layer Representation Injection
di: Peng, Yihang, et al.
Pubblicazione: (2026)
di: Peng, Yihang, et al.
Pubblicazione: (2026)
BID-LoRA: A Parameter-Efficient Framework for Continual Learning and Unlearning
di: Rachapudi, Jagadeesh, et al.
Pubblicazione: (2026)
di: Rachapudi, Jagadeesh, et al.
Pubblicazione: (2026)
$\textit{Trans-LoRA}$: towards data-free Transferable Parameter Efficient Finetuning
di: Wang, Runqian, et al.
Pubblicazione: (2024)
di: Wang, Runqian, et al.
Pubblicazione: (2024)
FiLoRA: Focus-and-Ignore LoRA for Controllable Feature Reliance
di: Chung, Hyunsuk, et al.
Pubblicazione: (2026)
di: Chung, Hyunsuk, et al.
Pubblicazione: (2026)
On-the-Fly Adaptation to Quantization: Configuration-Aware LoRA for Efficient Fine-Tuning of Quantized LLMs
di: Ye, Rongguang, et al.
Pubblicazione: (2025)
di: Ye, Rongguang, et al.
Pubblicazione: (2025)
Retrieval-Augmented Mixture of LoRA Experts for Uploadable Machine Learning
di: Zhao, Ziyu, et al.
Pubblicazione: (2024)
di: Zhao, Ziyu, et al.
Pubblicazione: (2024)
ALTO: Adaptive LoRA Tuning and Orchestration for Heterogeneous LoRA Training Workloads
di: Zuo, Jingwei, et al.
Pubblicazione: (2026)
di: Zuo, Jingwei, et al.
Pubblicazione: (2026)
FairNet: Dynamic Fairness Correction without Performance Loss via Contrastive Conditional LoRA
di: Zhou, Songqi, et al.
Pubblicazione: (2025)
di: Zhou, Songqi, et al.
Pubblicazione: (2025)
A Note on LoRA
di: Fomenko, Vlad, et al.
Pubblicazione: (2024)
di: Fomenko, Vlad, et al.
Pubblicazione: (2024)
Riemannian Optimization for LoRA on the Stiefel Manifold
di: Park, Juneyoung, et al.
Pubblicazione: (2025)
di: Park, Juneyoung, et al.
Pubblicazione: (2025)
Subliminal Learning is a LoRA Artifact
di: Nief, Todd, et al.
Pubblicazione: (2026)
di: Nief, Todd, et al.
Pubblicazione: (2026)
FedTreeLoRA: Reconciling Statistical and Functional Heterogeneity in Federated LoRA Fine-Tuning
di: Bian, Jieming, et al.
Pubblicazione: (2026)
di: Bian, Jieming, et al.
Pubblicazione: (2026)
Rethinking LoRA for Privacy-Preserving Federated Learning in Large Models
di: Liu, Jin, et al.
Pubblicazione: (2026)
di: Liu, Jin, et al.
Pubblicazione: (2026)
KD-LoRA: A Hybrid Approach to Efficient Fine-Tuning with LoRA and Knowledge Distillation
di: Azimi, Rambod, et al.
Pubblicazione: (2024)
di: Azimi, Rambod, et al.
Pubblicazione: (2024)
Hierarchical LoRA MoE for Efficient CTR Model Scaling
di: Zeng, Zhichen, et al.
Pubblicazione: (2025)
di: Zeng, Zhichen, et al.
Pubblicazione: (2025)
IterIS: Iterative Inference-Solving Alignment for LoRA Merging
di: Chen, Hongxu, et al.
Pubblicazione: (2024)
di: Chen, Hongxu, et al.
Pubblicazione: (2024)
Improving LoRA with Variational Learning
di: Cong, Bai, et al.
Pubblicazione: (2025)
di: Cong, Bai, et al.
Pubblicazione: (2025)
Activated LoRA: Fine-tuned LLMs for Intrinsics
di: Greenewald, Kristjan, et al.
Pubblicazione: (2025)
di: Greenewald, Kristjan, et al.
Pubblicazione: (2025)
Rethinking the Rank Threshold for LoRA Fine-Tuning
di: Park, Juneyoung
Pubblicazione: (2026)
di: Park, Juneyoung
Pubblicazione: (2026)
LoRA-XS: Low-Rank Adaptation with Extremely Small Number of Parameters
di: Bałazy, Klaudia, et al.
Pubblicazione: (2024)
di: Bałazy, Klaudia, et al.
Pubblicazione: (2024)
ALLoRA: Adaptive Learning Rate Mitigates LoRA Fatal Flaws
di: Huang, Hai, et al.
Pubblicazione: (2024)
di: Huang, Hai, et al.
Pubblicazione: (2024)
ST-LoRA: Low-rank Adaptation for Spatio-Temporal Forecasting
di: Ruan, Weilin, et al.
Pubblicazione: (2024)
di: Ruan, Weilin, et al.
Pubblicazione: (2024)
LoraRetriever: Input-Aware LoRA Retrieval and Composition for Mixed Tasks in the Wild
di: Zhao, Ziyu, et al.
Pubblicazione: (2024)
di: Zhao, Ziyu, et al.
Pubblicazione: (2024)
Train Small, Infer Large: Memory-Efficient LoRA Training for Large Language Models
di: Zhang, Jun, et al.
Pubblicazione: (2025)
di: Zhang, Jun, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Recurrent Diffusion for Large-Scale Parameter Generation
di: Wang, Kai, et al.
Pubblicazione: (2025) -
Semantic-guided LoRA Parameters Generation
di: Li, Miaoge, et al.
Pubblicazione: (2025) -
ORAL: Prompting Your Large-Scale LoRAs via Conditional Recurrent Diffusion
di: Khan, Rana Muhammad Shahroz, et al.
Pubblicazione: (2025) -
Text-to-LoRA: Instant Transformer Adaption
di: Charakorn, Rujikorn, et al.
Pubblicazione: (2025) -
LoRA-Mixer: Coordinate Modular LoRA Experts Through Serial Attention Routing
di: Li, Wenbing, et al.
Pubblicazione: (2025)