Gespeichert in:
| Hauptverfasser: | Kim, Hwichan, Sasaki, Shota, Hoshino, Sho, Honda, Ukyo |
|---|---|
| Format: | Preprint |
| Veröffentlicht: |
2024
|
| Schlagworte: | |
| Online-Zugang: | https://arxiv.org/abs/2403.14946 |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Ähnliche Einträge
Revisiting the Capacity Gap in Chain-of-Thought Distillation from a Practical Perspective
von: Kajitsuka, Tokio, et al.
Veröffentlicht: (2026)
von: Kajitsuka, Tokio, et al.
Veröffentlicht: (2026)
Annotation-Efficient Language Model Alignment via Diverse and Representative Response Texts
von: Jinnai, Yuu, et al.
Veröffentlicht: (2024)
von: Jinnai, Yuu, et al.
Veröffentlicht: (2024)
Exploring Explanations Improves the Robustness of In-Context Learning
von: Honda, Ukyo, et al.
Veröffentlicht: (2025)
von: Honda, Ukyo, et al.
Veröffentlicht: (2025)
Does Self-Consistency Improve the Recall of Encyclopedic Knowledge?
von: Hoshino, Sho, et al.
Veröffentlicht: (2026)
von: Hoshino, Sho, et al.
Veröffentlicht: (2026)
Assigning Distinct Roles to Quantized and Low-Rank Matrices Toward Optimal Weight Decomposition
von: Cho, Yoonjun, et al.
Veröffentlicht: (2025)
von: Cho, Yoonjun, et al.
Veröffentlicht: (2025)
LoLCATs: On Low-Rank Linearizing of Large Language Models
von: Zhang, Michael, et al.
Veröffentlicht: (2024)
von: Zhang, Michael, et al.
Veröffentlicht: (2024)
LoRI: Reducing Cross-Task Interference in Multi-Task Low-Rank Adaptation
von: Zhang, Juzheng, et al.
Veröffentlicht: (2025)
von: Zhang, Juzheng, et al.
Veröffentlicht: (2025)
MTL-LoRA: Low-Rank Adaptation for Multi-Task Learning
von: Yang, Yaming, et al.
Veröffentlicht: (2024)
von: Yang, Yaming, et al.
Veröffentlicht: (2024)
Toward LLMs Beyond English-Centric Development
von: Takase, Sho, et al.
Veröffentlicht: (2026)
von: Takase, Sho, et al.
Veröffentlicht: (2026)
CeRA: Overcoming the Linear Ceiling of Low-Rank Adaptation via Capacity Expansion
von: Chen, Hung-Hsuan
Veröffentlicht: (2026)
von: Chen, Hung-Hsuan
Veröffentlicht: (2026)
On the True Distribution Approximation of Minimum Bayes-Risk Decoding
von: Ohashi, Atsumoto, et al.
Veröffentlicht: (2024)
von: Ohashi, Atsumoto, et al.
Veröffentlicht: (2024)
Generating Diverse and High-Quality Texts by Minimum Bayes Risk Decoding
von: Jinnai, Yuu, et al.
Veröffentlicht: (2024)
von: Jinnai, Yuu, et al.
Veröffentlicht: (2024)
MoR: Mixture of Ranks for Low-Rank Adaptation Tuning
von: Tang, Chuanyu, et al.
Veröffentlicht: (2024)
von: Tang, Chuanyu, et al.
Veröffentlicht: (2024)
Ensembles of Low-Rank Expert Adapters
von: Li, Yinghao, et al.
Veröffentlicht: (2025)
von: Li, Yinghao, et al.
Veröffentlicht: (2025)
The Expressive Power of Low-Rank Adaptation
von: Zeng, Yuchen, et al.
Veröffentlicht: (2023)
von: Zeng, Yuchen, et al.
Veröffentlicht: (2023)
From Symbolic Tasks to Code Generation: Diversification Yields Better Task Performers
von: Zhang, Dylan, et al.
Veröffentlicht: (2024)
von: Zhang, Dylan, et al.
Veröffentlicht: (2024)
Not Eliminate but Aggregate: Post-Hoc Control over Mixture-of-Experts to Address Shortcut Shifts in Natural Language Understanding
von: Honda, Ukyo, et al.
Veröffentlicht: (2024)
von: Honda, Ukyo, et al.
Veröffentlicht: (2024)
Low-Rank Quantization-Aware Training for LLMs
von: Bondarenko, Yelysei, et al.
Veröffentlicht: (2024)
von: Bondarenko, Yelysei, et al.
Veröffentlicht: (2024)
Variational Low-Rank Adaptation Using IVON
von: Cong, Bai, et al.
Veröffentlicht: (2024)
von: Cong, Bai, et al.
Veröffentlicht: (2024)
Batched Low-Rank Adaptation of Foundation Models
von: Wen, Yeming, et al.
Veröffentlicht: (2023)
von: Wen, Yeming, et al.
Veröffentlicht: (2023)
Training Acceleration of Low-Rank Decomposed Networks using Sequential Freezing and Rank Quantization
von: Hajimolahoseini, Habib, et al.
Veröffentlicht: (2023)
von: Hajimolahoseini, Habib, et al.
Veröffentlicht: (2023)
A3 : an Analytical Low-Rank Approximation Framework for Attention
von: Wong, Jeffrey T. H., et al.
Veröffentlicht: (2025)
von: Wong, Jeffrey T. H., et al.
Veröffentlicht: (2025)
SwitchLoRA: Switched Low-Rank Adaptation Can Learn Full-Rank Information
von: Zhou, Kaiye, et al.
Veröffentlicht: (2024)
von: Zhou, Kaiye, et al.
Veröffentlicht: (2024)
LoTR: Low Tensor Rank Weight Adaptation
von: Bershatsky, Daniel, et al.
Veröffentlicht: (2024)
von: Bershatsky, Daniel, et al.
Veröffentlicht: (2024)
LoRMA: Low-Rank Multiplicative Adaptation for LLMs
von: Bihany, Harsh, et al.
Veröffentlicht: (2025)
von: Bihany, Harsh, et al.
Veröffentlicht: (2025)
Low-Rank Adaptation for Multilingual Summarization: An Empirical Study
von: Whitehouse, Chenxi, et al.
Veröffentlicht: (2023)
von: Whitehouse, Chenxi, et al.
Veröffentlicht: (2023)
AutoLoRA: Automatically Tuning Matrix Ranks in Low-Rank Adaptation Based on Meta Learning
von: Zhang, Ruiyi, et al.
Veröffentlicht: (2024)
von: Zhang, Ruiyi, et al.
Veröffentlicht: (2024)
Model-Based Minimum Bayes Risk Decoding for Text Generation
von: Jinnai, Yuu, et al.
Veröffentlicht: (2023)
von: Jinnai, Yuu, et al.
Veröffentlicht: (2023)
Beyond Perplexity: A Geometric and Spectral Study of Low-Rank Pre-Training
von: Shivagunde, Namrata, et al.
Veröffentlicht: (2026)
von: Shivagunde, Namrata, et al.
Veröffentlicht: (2026)
LoRA-Pro: Are Low-Rank Adapters Properly Optimized?
von: Wang, Zhengbo, et al.
Veröffentlicht: (2024)
von: Wang, Zhengbo, et al.
Veröffentlicht: (2024)
SBoRA: Low-Rank Adaptation with Regional Weight Updates
von: Po, Lai-Man, et al.
Veröffentlicht: (2024)
von: Po, Lai-Man, et al.
Veröffentlicht: (2024)
LoRA+: Efficient Low Rank Adaptation of Large Models
von: Hayou, Soufiane, et al.
Veröffentlicht: (2024)
von: Hayou, Soufiane, et al.
Veröffentlicht: (2024)
Sequences of Logits Reveal the Low Rank Structure of Language Models
von: Golowich, Noah, et al.
Veröffentlicht: (2025)
von: Golowich, Noah, et al.
Veröffentlicht: (2025)
GoRA: Gradient-driven Adaptive Low Rank Adaptation
von: He, Haonan, et al.
Veröffentlicht: (2025)
von: He, Haonan, et al.
Veröffentlicht: (2025)
Multiple Choice Learning of Low-Rank Adapters for Language Modeling
von: Letzelter, Victor, et al.
Veröffentlicht: (2025)
von: Letzelter, Victor, et al.
Veröffentlicht: (2025)
Not How Many, But Which: Parameter Placement in Low-Rank Adaptation
von: Sehanobish, Arijit, et al.
Veröffentlicht: (2026)
von: Sehanobish, Arijit, et al.
Veröffentlicht: (2026)
Localized LoRA: A Structured Low-Rank Approximation for Efficient Fine-Tuning
von: Barazandeh, Babak, et al.
Veröffentlicht: (2025)
von: Barazandeh, Babak, et al.
Veröffentlicht: (2025)
Training-Free Bayesianization for Low-Rank Adapters of Large Language Models
von: Shi, Haizhou, et al.
Veröffentlicht: (2024)
von: Shi, Haizhou, et al.
Veröffentlicht: (2024)
Eigen Attention: Attention in Low-Rank Space for KV Cache Compression
von: Saxena, Utkarsh, et al.
Veröffentlicht: (2024)
von: Saxena, Utkarsh, et al.
Veröffentlicht: (2024)
Assessing the Brittleness of Safety Alignment via Pruning and Low-Rank Modifications
von: Wei, Boyi, et al.
Veröffentlicht: (2024)
von: Wei, Boyi, et al.
Veröffentlicht: (2024)
Ähnliche Einträge
-
Revisiting the Capacity Gap in Chain-of-Thought Distillation from a Practical Perspective
von: Kajitsuka, Tokio, et al.
Veröffentlicht: (2026) -
Annotation-Efficient Language Model Alignment via Diverse and Representative Response Texts
von: Jinnai, Yuu, et al.
Veröffentlicht: (2024) -
Exploring Explanations Improves the Robustness of In-Context Learning
von: Honda, Ukyo, et al.
Veröffentlicht: (2025) -
Does Self-Consistency Improve the Recall of Encyclopedic Knowledge?
von: Hoshino, Sho, et al.
Veröffentlicht: (2026) -
Assigning Distinct Roles to Quantized and Low-Rank Matrices Toward Optimal Weight Decomposition
von: Cho, Yoonjun, et al.
Veröffentlicht: (2025)