Beyond IID: Optimizing Instruction Learning from the Perspective of Instruction Interaction and Dependency
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Zhao, Hanyu, Du, Li, Ju, Yiming, Wu, Chengwei, Pan, Tengfei |
|---|---|
| Format: | Preprint |
| Publié: |
2024
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
Scaling Towards the Information Boundary of Instruction Sets: The Infinity Instruct Subject Technical Report
par: Du, Li, et autres
Publié: (2025)
par: Du, Li, et autres
Publié: (2025)
Accelerate Scaling of LLM Finetuning via Quantifying the Coverage and Depth of Instruction Set
par: Wu, Chengwei, et autres
Publié: (2025)
par: Wu, Chengwei, et autres
Publié: (2025)
Infinity Instruct: Scaling Instruction Selection and Synthesis to Enhance Language Models
par: Li, Jijie, et autres
Publié: (2025)
par: Li, Jijie, et autres
Publié: (2025)
Instruction Embedding: Latent Representations of Instructions Towards Task Identification
par: Li, Yiwei, et autres
Publié: (2024)
par: Li, Yiwei, et autres
Publié: (2024)
AIR: Complex Instruction Generation via Automatic Iterative Refinement
par: Liu, Wei, et autres
Publié: (2025)
par: Liu, Wei, et autres
Publié: (2025)
I2EDL: Interactive Instruction Error Detection and Localization
par: Taioli, Francesco, et autres
Publié: (2024)
par: Taioli, Francesco, et autres
Publié: (2024)
Instruction Tuning With Loss Over Instructions
par: Shi, Zhengyan, et autres
Publié: (2024)
par: Shi, Zhengyan, et autres
Publié: (2024)
Provable Interactive Learning with Hindsight Instruction Feedback
par: Misra, Dipendra, et autres
Publié: (2024)
par: Misra, Dipendra, et autres
Publié: (2024)
AutoManual: Constructing Instruction Manuals by LLM Agents via Interactive Environmental Learning
par: Chen, Minghao, et autres
Publié: (2024)
par: Chen, Minghao, et autres
Publié: (2024)
Beyond Imitation: Learning Key Reasoning Steps from Dual Chain-of-Thoughts in Reasoning Distillation
par: Dai, Chengwei, et autres
Publié: (2024)
par: Dai, Chengwei, et autres
Publié: (2024)
Instructions are all you need: Self-supervised Reinforcement Learning for Instruction Following
par: Ren, Qingyu, et autres
Publié: (2025)
par: Ren, Qingyu, et autres
Publié: (2025)
Beyond Instruction Following: Evaluating Inferential Rule Following of Large Language Models
par: Sun, Wangtao, et autres
Publié: (2024)
par: Sun, Wangtao, et autres
Publié: (2024)
Beyond Bilingual Transfer: Multilingual Code-Switching in Instruction Tuning
par: Asano, Shunta, et autres
Publié: (2026)
par: Asano, Shunta, et autres
Publié: (2026)
Benchmarking Complex Instruction-Following with Multiple Constraints Composition
par: Wen, Bosi, et autres
Publié: (2024)
par: Wen, Bosi, et autres
Publié: (2024)
Optimizing Psychological Counseling with Instruction-Tuned Large Language Models
par: Li, Wenjie, et autres
Publié: (2024)
par: Li, Wenjie, et autres
Publié: (2024)
Optimizing Instruction Synthesis: Effective Exploration of Evolutionary Space with Tree Search
par: Li, Chenglin, et autres
Publié: (2024)
par: Li, Chenglin, et autres
Publié: (2024)
Generation-driven Contrastive Self-training for Zero-shot Text Classification with Instruction-following LLM
par: Zhang, Ruohong, et autres
Publié: (2023)
par: Zhang, Ruohong, et autres
Publié: (2023)
The Instruction Gap: LLMs get lost in Following Instruction
par: Tripathi, Vishesh, et autres
Publié: (2025)
par: Tripathi, Vishesh, et autres
Publié: (2025)
From Language Modeling to Instruction Following: Understanding the Behavior Shift in LLMs after Instruction Tuning
par: Wu, Xuansheng, et autres
Publié: (2023)
par: Wu, Xuansheng, et autres
Publié: (2023)
COSMIC: Data Efficient Instruction-tuning For Speech In-Context Learning
par: Pan, Jing, et autres
Publié: (2023)
par: Pan, Jing, et autres
Publié: (2023)
VerIF: Verification Engineering for Reinforcement Learning in Instruction Following
par: Peng, Hao, et autres
Publié: (2025)
par: Peng, Hao, et autres
Publié: (2025)
MUFFIN: Curating Multi-Faceted Instructions for Improving Instruction-Following
par: Lou, Renze, et autres
Publié: (2023)
par: Lou, Renze, et autres
Publié: (2023)
MathFusion: Enhancing Mathematical Problem-solving of LLM through Instruction Fusion
par: Pei, Qizhi, et autres
Publié: (2025)
par: Pei, Qizhi, et autres
Publié: (2025)
Memory Reviving, Continuing Learning and Beyond: Evaluation of Pre-trained Encoders and Decoders for Multimodal Machine Translation
par: Yu, Zhuang, et autres
Publié: (2025)
par: Yu, Zhuang, et autres
Publié: (2025)
Is In-Context Learning Sufficient for Instruction Following in LLMs?
par: Zhao, Hao, et autres
Publié: (2024)
par: Zhao, Hao, et autres
Publié: (2024)
UltraIF: Advancing Instruction Following from the Wild
par: An, Kaikai, et autres
Publié: (2025)
par: An, Kaikai, et autres
Publié: (2025)
EchoQA: A Large Collection of Instruction Tuning Data for Echocardiogram Reports
par: Moukheiber, Lama, et autres
Publié: (2025)
par: Moukheiber, Lama, et autres
Publié: (2025)
Joint Flashback Adaptation for Forgetting-Resistant Instruction Tuning
par: Zhao, Yukun, et autres
Publié: (2025)
par: Zhao, Yukun, et autres
Publié: (2025)
CrowdSelect: Synthetic Instruction Data Selection with Multi-LLM Wisdom
par: Li, Yisen, et autres
Publié: (2025)
par: Li, Yisen, et autres
Publié: (2025)
IOPO: Empowering LLMs with Complex Instruction Following via Input-Output Preference Optimization
par: Zhang, Xinghua, et autres
Publié: (2024)
par: Zhang, Xinghua, et autres
Publié: (2024)
X-Instruction: Aligning Language Model in Low-resource Languages with Self-curated Cross-lingual Instructions
par: Li, Chong, et autres
Publié: (2024)
par: Li, Chong, et autres
Publié: (2024)
InstaTrans: An Instruction-Aware Translation Framework for Non-English Instruction Datasets
par: Kim, Yungi, et autres
Publié: (2024)
par: Kim, Yungi, et autres
Publié: (2024)
Automatic Instruction Evolving for Large Language Models
par: Zeng, Weihao, et autres
Publié: (2024)
par: Zeng, Weihao, et autres
Publié: (2024)
COIG-CQIA: Quality is All You Need for Chinese Instruction Fine-tuning
par: Bai, Yuelin, et autres
Publié: (2024)
par: Bai, Yuelin, et autres
Publié: (2024)
SwitchCIT: Switching for Continual Instruction Tuning
par: Wu, Xinbo, et autres
Publié: (2024)
par: Wu, Xinbo, et autres
Publié: (2024)
Acquiring Grounded Representations of Words with Situated Interactive Instruction
par: Mohan, Shiwali, et autres
Publié: (2025)
par: Mohan, Shiwali, et autres
Publié: (2025)
Star-Agents: Automatic Data Optimization with LLM Agents for Instruction Tuning
par: Zhou, Hang, et autres
Publié: (2024)
par: Zhou, Hang, et autres
Publié: (2024)
PandaLM: An Automatic Evaluation Benchmark for LLM Instruction Tuning Optimization
par: Wang, Yidong, et autres
Publié: (2023)
par: Wang, Yidong, et autres
Publié: (2023)
One-Shot Learning as Instruction Data Prospector for Large Language Models
par: Li, Yunshui, et autres
Publié: (2023)
par: Li, Yunshui, et autres
Publié: (2023)
Bridging Writing Manner Gap in Visual Instruction Tuning by Creating LLM-aligned Instructions
par: Jing, Dong, et autres
Publié: (2025)
par: Jing, Dong, et autres
Publié: (2025)
Documents similaires
-
Scaling Towards the Information Boundary of Instruction Sets: The Infinity Instruct Subject Technical Report
par: Du, Li, et autres
Publié: (2025) -
Accelerate Scaling of LLM Finetuning via Quantifying the Coverage and Depth of Instruction Set
par: Wu, Chengwei, et autres
Publié: (2025) -
Infinity Instruct: Scaling Instruction Selection and Synthesis to Enhance Language Models
par: Li, Jijie, et autres
Publié: (2025) -
Instruction Embedding: Latent Representations of Instructions Towards Task Identification
par: Li, Yiwei, et autres
Publié: (2024) -
AIR: Complex Instruction Generation via Automatic Iterative Refinement
par: Liu, Wei, et autres
Publié: (2025)