Learning to Generate Instruction Tuning Datasets for Zero-Shot Task Adaptation
Fuente:
arXiv
Salvato in:
| Autori principali: | Nayak, Nihal V., Nan, Yiyang, Trost, Avi, Bach, Stephen H. |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
$100K or 100 Days: Trade-offs when Pre-Training with Academic Resources
di: Khandelwal, Apoorv, et al.
Pubblicazione: (2024)
di: Khandelwal, Apoorv, et al.
Pubblicazione: (2024)
K-Paths: Reasoning over Graph Paths for Drug Repurposing and Drug Interaction Prediction
di: Abdullahi, Tassallah, et al.
Pubblicazione: (2025)
di: Abdullahi, Tassallah, et al.
Pubblicazione: (2025)
The Right Time Matters: Data Arrangement Affects Zero-Shot Generalization in Instruction Tuning
di: He, Bingxiang, et al.
Pubblicazione: (2024)
di: He, Bingxiang, et al.
Pubblicazione: (2024)
M$^2$PT: Multimodal Prompt Tuning for Zero-shot Instruction Learning
di: Wang, Taowen, et al.
Pubblicazione: (2024)
di: Wang, Taowen, et al.
Pubblicazione: (2024)
FocalLens: Instruction Tuning Enables Zero-Shot Conditional Image Representations
di: Hsieh, Cheng-Yu, et al.
Pubblicazione: (2025)
di: Hsieh, Cheng-Yu, et al.
Pubblicazione: (2025)
Zero-Shot Detection of LLM-Generated Code via Approximated Task Conditioning
di: Ashkenazi, Maor, et al.
Pubblicazione: (2025)
di: Ashkenazi, Maor, et al.
Pubblicazione: (2025)
Generative Representational Instruction Tuning
di: Muennighoff, Niklas, et al.
Pubblicazione: (2024)
di: Muennighoff, Niklas, et al.
Pubblicazione: (2024)
Spotting LLMs With Binoculars: Zero-Shot Detection of Machine-Generated Text
di: Hans, Abhimanyu, et al.
Pubblicazione: (2024)
di: Hans, Abhimanyu, et al.
Pubblicazione: (2024)
On the Effect of Instruction Tuning Loss on Generalization
di: Chatterjee, Anwoy, et al.
Pubblicazione: (2025)
di: Chatterjee, Anwoy, et al.
Pubblicazione: (2025)
Zero-Shot Conversational Stance Detection: Dataset and Approaches
di: Ding, Yuzhe, et al.
Pubblicazione: (2025)
di: Ding, Yuzhe, et al.
Pubblicazione: (2025)
Diversity Measurement and Subset Selection for Instruction Tuning Datasets
di: Wang, Peiqi, et al.
Pubblicazione: (2024)
di: Wang, Peiqi, et al.
Pubblicazione: (2024)
Preference Tuning For Toxicity Mitigation Generalizes Across Languages
di: Li, Xiaochen, et al.
Pubblicazione: (2024)
di: Li, Xiaochen, et al.
Pubblicazione: (2024)
S0 Tuning: Zero-Overhead Adaptation of Hybrid Recurrent-Attention Models
di: Young, Jack
Pubblicazione: (2026)
di: Young, Jack
Pubblicazione: (2026)
SHED: Shapley-Based Automated Dataset Refinement for Instruction Fine-Tuning
di: He, Yexiao, et al.
Pubblicazione: (2024)
di: He, Yexiao, et al.
Pubblicazione: (2024)
Layer by Layer: Uncovering Where Multi-Task Learning Happens in Instruction-Tuned Large Language Models
di: Zhao, Zheng, et al.
Pubblicazione: (2024)
di: Zhao, Zheng, et al.
Pubblicazione: (2024)
Zero-Shot Generalizable End-to-End Task-Oriented Dialog System using Context Summarization and Domain Schema
di: Mosharrof, Adib, et al.
Pubblicazione: (2023)
di: Mosharrof, Adib, et al.
Pubblicazione: (2023)
Investigating Task Arithmetic for Zero-Shot Information Retrieval
di: Braga, Marco, et al.
Pubblicazione: (2025)
di: Braga, Marco, et al.
Pubblicazione: (2025)
Evaluating Compact LLMs for Zero-Shot Iberian Language Tasks on End-User Devices
di: Seller, Luís Couto, et al.
Pubblicazione: (2025)
di: Seller, Luís Couto, et al.
Pubblicazione: (2025)
Automated Instruction Revision (AIR): A Structured Comparison of Task Adaptation Strategies for LLM
di: Bilyk, Solomiia, et al.
Pubblicazione: (2026)
di: Bilyk, Solomiia, et al.
Pubblicazione: (2026)
LyS at SemEval 2025 Task 8: Zero-Shot Code Generation for Tabular QA
di: Gude, Adrián, et al.
Pubblicazione: (2025)
di: Gude, Adrián, et al.
Pubblicazione: (2025)
Leveraging Large Language Models for Structure Learning in Prompted Weak Supervision
di: Su, Jinyan, et al.
Pubblicazione: (2024)
di: Su, Jinyan, et al.
Pubblicazione: (2024)
MURI: High-Quality Instruction Tuning Datasets for Low-Resource Languages via Reverse Instructions
di: Köksal, Abdullatif, et al.
Pubblicazione: (2024)
di: Köksal, Abdullatif, et al.
Pubblicazione: (2024)
SMART: Submodular Data Mixture Strategy for Instruction Tuning
di: Renduchintala, H S V N S Kowndinya, et al.
Pubblicazione: (2024)
di: Renduchintala, H S V N S Kowndinya, et al.
Pubblicazione: (2024)
Mortgage Language Model: Domain-Adaptive Pretraining with Residual Instruction, Alignment Tuning, and Task-Specific Routing
di: Jain, Manish, et al.
Pubblicazione: (2025)
di: Jain, Manish, et al.
Pubblicazione: (2025)
Dynamic Adaptation of LoRA Fine-Tuning for Efficient and Task-Specific Optimization of Large Language Models
di: Liao, Xiaoxuan, et al.
Pubblicazione: (2025)
di: Liao, Xiaoxuan, et al.
Pubblicazione: (2025)
Instruction-Tuned, but Not More Verifiable Instruction-Following: A Cross-Task Diagnosis for LoRA Adapters
di: Zou, Junyi
Pubblicazione: (2026)
di: Zou, Junyi
Pubblicazione: (2026)
MDCure: A Scalable Pipeline for Multi-Document Instruction-Following
di: Liu, Gabrielle Kaili-May, et al.
Pubblicazione: (2024)
di: Liu, Gabrielle Kaili-May, et al.
Pubblicazione: (2024)
ICXML: An In-Context Learning Framework for Zero-Shot Extreme Multi-Label Classification
di: Zhu, Yaxin, et al.
Pubblicazione: (2023)
di: Zhu, Yaxin, et al.
Pubblicazione: (2023)
TAGCOS: Task-agnostic Gradient Clustered Coreset Selection for Instruction Tuning Data
di: Zhang, Jipeng, et al.
Pubblicazione: (2024)
di: Zhang, Jipeng, et al.
Pubblicazione: (2024)
Revisiting Generalization Across Difficulty Levels: It's Not So Easy
di: Kordi, Yeganeh, et al.
Pubblicazione: (2025)
di: Kordi, Yeganeh, et al.
Pubblicazione: (2025)
LexC-Gen: Generating Data for Extremely Low-Resource Languages with Large Language Models and Bilingual Lexicons
di: Yong, Zheng-Xin, et al.
Pubblicazione: (2024)
di: Yong, Zheng-Xin, et al.
Pubblicazione: (2024)
Instruction Diversity Drives Generalization To Unseen Tasks
di: Zhang, Dylan, et al.
Pubblicazione: (2024)
di: Zhang, Dylan, et al.
Pubblicazione: (2024)
CLIP meets DINO for Tuning Zero-Shot Classifier using Unlabeled Image Collections
di: Imam, Mohamed Fazli, et al.
Pubblicazione: (2024)
di: Imam, Mohamed Fazli, et al.
Pubblicazione: (2024)
TOFU: A Task of Fictitious Unlearning for LLMs
di: Maini, Pratyush, et al.
Pubblicazione: (2024)
di: Maini, Pratyush, et al.
Pubblicazione: (2024)
Prompt-Based Bias Calibration for Better Zero/Few-Shot Learning of Language Models
di: He, Kang, et al.
Pubblicazione: (2024)
di: He, Kang, et al.
Pubblicazione: (2024)
CoMMIT: Coordinated Multimodal Instruction Tuning
di: Li, Xintong, et al.
Pubblicazione: (2024)
di: Li, Xintong, et al.
Pubblicazione: (2024)
Data Diversity Matters for Robust Instruction Tuning
di: Bukharin, Alexander, et al.
Pubblicazione: (2023)
di: Bukharin, Alexander, et al.
Pubblicazione: (2023)
Follow-Up Differential Descriptions: Language Models Resolve Ambiguities for Image Classification
di: Esfandiarpoor, Reza, et al.
Pubblicazione: (2023)
di: Esfandiarpoor, Reza, et al.
Pubblicazione: (2023)
Test-Time Scaling Makes Overtraining Compute-Optimal
di: Roberts, Nicholas, et al.
Pubblicazione: (2026)
di: Roberts, Nicholas, et al.
Pubblicazione: (2026)
Says Who? Effective Zero-Shot Annotation of Focalization
di: Hicke, Rebecca M. M., et al.
Pubblicazione: (2024)
di: Hicke, Rebecca M. M., et al.
Pubblicazione: (2024)
Documenti analoghi
-
$100K or 100 Days: Trade-offs when Pre-Training with Academic Resources
di: Khandelwal, Apoorv, et al.
Pubblicazione: (2024) -
K-Paths: Reasoning over Graph Paths for Drug Repurposing and Drug Interaction Prediction
di: Abdullahi, Tassallah, et al.
Pubblicazione: (2025) -
The Right Time Matters: Data Arrangement Affects Zero-Shot Generalization in Instruction Tuning
di: He, Bingxiang, et al.
Pubblicazione: (2024) -
M$^2$PT: Multimodal Prompt Tuning for Zero-shot Instruction Learning
di: Wang, Taowen, et al.
Pubblicazione: (2024) -
FocalLens: Instruction Tuning Enables Zero-Shot Conditional Image Representations
di: Hsieh, Cheng-Yu, et al.
Pubblicazione: (2025)