ICLEval: Evaluating In-Context Learning Ability of Large Language Models
Fuente:
arXiv
Salvato in:
| Autori principali: | Chen, Wentong, Lin, Yankai, Zhou, ZhenHao, Huang, HongYun, Jia, Yantao, Cao, Zhao, Wen, Ji-Rong |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Distilling Rule-based Knowledge into Large Language Models
di: Yang, Wenkai, et al.
Pubblicazione: (2023)
di: Yang, Wenkai, et al.
Pubblicazione: (2023)
DeepCritic: Deliberate Critique with Large Language Models
di: Yang, Wenkai, et al.
Pubblicazione: (2025)
di: Yang, Wenkai, et al.
Pubblicazione: (2025)
Extracting and Combining Abilities For Building Multi-lingual Ability-enhanced Large Language Models
di: Chen, Zhipeng, et al.
Pubblicazione: (2024)
di: Chen, Zhipeng, et al.
Pubblicazione: (2024)
Adaptive Ability Decomposing for Unlocking Large Reasoning Model Effective Reinforcement Learning
di: Chen, Zhipeng, et al.
Pubblicazione: (2026)
di: Chen, Zhipeng, et al.
Pubblicazione: (2026)
ALICE: A Multifaceted Evaluation Framework of Large Audio-Language Models' In-Context Learning Ability
di: Piao, Yen-Ting, et al.
Pubblicazione: (2026)
di: Piao, Yen-Ting, et al.
Pubblicazione: (2026)
Large Language Diffusion Models
di: Nie, Shen, et al.
Pubblicazione: (2025)
di: Nie, Shen, et al.
Pubblicazione: (2025)
Large Language Model-based Human-Agent Collaboration for Complex Task Solving
di: Feng, Xueyang, et al.
Pubblicazione: (2024)
di: Feng, Xueyang, et al.
Pubblicazione: (2024)
Are Emergent Abilities in Large Language Models just In-Context Learning?
di: Lu, Sheng, et al.
Pubblicazione: (2023)
di: Lu, Sheng, et al.
Pubblicazione: (2023)
Exploring Context Window of Large Language Models via Decomposed Positional Vectors
di: Dong, Zican, et al.
Pubblicazione: (2024)
di: Dong, Zican, et al.
Pubblicazione: (2024)
TopoPerception: A Shortcut-Free Evaluation of Global Visual Perception in Large Vision-Language Models
di: Zhou, Wenhao, et al.
Pubblicazione: (2025)
di: Zhou, Wenhao, et al.
Pubblicazione: (2025)
Neuro-Symbolic Artificial Intelligence: Towards Improving the Reasoning Abilities of Large Language Models
di: Yang, Xiao-Wen, et al.
Pubblicazione: (2025)
di: Yang, Xiao-Wen, et al.
Pubblicazione: (2025)
Actial: Activate Spatial Reasoning Ability of Multimodal Large Language Models
di: Zhan, Xiaoyu, et al.
Pubblicazione: (2025)
di: Zhan, Xiaoyu, et al.
Pubblicazione: (2025)
Rethinking the Evaluation for Conversational Recommendation in the Era of Large Language Models
di: Wang, Xiaolei, et al.
Pubblicazione: (2023)
di: Wang, Xiaolei, et al.
Pubblicazione: (2023)
Enhancing the Medical Context-Awareness Ability of LLMs via Multifaceted Self-Refinement Learning
di: Zhou, Yuxuan, et al.
Pubblicazione: (2025)
di: Zhou, Yuxuan, et al.
Pubblicazione: (2025)
Predicting Emergent Abilities with Infinite Resolution Evaluation
di: Hu, Shengding, et al.
Pubblicazione: (2023)
di: Hu, Shengding, et al.
Pubblicazione: (2023)
Evaluating the Ability of Large Language Models to Generate Verifiable Specifications in VeriFast
di: Fan, Wen, et al.
Pubblicazione: (2024)
di: Fan, Wen, et al.
Pubblicazione: (2024)
A Survey on Large Language Model based Autonomous Agents
di: Wang, Lei, et al.
Pubblicazione: (2023)
di: Wang, Lei, et al.
Pubblicazione: (2023)
Model Editing Harms General Abilities of Large Language Models: Regularization to the Rescue
di: Gu, Jia-Chen, et al.
Pubblicazione: (2024)
di: Gu, Jia-Chen, et al.
Pubblicazione: (2024)
NesTools: A Dataset for Evaluating Nested Tool Learning Abilities of Large Language Models
di: Han, Han, et al.
Pubblicazione: (2024)
di: Han, Han, et al.
Pubblicazione: (2024)
One Token Can Help! Learning Scalable and Pluggable Virtual Tokens for Retrieval-Augmented Large Language Models
di: Zhu, Yutao, et al.
Pubblicazione: (2024)
di: Zhu, Yutao, et al.
Pubblicazione: (2024)
Eliciting the Translation Ability of Large Language Models via Multilingual Finetuning with Translation Instructions
di: Li, Jiahuan, et al.
Pubblicazione: (2023)
di: Li, Jiahuan, et al.
Pubblicazione: (2023)
Representation Learning for Natural Language Processing
di: Liu, Zhiyuan, et al.
Pubblicazione: (2020)
di: Liu, Zhiyuan, et al.
Pubblicazione: (2020)
LLaDA 1.5: Variance-Reduced Preference Optimization for Large Language Diffusion Models
di: Zhu, Fengqi, et al.
Pubblicazione: (2025)
di: Zhu, Fengqi, et al.
Pubblicazione: (2025)
Investigating the Pre-Training Dynamics of In-Context Learning: Task Recognition vs. Task Learning
di: Wang, Xiaolei, et al.
Pubblicazione: (2024)
di: Wang, Xiaolei, et al.
Pubblicazione: (2024)
BAMBOO: A Comprehensive Benchmark for Evaluating Long Text Modeling Capacities of Large Language Models
di: Dong, Zican, et al.
Pubblicazione: (2023)
di: Dong, Zican, et al.
Pubblicazione: (2023)
User Behavior Simulation with Large Language Model based Agents
di: Wang, Lei, et al.
Pubblicazione: (2023)
di: Wang, Lei, et al.
Pubblicazione: (2023)
AutoLogi: Automated Generation of Logic Puzzles for Evaluating Reasoning Abilities of Large Language Models
di: Zhu, Qin, et al.
Pubblicazione: (2025)
di: Zhu, Qin, et al.
Pubblicazione: (2025)
The Role of Diversity in In-Context Learning for Large Language Models
di: Xiao, Wenyang, et al.
Pubblicazione: (2025)
di: Xiao, Wenyang, et al.
Pubblicazione: (2025)
Adaptive Principal Components Allocation with the $\ell_{2,g}$-regularized Gaussian Graphical Model for Efficient Fine-Tuning Large Models
di: Zheng, Jingjing, et al.
Pubblicazione: (2024)
di: Zheng, Jingjing, et al.
Pubblicazione: (2024)
From Pixels to Places: A Systematic Benchmark for Evaluating Image Geolocalization Ability in Large Language Models
di: Li, Lingyao, et al.
Pubblicazione: (2025)
di: Li, Lingyao, et al.
Pubblicazione: (2025)
FinDABench: Benchmarking Financial Data Analysis Ability of Large Language Models
di: Liu, Shu, et al.
Pubblicazione: (2024)
di: Liu, Shu, et al.
Pubblicazione: (2024)
Neuron-based Personality Trait Induction in Large Language Models
di: Deng, Jia, et al.
Pubblicazione: (2024)
di: Deng, Jia, et al.
Pubblicazione: (2024)
Counting Ability of Large Language Models and Impact of Tokenization
di: Zhang, Xiang, et al.
Pubblicazione: (2024)
di: Zhang, Xiang, et al.
Pubblicazione: (2024)
CITI: Enhancing Tool Utilizing Ability in Large Language Models without Sacrificing General Performance
di: Hao, Yupu, et al.
Pubblicazione: (2024)
di: Hao, Yupu, et al.
Pubblicazione: (2024)
Disentangling Language and Culture for Evaluating Multilingual Large Language Models
di: Ying, Jiahao, et al.
Pubblicazione: (2025)
di: Ying, Jiahao, et al.
Pubblicazione: (2025)
DAWN-ICL: Strategic Planning of Problem-solving Trajectories for Zero-Shot In-Context Learning
di: Tang, Xinyu, et al.
Pubblicazione: (2024)
di: Tang, Xinyu, et al.
Pubblicazione: (2024)
Scalable In-Context Learning on Tabular Data via Retrieval-Augmented Large Language Models
di: Wen, Xumeng, et al.
Pubblicazione: (2025)
di: Wen, Xumeng, et al.
Pubblicazione: (2025)
Regulatory DNA sequence Design with Reinforcement Learning
di: Yang, Zhao, et al.
Pubblicazione: (2025)
di: Yang, Zhao, et al.
Pubblicazione: (2025)
LightReasoner: Can Small Language Models Teach Large Language Models Reasoning?
di: Wang, Jingyuan, et al.
Pubblicazione: (2025)
di: Wang, Jingyuan, et al.
Pubblicazione: (2025)
Improving Large Language Models via Fine-grained Reinforcement Learning with Minimum Editing Constraint
di: Chen, Zhipeng, et al.
Pubblicazione: (2024)
di: Chen, Zhipeng, et al.
Pubblicazione: (2024)
Documenti analoghi
-
Distilling Rule-based Knowledge into Large Language Models
di: Yang, Wenkai, et al.
Pubblicazione: (2023) -
DeepCritic: Deliberate Critique with Large Language Models
di: Yang, Wenkai, et al.
Pubblicazione: (2025) -
Extracting and Combining Abilities For Building Multi-lingual Ability-enhanced Large Language Models
di: Chen, Zhipeng, et al.
Pubblicazione: (2024) -
Adaptive Ability Decomposing for Unlocking Large Reasoning Model Effective Reinforcement Learning
di: Chen, Zhipeng, et al.
Pubblicazione: (2026) -
ALICE: A Multifaceted Evaluation Framework of Large Audio-Language Models' In-Context Learning Ability
di: Piao, Yen-Ting, et al.
Pubblicazione: (2026)