Confidence, Not Perplexity: A Better Metric for the Creative Era of LLMs
Fuente:
arXiv
Enregistré dans:
| Auteur principal: | Parupudi, V. S. Raghu |
|---|---|
| Format: | Preprint |
| Publié: |
2025
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
Magnitude Matters: a Superior Class of Similarity Metrics for Holistic Semantic Understanding
par: Parupudi, V. S. Raghu
Publié: (2025)
par: Parupudi, V. S. Raghu
Publié: (2025)
Systematic Diagnosis of Brittle Reasoning in Large Language Models
par: Parupudi, V. S. Raghu
Publié: (2025)
par: Parupudi, V. S. Raghu
Publié: (2025)
Before and After Temperature: A Distributional View of Creative LLM Generation
par: Parupudi, V. S. Raghu, et autres
Publié: (2026)
par: Parupudi, V. S. Raghu, et autres
Publié: (2026)
Rethinking Perplexity: Revealing the Impact of Input Length on Perplexity Evaluation in LLMs
par: Cheng, Letian, et autres
Publié: (2026)
par: Cheng, Letian, et autres
Publié: (2026)
Perplexed by Perplexity: Perplexity-Based Data Pruning With Small Reference Models
par: Ankner, Zachary, et autres
Publié: (2024)
par: Ankner, Zachary, et autres
Publié: (2024)
Slaves to the Law of Large Numbers: An Asymptotic Equipartition Property for Perplexity in Generative Language Models
par: Bell, Tyler, et autres
Publié: (2024)
par: Bell, Tyler, et autres
Publié: (2024)
Pack of LLMs: Model Fusion at Test-Time via Perplexity Optimization
par: Mavromatis, Costas, et autres
Publié: (2024)
par: Mavromatis, Costas, et autres
Publié: (2024)
The Perplexity Paradox: Why Code Compresses Better Than Math in LLM Prompts
par: Johnson, Warren
Publié: (2026)
par: Johnson, Warren
Publié: (2026)
Lowest Span Confidence: A Zero-Shot Metric for Efficient and Black-Box Hallucination Detection in LLMs
par: Qiao, Yitong, et autres
Publié: (2026)
par: Qiao, Yitong, et autres
Publié: (2026)
Reasoning Models Better Express Their Confidence
par: Yoon, Dongkeun, et autres
Publié: (2025)
par: Yoon, Dongkeun, et autres
Publié: (2025)
Is my model perplexed for the right reason? Contrasting LLMs' Benchmark Behavior with Token-Level Perplexity
par: Prins, Zoë, et autres
Publié: (2026)
par: Prins, Zoë, et autres
Publié: (2026)
Rectify Evaluation Preference: Improving LLMs' Critique on Math Reasoning via Perplexity-aware Reinforcement Learning
par: Tian, Changyuan, et autres
Publié: (2025)
par: Tian, Changyuan, et autres
Publié: (2025)
Perplexity Trap: PLM-Based Retrievers Overrate Low Perplexity Documents
par: Wang, Haoyu, et autres
Publié: (2025)
par: Wang, Haoyu, et autres
Publié: (2025)
Perplexity-Aware Data Scaling Law: Perplexity Landscapes Predict Performance for Continual Pre-training
par: Liu, Lei, et autres
Publié: (2025)
par: Liu, Lei, et autres
Publié: (2025)
Do BERT-Like Bidirectional Models Still Perform Better on Text Classification in the Era of LLMs?
par: Zhang, Junyan, et autres
Publié: (2025)
par: Zhang, Junyan, et autres
Publié: (2025)
On Verbalized Confidence Scores for LLMs
par: Yang, Daniel, et autres
Publié: (2024)
par: Yang, Daniel, et autres
Publié: (2024)
Do LLMs Find Human Answers To Fact-Driven Questions Perplexing? A Case Study on Reddit
par: Seegmiller, Parker, et autres
Publié: (2024)
par: Seegmiller, Parker, et autres
Publié: (2024)
Demystifying Prompts in Language Models via Perplexity Estimation
par: Gonen, Hila, et autres
Publié: (2022)
par: Gonen, Hila, et autres
Publié: (2022)
CREATE: Testing LLMs for Associative Creativity
par: Wadhwa, Manya, et autres
Publié: (2026)
par: Wadhwa, Manya, et autres
Publié: (2026)
Writing in Symbiosis: Mapping Human Creative Agency in the AI Era
par: Doshi, Vivan, et autres
Publié: (2025)
par: Doshi, Vivan, et autres
Publié: (2025)
MetricalARGS: A Taxonomy for Studying Metrical Poetry with LLMs
par: Kranti, Chalamalasetti, et autres
Publié: (2025)
par: Kranti, Chalamalasetti, et autres
Publié: (2025)
Beyond Perplexity: Multi-dimensional Safety Evaluation of LLM Compression
par: Xu, Zhichao, et autres
Publié: (2024)
par: Xu, Zhichao, et autres
Publié: (2024)
Mapping Overlaps in Benchmarks through Perplexity in the Wild
par: Wu, Siyang, et autres
Publié: (2025)
par: Wu, Siyang, et autres
Publié: (2025)
Improving Pretraining Data Using Perplexity Correlations
par: Thrush, Tristan, et autres
Publié: (2024)
par: Thrush, Tristan, et autres
Publié: (2024)
Multicalibration for Confidence Scoring in LLMs
par: Detommaso, Gianluca, et autres
Publié: (2024)
par: Detommaso, Gianluca, et autres
Publié: (2024)
On the Robustness of Verbal Confidence of LLMs in Adversarial Attacks
par: Obadinma, Stephen, et autres
Publié: (2025)
par: Obadinma, Stephen, et autres
Publié: (2025)
Confidence Estimation for LLMs in Multi-turn Interactions
par: Zhang, Caiqi, et autres
Publié: (2026)
par: Zhang, Caiqi, et autres
Publié: (2026)
Can LLMs Express Their Uncertainty? An Empirical Evaluation of Confidence Elicitation in LLMs
par: Xiong, Miao, et autres
Publié: (2023)
par: Xiong, Miao, et autres
Publié: (2023)
Rethinking GSPO: The Perplexity-Entropy Equivalence
par: Liu, Chi
Publié: (2025)
par: Liu, Chi
Publié: (2025)
destroR: Attacking Transfer Models with Obfuscous Examples to Discard Perplexity
par: Ahmed, Saadat Rafid, et autres
Publié: (2025)
par: Ahmed, Saadat Rafid, et autres
Publié: (2025)
How Well Can Knowledge Edit Methods Edit Perplexing Knowledge?
par: Ge, Huaizhi, et autres
Publié: (2024)
par: Ge, Huaizhi, et autres
Publié: (2024)
A Thorough Examination of Decoding Methods in the Era of LLMs
par: Shi, Chufan, et autres
Publié: (2024)
par: Shi, Chufan, et autres
Publié: (2024)
A Perplexity and Menger Curvature-Based Approach for Similarity Evaluation of Large Language Models
par: Zhang, Yuantao, et autres
Publié: (2025)
par: Zhang, Yuantao, et autres
Publié: (2025)
What is Wrong with Perplexity for Long-context Language Modeling?
par: Fang, Lizhe, et autres
Publié: (2024)
par: Fang, Lizhe, et autres
Publié: (2024)
Supervised Optimism Correction: Be Confident When LLMs Are Sure
par: Zhang, Junjie, et autres
Publié: (2025)
par: Zhang, Junjie, et autres
Publié: (2025)
Confidence Estimation in Automatic Short Answer Grading with LLMs
par: Cong, Longwei, et autres
Publié: (2026)
par: Cong, Longwei, et autres
Publié: (2026)
When to Trust LLMs: Aligning Confidence with Response Quality
par: Tao, Shuchang, et autres
Publié: (2024)
par: Tao, Shuchang, et autres
Publié: (2024)
Evaluating the Creativity of LLMs in Persian Literary Text Generation
par: Tourajmehr, Armin, et autres
Publié: (2025)
par: Tourajmehr, Armin, et autres
Publié: (2025)
IDEAFix: Evaluation Framework for Creative Defixation Prompting in LLMs
par: Carichon, F., et autres
Publié: (2026)
par: Carichon, F., et autres
Publié: (2026)
Moral Mazes in the Era of LLMs
par: Nguyen, Dang, et autres
Publié: (2026)
par: Nguyen, Dang, et autres
Publié: (2026)
Documents similaires
-
Magnitude Matters: a Superior Class of Similarity Metrics for Holistic Semantic Understanding
par: Parupudi, V. S. Raghu
Publié: (2025) -
Systematic Diagnosis of Brittle Reasoning in Large Language Models
par: Parupudi, V. S. Raghu
Publié: (2025) -
Before and After Temperature: A Distributional View of Creative LLM Generation
par: Parupudi, V. S. Raghu, et autres
Publié: (2026) -
Rethinking Perplexity: Revealing the Impact of Input Length on Perplexity Evaluation in LLMs
par: Cheng, Letian, et autres
Publié: (2026) -
Perplexed by Perplexity: Perplexity-Based Data Pruning With Small Reference Models
par: Ankner, Zachary, et autres
Publié: (2024)