Evaluating LLMs' Mathematical and Coding Competency through Ontology-guided Interventions
Fuente:
arXiv
Salvato in:
| Autori principali: | Hong, Pengfei, Majumder, Navonil, Ghosal, Deepanway, Aditya, Somak, Mihalcea, Rada, Poria, Soujanya |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Tango 2: Aligning Diffusion-based Text-to-Audio Generations through Direct Preference Optimization
di: Majumder, Navonil, et al.
Pubblicazione: (2024)
di: Majumder, Navonil, et al.
Pubblicazione: (2024)
Not All Votes Count! Programs as Verifiers Improve Self-Consistency of Language Models for Math Reasoning
di: Toh, Vernon Y. H., et al.
Pubblicazione: (2024)
di: Toh, Vernon Y. H., et al.
Pubblicazione: (2024)
Measuring and Enhancing Trustworthiness of LLMs in RAG through Grounded Attributions and Learning to Refuse
di: Song, Maojia, et al.
Pubblicazione: (2024)
di: Song, Maojia, et al.
Pubblicazione: (2024)
Improving Text-To-Audio Models with Synthetic Captions
di: Kong, Zhifeng, et al.
Pubblicazione: (2024)
di: Kong, Zhifeng, et al.
Pubblicazione: (2024)
Inference Time Alignment with Reward-Guided Tree Search
di: Hung, Chia-Yu, et al.
Pubblicazione: (2024)
di: Hung, Chia-Yu, et al.
Pubblicazione: (2024)
NLKI: A lightweight Natural Language Knowledge Integration Framework for Improving Small VLMs in Commonsense VQA Tasks
di: Dutta, Aritra, et al.
Pubblicazione: (2025)
di: Dutta, Aritra, et al.
Pubblicazione: (2025)
Mustango: Toward Controllable Text-to-Music Generation
di: Melechovsky, Jan, et al.
Pubblicazione: (2023)
di: Melechovsky, Jan, et al.
Pubblicazione: (2023)
The Jumping Reasoning Curve? Tracking the Evolution of Reasoning Performance in GPT-[n] and o-[n] Models on Multimodal Puzzles
di: Toh, Vernon Y. H., et al.
Pubblicazione: (2025)
di: Toh, Vernon Y. H., et al.
Pubblicazione: (2025)
Emma-X: An Embodied Multimodal Action Model with Grounded Chain of Thought and Look-ahead Spatial Reasoning
di: Sun, Qi, et al.
Pubblicazione: (2024)
di: Sun, Qi, et al.
Pubblicazione: (2024)
Understanding the Capabilities and Limitations of Large Language Models for Cultural Commonsense
di: Shen, Siqi, et al.
Pubblicazione: (2024)
di: Shen, Siqi, et al.
Pubblicazione: (2024)
Lessons from Training Grounded LLMs with Verifiable Rewards
di: Sim, Shang Hong, et al.
Pubblicazione: (2025)
di: Sim, Shang Hong, et al.
Pubblicazione: (2025)
LOGICPO: Efficient Translation of NL-based Logical Problems to FOL using LLMs and Preference Optimization
di: Viswanadha, Koushik, et al.
Pubblicazione: (2025)
di: Viswanadha, Koushik, et al.
Pubblicazione: (2025)
Are Language Models Puzzle Prodigies? Algorithmic Puzzles Unveil Serious Challenges in Multimodal Reasoning
di: Ghosal, Deepanway, et al.
Pubblicazione: (2024)
di: Ghosal, Deepanway, et al.
Pubblicazione: (2024)
The Curious Case of Curiosity across Human Cultures and LLMs
di: Borah, Angana, et al.
Pubblicazione: (2025)
di: Borah, Angana, et al.
Pubblicazione: (2025)
DELLA-Merging: Reducing Interference in Model Merging through Magnitude-Based Sampling
di: Deep, Pala Tej, et al.
Pubblicazione: (2024)
di: Deep, Pala Tej, et al.
Pubblicazione: (2024)
Code Prompting Elicits Conditional Reasoning Abilities in Text+Code LLMs
di: Puerto, Haritz, et al.
Pubblicazione: (2024)
di: Puerto, Haritz, et al.
Pubblicazione: (2024)
Towards Region-aware Bias Evaluation Metrics
di: Borah, Angana, et al.
Pubblicazione: (2024)
di: Borah, Angana, et al.
Pubblicazione: (2024)
Mind the (Belief) Gap: Group Identity in the World of LLMs
di: Borah, Angana, et al.
Pubblicazione: (2025)
di: Borah, Angana, et al.
Pubblicazione: (2025)
Are Human Interactions Replicable by Generative Agents? A Case Study on Pronoun Usage in Hierarchical Interactions
di: Deng, Naihao, et al.
Pubblicazione: (2025)
di: Deng, Naihao, et al.
Pubblicazione: (2025)
Towards Implicit Bias Detection and Mitigation in Multi-Agent LLM Interactions
di: Borah, Angana, et al.
Pubblicazione: (2024)
di: Borah, Angana, et al.
Pubblicazione: (2024)
Language Models are Homer Simpson! Safety Re-Alignment of Fine-tuned Language Models through Task Arithmetic
di: Bhardwaj, Rishabh, et al.
Pubblicazione: (2024)
di: Bhardwaj, Rishabh, et al.
Pubblicazione: (2024)
PuzzleVQA: Diagnosing Multimodal Reasoning Challenges of Language Models with Abstract Visual Patterns
di: Chia, Yew Ken, et al.
Pubblicazione: (2024)
di: Chia, Yew Ken, et al.
Pubblicazione: (2024)
[WIP] Jailbreak Paradox: The Achilles' Heel of LLMs
di: Rao, Abhinav, et al.
Pubblicazione: (2024)
di: Rao, Abhinav, et al.
Pubblicazione: (2024)
Rethinking Table Instruction Tuning
di: Deng, Naihao, et al.
Pubblicazione: (2025)
di: Deng, Naihao, et al.
Pubblicazione: (2025)
TangoFlux: Super Fast and Faithful Text to Audio Generation with Flow Matching and Clap-Ranked Preference Optimization
di: Hung, Chia-Yu, et al.
Pubblicazione: (2024)
di: Hung, Chia-Yu, et al.
Pubblicazione: (2024)
Towards Robust Instruction Tuning on Multimodal Large Language Models
di: Han, Wei, et al.
Pubblicazione: (2024)
di: Han, Wei, et al.
Pubblicazione: (2024)
MATHSENSEI: A Tool-Augmented Large Language Model for Mathematical Reasoning
di: Das, Debrup, et al.
Pubblicazione: (2024)
di: Das, Debrup, et al.
Pubblicazione: (2024)
PREMISE: Matching-based Prediction for Accurate Review Recommendation
di: Han, Wei, et al.
Pubblicazione: (2025)
di: Han, Wei, et al.
Pubblicazione: (2025)
The Age of Curiosity Meets the Age of AI: Benchmarking Child Safety in Large Language Models
di: Arif, Samee, et al.
Pubblicazione: (2026)
di: Arif, Samee, et al.
Pubblicazione: (2026)
Ruby Teaming: Improving Quality Diversity Search with Memory for Automated Red Teaming
di: Han, Vernon Toh Yan, et al.
Pubblicazione: (2024)
di: Han, Vernon Toh Yan, et al.
Pubblicazione: (2024)
Sowing the Wind, Reaping the Whirlwind: The Impact of Editing Language Models
di: Hazra, Rima, et al.
Pubblicazione: (2024)
di: Hazra, Rima, et al.
Pubblicazione: (2024)
Safety Arithmetic: A Framework for Test-time Safety Alignment of Language Models by Steering Parameters and Activations
di: Hazra, Rima, et al.
Pubblicazione: (2024)
di: Hazra, Rima, et al.
Pubblicazione: (2024)
NORA: A Small Open-Sourced Generalist Vision Language Action Model for Embodied Tasks
di: Hung, Chia-Yu, et al.
Pubblicazione: (2025)
di: Hung, Chia-Yu, et al.
Pubblicazione: (2025)
Whose wife is it anyway? Assessing bias against same-gender relationships in machine translation
di: Stewart, Ian, et al.
Pubblicazione: (2024)
di: Stewart, Ian, et al.
Pubblicazione: (2024)
Consistency Guided Knowledge Retrieval and Denoising in LLMs for Zero-shot Document-level Relation Triplet Extraction
di: Sun, Qi, et al.
Pubblicazione: (2024)
di: Sun, Qi, et al.
Pubblicazione: (2024)
MuCRASP: Multimodal Chain-of-thought Reasoning aware Structured Pruning
di: Dutta, Aritra, et al.
Pubblicazione: (2026)
di: Dutta, Aritra, et al.
Pubblicazione: (2026)
MAiDE-up: Multilingual Deception Detection of GPT-generated Hotel Reviews
di: Ignat, Oana, et al.
Pubblicazione: (2024)
di: Ignat, Oana, et al.
Pubblicazione: (2024)
Towards Dog Bark Decoding: Leveraging Human Speech Processing for Automated Bark Classification
di: Abzaliev, Artem, et al.
Pubblicazione: (2024)
di: Abzaliev, Artem, et al.
Pubblicazione: (2024)
Patient-Centered RAG for Oncology Visit Aid Following the Ottawa Decision Guide
di: Liu, Siyang, et al.
Pubblicazione: (2025)
di: Liu, Siyang, et al.
Pubblicazione: (2025)
Persuasion at Play: Understanding Misinformation Dynamics in Demographic-Aware Human-LLM Interactions
di: Borah, Angana, et al.
Pubblicazione: (2025)
di: Borah, Angana, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Tango 2: Aligning Diffusion-based Text-to-Audio Generations through Direct Preference Optimization
di: Majumder, Navonil, et al.
Pubblicazione: (2024) -
Not All Votes Count! Programs as Verifiers Improve Self-Consistency of Language Models for Math Reasoning
di: Toh, Vernon Y. H., et al.
Pubblicazione: (2024) -
Measuring and Enhancing Trustworthiness of LLMs in RAG through Grounded Attributions and Learning to Refuse
di: Song, Maojia, et al.
Pubblicazione: (2024) -
Improving Text-To-Audio Models with Synthetic Captions
di: Kong, Zhifeng, et al.
Pubblicazione: (2024) -
Inference Time Alignment with Reward-Guided Tree Search
di: Hung, Chia-Yu, et al.
Pubblicazione: (2024)