Buchumschlag

MATA: Mindful Assessment of the Telugu Abilities of Large Language Models

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Kranti, Chalamalasetti, Vajjala, Sowmya
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

MetricalARGS: A Taxonomy for Studying Metrical Poetry with LLMs
von: Kranti, Chalamalasetti, et al.
Veröffentlicht: (2025)

Test Set Quality in Multilingual LLM Evaluation
von: Kranti, Chalamalasetti, et al.
Veröffentlicht: (2025)

The Problem with Safety Classification is not just the Models
von: Vajjala, Sowmya
Veröffentlicht: (2025)

IndicGEC: Powerful Models, or a Measurement Mirage?
von: Vajjala, Sowmya
Veröffentlicht: (2025)

Mind the Gap: Evaluating LLM Understanding of Human-Taught Road Safety Principles
von: Kranti, Chalamalasetti
Veröffentlicht: (2025)

Towards No-Code Programming of Cobots: Experiments with Code Synthesis by Large Code Models for Conversational Programming
von: Kranti, Chalamalasetti, et al.
Veröffentlicht: (2024)

From Templates to Natural Language: Generalization Challenges in Instruction-Tuned LLMs for Spatial Reasoning
von: Kranti, Chalamalasetti, et al.
Veröffentlicht: (2025)

Does Synthetic Data Help Named Entity Recognition for Low-Resource Languages?
von: Kamath, Gaurav, et al.
Veröffentlicht: (2025)

clem:todd: A Framework for the Systematic Benchmarking of LLM-Based Task-Oriented Dialogue System Realisations
von: Kranti, Chalamalasetti, et al.
Veröffentlicht: (2025)

Retrieval-Augmented Code Generation for Situated Action Generation: A Case Study on Minecraft
von: Kranti, Chalamalasetti, et al.
Veröffentlicht: (2024)

Scope Ambiguities in Large Language Models
von: Kamath, Gaurav, et al.
Veröffentlicht: (2024)

Multi-Turn Multi-Agent Dialogue for Collaborative Reconstruction Improves VLM Performance on Spatial Reasoning, But Only Barely
von: Kranti, Chalamalasetti, et al.
Veröffentlicht: (2026)

Text Classification in the LLM Era -- Where do we stand?
von: Vajjala, Sowmya, et al.
Veröffentlicht: (2025)

Dravidian language family through Universal Dependencies lens
von: Rama, Taraka, et al.
Veröffentlicht: (2024)

Annotation Errors and NER: A Study with OntoNotes 5.0
von: Bernier-Colborne, Gabriel, et al.
Veröffentlicht: (2024)

A Third Paradigm for LLM Evaluation: Dialogue Game-Based Evaluation using clembench
von: Schlangen, David, et al.
Veröffentlicht: (2025)

clembench-2024: A Challenging, Dynamic, Complementary, Multilingual Benchmark and Underlying Flexible Framework for LLMs as Multi-Action Agents
von: Beyer, Anne, et al.
Veröffentlicht: (2024)

Evaluating Telugu Proficiency in Large Language Models_ A Comparative Analysis of ChatGPT and Gemini
von: Kishore, Katikela Sreeharsha, et al.
Veröffentlicht: (2024)

Opportunities and Challenges of LLMs in Education: An NLP Perspective
von: Vajjala, Sowmya, et al.
Veröffentlicht: (2025)

LLMs in Education: Novel Perspectives, Challenges, and Opportunities
von: Alhafni, Bashar, et al.
Veröffentlicht: (2024)

Automatic Fact-checking in English and Telugu
von: Chikkala, Ravi Kiran, et al.
Veröffentlicht: (2025)

TeluguST-46: A Benchmark Corpus and Comprehensive Evaluation for Telugu-English Speech Translation
von: Akkiraju, Bhavana, et al.
Veröffentlicht: (2025)

Theory of Mind in Large Language Models: Assessment and Enhancement
von: Chen, Ruirui, et al.
Veröffentlicht: (2025)

Making Metadata More FAIR Using Large Language Models
von: Sundaram, Sowmya S., et al.
Veröffentlicht: (2023)

Code-Mixed Telugu-English Hate Speech Detection
von: Kakarla, Santhosh, et al.
Veröffentlicht: (2025)

Extracting and Combining Abilities For Building Multi-lingual Ability-enhanced Large Language Models
von: Chen, Zhipeng, et al.
Veröffentlicht: (2024)

The Astonishing Ability of Large Language Models to Parse Jabberwockified Language
von: Lupyan, Gary, et al.
Veröffentlicht: (2026)

Disentangling Memory and Reasoning Ability in Large Language Models
von: Jin, Mingyu, et al.
Veröffentlicht: (2024)

CoCoTen: Detecting Adversarial Inputs to Large Language Models through Latent Space Features of Contextual Co-occurrence Tensors
von: Kadali, Sri Durga Sai Sowmya, et al.
Veröffentlicht: (2025)

Human-Centered Supervision for Sentiment Analysis in Telugu: A Systematic Inquiry Beyond Accuracy
von: Kumar, Vallabhaneni Raj, et al.
Veröffentlicht: (2025)

ICLEval: Evaluating In-Context Learning Ability of Large Language Models
von: Chen, Wentong, et al.
Veröffentlicht: (2024)

Are Emergent Abilities in Large Language Models just In-Context Learning?
von: Lu, Sheng, et al.
Veröffentlicht: (2023)

UniversalCEFR: Enabling Open Multilingual Research on Language Proficiency Assessment
von: Imperial, Joseph Marvin, et al.
Veröffentlicht: (2025)

Exploring Continual Fine-Tuning for Enhancing Language Ability in Large Language Model
von: Aggarwal, Divyanshu, et al.
Veröffentlicht: (2024)

TeClass: A Human-Annotated Relevance-based Headline Classification and Generation Dataset for Telugu
von: Kanumolu, Gopichand, et al.
Veröffentlicht: (2024)

Model Editing Harms General Abilities of Large Language Models: Regularization to the Rescue
von: Gu, Jia-Chen, et al.
Veröffentlicht: (2024)

Psychological Counseling Ability of Large Language Models
von: Peng, Fangyu, et al.
Veröffentlicht: (2025)

Jailbreaking Leaves a Trace: Understanding and Detecting Jailbreak Attacks from Internal Representations of Large Language Models
von: Kadali, Sri Durga Sai Sowmya, et al.
Veröffentlicht: (2026)

Counting Ability of Large Language Models and Impact of Tokenization
von: Zhang, Xiang, et al.
Veröffentlicht: (2024)

Challenging the Abilities of Large Language Models in Italian: a Community Initiative
von: Nissim, Malvina, et al.
Veröffentlicht: (2025)