Buchumschlag

IndicGenBench: A Multilingual Benchmark to Evaluate Generation Capabilities of LLMs on Indic Languages

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Singh, Harman, Gupta, Nitish, Bharadwaj, Shikhar, Tewari, Dinesh, Talukdar, Partha
Format:	Preprint
Veröffentlicht:	2024
Schlagworte:	Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Analysis of Indic Language Capabilities in LLMs
von: Vaidya, Aatman, et al.
Veröffentlicht: (2025)

IndicParam: Benchmark to evaluate LLMs on low-resource Indic Languages
von: Maheshwari, Ayush, et al.
Veröffentlicht: (2025)

IndicDB -- Benchmarking Multilingual Text-to-SQL Capabilities in Indian Languages
von: Dawar, Aviral, et al.
Veröffentlicht: (2026)

IndicEval-XL: Bridging Linguistic Diversity in Code Generation Across Indic Languages
von: Singh, Ujjwal, et al.
Veröffentlicht: (2025)

IndicIFEval: A Benchmark for Verifiable Instruction-Following Evaluation in 14 Indic Languages
von: Jayakumar, Thanmay, et al.
Veröffentlicht: (2026)

IndicSQuAD: A Comprehensive Multilingual Question Answering Dataset for Indic Languages
von: Endait, Sharvi, et al.
Veröffentlicht: (2025)

BhashaBench V1: A Comprehensive Benchmark for the Quadrant of Indic Domains
von: Devane, Vijay, et al.
Veröffentlicht: (2025)

IndicSentEval: How Effectively do Multilingual Transformer Models encode Linguistic Properties for Indic Languages?
von: Aravapalli, Akhilesh, et al.
Veröffentlicht: (2024)

QUENCH: Measuring the gap between Indic and Non-Indic Contextual General Reasoning in LLMs
von: Khan, Mohammad Aflah, et al.
Veröffentlicht: (2024)

L3Cube-IndicQuest: A Benchmark Question Answering Dataset for Evaluating Knowledge of LLMs in Indic Context
von: Rohera, Pritika, et al.
Veröffentlicht: (2024)

IndicMMLU-Pro: Benchmarking Indic Large Language Models on Multi-Task Language Understanding
von: KJ, Sankalp, et al.
Veröffentlicht: (2025)

IndicSafe: A Benchmark for Evaluating Multilingual LLM Safety in South Asia
von: Pattnayak, Priyaranjan, et al.
Veröffentlicht: (2026)

ParamBench: A Graduate-Level Benchmark for Evaluating LLM Understanding on Indic Subjects
von: Maheshwari, Ayush, et al.
Veröffentlicht: (2025)

Improving Multilingual Neural Machine Translation System for Indic Languages
von: Das, Sudhansu Bala, et al.
Veröffentlicht: (2022)

LLM Augmented LLMs: Expanding Capabilities through Composition
von: Bansal, Rachit, et al.
Veröffentlicht: (2024)

Indic-TunedLens: Interpreting Multilingual Models in Indian Languages
von: Panchal, Mihir, et al.
Veröffentlicht: (2026)

MILU: A Multi-task Indic Language Understanding Benchmark
von: Verma, Sshubam, et al.
Veröffentlicht: (2024)

MMCFND: Multimodal Multilingual Caption-aware Fake News Detection for Low-resource Indic Languages
von: Bansal, Shubhi, et al.
Veröffentlicht: (2024)

Navigating Text-to-Image Generative Bias across Indic Languages
von: Mittal, Surbhi, et al.
Veröffentlicht: (2024)

Relic: Enhancing Reward Model Generalization for Low-Resource Indic Languages with Few-Shot Examples
von: Ghosal, Soumya Suvra, et al.
Veröffentlicht: (2025)

Multilingual State Space Models for Structured Question Answering in Indic Languages
von: Vats, Arpita, et al.
Veröffentlicht: (2025)

Statistical Machine Translation for Indic Languages
von: Das, Sudhansu Bala, et al.
Veröffentlicht: (2023)

IndicVoices: Towards building an Inclusive Multilingual Speech Dataset for Indian Languages
von: Javed, Tahir, et al.
Veröffentlicht: (2024)

Towards Visually-Guided Movie Subtitle Translation for Indic Languages
von: Chintada, Tarun, et al.
Veröffentlicht: (2026)

Graph-Assisted Culturally Adaptable Idiomatic Translation for Indic Languages
von: Singh, Pratik Rakesh, et al.
Veröffentlicht: (2025)

Safer in Translation? Presupposition Robustness in Indic Languages
von: Palnitkar, Aadi, et al.
Veröffentlicht: (2025)

Unicode Normalization and Grapheme Parsing of Indic Languages
von: Ansary, Nazmuddoha, et al.
Veröffentlicht: (2023)

IndicVisionBench: Benchmarking Cultural and Multilingual Understanding in VLMs
von: Faraz, Ali, et al.
Veröffentlicht: (2025)

FIND: Toward Multimodal Financial Reasoning and Question Answering for Indic Languages
von: Das, Sarmistha, et al.
Veröffentlicht: (2026)

Krutrim LLM: A Novel Tokenization Strategy for Multilingual Indic Languages with Petabyte-Scale Data Processing
von: Kumar, Rahul, et al.
Veröffentlicht: (2024)

Pralekha: Cross-Lingual Document Alignment for Indic Languages
von: Suryanarayanan, Sanjay, et al.
Veröffentlicht: (2024)

Table Question Answering for Low-resourced Indic Languages
von: Pal, Vaishali, et al.
Veröffentlicht: (2024)

L3Cube-IndicNews: News-based Short Text and Long Document Classification Datasets in Indic Languages
von: Mirashi, Aishwarya, et al.
Veröffentlicht: (2024)

IndicRAGSuite: Large-Scale Datasets and a Benchmark for Indian Language RAG Systems
von: Prasanjith, Pasunuti, et al.
Veröffentlicht: (2025)

Low-Resource Counterspeech Generation for Indic Languages: The Case of Bengali and Hindi
von: Das, Mithun, et al.
Veröffentlicht: (2024)

Multilingual TinyStories: A Synthetic Combinatorial Corpus of Indic Children's Stories for Training Small Language Models
von: Halder, Deepon, et al.
Veröffentlicht: (2026)

IndicMedDialog: A Parallel Multi-Turn Medical Dialogue Dataset for Accessible Healthcare in Indic Languages
von: Nigam, Shubham Kumar, et al.
Veröffentlicht: (2026)

ELR-1000: A Community-Generated Dataset for Endangered Indic Indigenous Languages
von: Joshi, Neha, et al.
Veröffentlicht: (2025)

IndicJR: A Judge-Free Benchmark of Jailbreak Robustness in South Asian Languages
von: Pattnayak, Priyaranjan, et al.
Veröffentlicht: (2026)

Long-context Non-factoid Question Answering in Indic Languages
von: Mishra, Ritwik, et al.
Veröffentlicht: (2025)