IndicJR: A Judge-Free Benchmark of Jailbreak Robustness in South Asian Languages
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Pattnayak, Priyaranjan, Chowdhuri, Sanchari |
|---|---|
| Format: | Preprint |
| Publié: |
2026
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
IndicSafe: A Benchmark for Evaluating Multilingual LLM Safety in South Asia
par: Pattnayak, Priyaranjan, et autres
Publié: (2026)
par: Pattnayak, Priyaranjan, et autres
Publié: (2026)
Tokenization Matters: Improving Zero-Shot NER for Indic Languages
par: Pattnayak, Priyaranjan, et autres
Publié: (2025)
par: Pattnayak, Priyaranjan, et autres
Publié: (2025)
SN-WER: Script-Normalized WER for Multi-Script Indic ASR Evaluation
par: Pattnayak, Priyaranjan
Publié: (2026)
par: Pattnayak, Priyaranjan
Publié: (2026)
LLM-Guided Lifecycle-Aware Clustering of Multi-Turn Customer Support Conversations
par: Pattnayak, Priyaranjan, et autres
Publié: (2026)
par: Pattnayak, Priyaranjan, et autres
Publié: (2026)
IndicMMLU-Pro: Benchmarking Indic Large Language Models on Multi-Task Language Understanding
par: KJ, Sankalp, et autres
Publié: (2025)
par: KJ, Sankalp, et autres
Publié: (2025)
LLM for Barcodes: Generating Diverse Synthetic Data for Identity Documents
par: Patel, Hitesh Laxmichand, et autres
Publié: (2024)
par: Patel, Hitesh Laxmichand, et autres
Publié: (2024)
Clinical QA 2.0: Multi-Task Learning for Answer Extraction and Categorization
par: Pattnayak, Priyaranjan, et autres
Publié: (2025)
par: Pattnayak, Priyaranjan, et autres
Publié: (2025)
Vividh-ASR: A Complexity-Tiered Benchmark and Optimization Dynamics for Robust Indic Speech Recognition
par: Juvekar, Kush, et autres
Publié: (2026)
par: Juvekar, Kush, et autres
Publié: (2026)
JAILJUDGE: A Comprehensive Jailbreak Judge Benchmark with Multi-Agent Enhanced Explanation Evaluation Framework
par: Liu, Fan, et autres
Publié: (2024)
par: Liu, Fan, et autres
Publié: (2024)
IndicDB -- Benchmarking Multilingual Text-to-SQL Capabilities in Indian Languages
par: Dawar, Aviral, et autres
Publié: (2026)
par: Dawar, Aviral, et autres
Publié: (2026)
BhashaBench V1: A Comprehensive Benchmark for the Quadrant of Indic Domains
par: Devane, Vijay, et autres
Publié: (2025)
par: Devane, Vijay, et autres
Publié: (2025)
Are Large Language Models Really Bias-Free? Jailbreak Prompts for Assessing Adversarial Robustness to Bias Elicitation
par: Cantini, Riccardo, et autres
Publié: (2024)
par: Cantini, Riccardo, et autres
Publié: (2024)
TukaBench: A Culturally Grounded Jailbreak Benchmark for African Languages
par: Akinode, Victor, et autres
Publié: (2026)
par: Akinode, Victor, et autres
Publié: (2026)
Indic-TunedLens: Interpreting Multilingual Models in Indian Languages
par: Panchal, Mihir, et autres
Publié: (2026)
par: Panchal, Mihir, et autres
Publié: (2026)
NADIR: Differential Attention Flow for Non-Autoregressive Transliteration in Indic Languages
par: Tomar, Lakshya, et autres
Publié: (2026)
par: Tomar, Lakshya, et autres
Publié: (2026)
BhashaKritika: Building Synthetic Pretraining Data at Scale for Indic Languages
par: Manoj, Guduru, et autres
Publié: (2025)
par: Manoj, Guduru, et autres
Publié: (2025)
Multilingual State Space Models for Structured Question Answering in Indic Languages
par: Vats, Arpita, et autres
Publié: (2025)
par: Vats, Arpita, et autres
Publié: (2025)
Benchmarking Adversarial Robustness to Bias Elicitation in Large Language Models: Scalable Automated Assessment with LLM-as-a-Judge
par: Cantini, Riccardo, et autres
Publié: (2025)
par: Cantini, Riccardo, et autres
Publié: (2025)
IndicEval: A Bilingual Indian Educational Evaluation Framework for Large Language Models
par: Bharti, Saurabh, et autres
Publié: (2026)
par: Bharti, Saurabh, et autres
Publié: (2026)
IndicSentEval: How Effectively do Multilingual Transformer Models encode Linguistic Properties for Indic Languages?
par: Aravapalli, Akhilesh, et autres
Publié: (2024)
par: Aravapalli, Akhilesh, et autres
Publié: (2024)
EasyJailbreak: A Unified Framework for Jailbreaking Large Language Models
par: Zhou, Weikang, et autres
Publié: (2024)
par: Zhou, Weikang, et autres
Publié: (2024)
Multilingual Coreference Resolution in Low-resource South Asian Languages
par: Mishra, Ritwik, et autres
Publié: (2024)
par: Mishra, Ritwik, et autres
Publié: (2024)
SPRING Lab IITM's submission to Low Resource Indic Language Translation Shared Task
par: Sayed, Hamees, et autres
Publié: (2024)
par: Sayed, Hamees, et autres
Publié: (2024)
JudgeBoard: Benchmarking and Enhancing Small Language Models for Reasoning Evaluation
par: Bi, Zhenyu, et autres
Publié: (2025)
par: Bi, Zhenyu, et autres
Publié: (2025)
JailBreakV: A Benchmark for Assessing the Robustness of MultiModal Large Language Models against Jailbreak Attacks
par: Luo, Weidi, et autres
Publié: (2024)
par: Luo, Weidi, et autres
Publié: (2024)
THRD: A Training-Free Multi-Turn Defense Framework for Jailbreak Attacks on Large Language Models
par: Ma, Zhiqing, et autres
Publié: (2026)
par: Ma, Zhiqing, et autres
Publié: (2026)
Relic: Enhancing Reward Model Generalization for Low-Resource Indic Languages with Few-Shot Examples
par: Ghosal, Soumya Suvra, et autres
Publié: (2025)
par: Ghosal, Soumya Suvra, et autres
Publié: (2025)
Hard Negative Mining for Domain-Specific Retrieval in Enterprise Systems
par: Meghwani, Hansa, et autres
Publié: (2025)
par: Meghwani, Hansa, et autres
Publié: (2025)
IndicMedDialog: A Parallel Multi-Turn Medical Dialogue Dataset for Accessible Healthcare in Indic Languages
par: Nigam, Shubham Kumar, et autres
Publié: (2026)
par: Nigam, Shubham Kumar, et autres
Publié: (2026)
Jailbreaking to Jailbreak
par: Kritz, Jeremy, et autres
Publié: (2025)
par: Kritz, Jeremy, et autres
Publié: (2025)
Generating Leakage-Free Benchmarks for Robust RAG Evaluation
par: Liu, Jiayi, et autres
Publié: (2026)
par: Liu, Jiayi, et autres
Publié: (2026)
JudgeBench: A Benchmark for Evaluating LLM-based Judges
par: Tan, Sijun, et autres
Publié: (2024)
par: Tan, Sijun, et autres
Publié: (2024)
MLLM-as-a-Judge: Assessing Multimodal LLM-as-a-Judge with Vision-Language Benchmark
par: Chen, Dongping, et autres
Publié: (2024)
par: Chen, Dongping, et autres
Publié: (2024)
LLM Jailbreak Detection for (Almost) Free!
par: Chen, Guorui, et autres
Publié: (2025)
par: Chen, Guorui, et autres
Publié: (2025)
Reasoning Is Not Free: Robust Adaptive Cost-Efficient Routing for LLM-as-a-Judge
par: Zhang, Wenbo, et autres
Publié: (2026)
par: Zhang, Wenbo, et autres
Publié: (2026)
Playing Language Game with LLMs Leads to Jailbreaking
par: Peng, Yu, et autres
Publié: (2024)
par: Peng, Yu, et autres
Publié: (2024)
JudgeLM: Fine-tuned Large Language Models are Scalable Judges
par: Zhu, Lianghui, et autres
Publié: (2023)
par: Zhu, Lianghui, et autres
Publié: (2023)
SweEval: Do LLMs Really Swear? A Safety Benchmark for Testing Limits for Enterprise Use
par: Patel, Hitesh Laxmichand, et autres
Publié: (2025)
par: Patel, Hitesh Laxmichand, et autres
Publié: (2025)
EssayJudge: A Multi-Granular Benchmark for Assessing Automated Essay Scoring Capabilities of Multimodal Large Language Models
par: Su, Jiamin, et autres
Publié: (2025)
par: Su, Jiamin, et autres
Publié: (2025)
Permutation-Consensus Listwise Judging for Robust Factuality Evaluation
par: Huang, Tianyi, et autres
Publié: (2026)
par: Huang, Tianyi, et autres
Publié: (2026)
Documents similaires
-
IndicSafe: A Benchmark for Evaluating Multilingual LLM Safety in South Asia
par: Pattnayak, Priyaranjan, et autres
Publié: (2026) -
Tokenization Matters: Improving Zero-Shot NER for Indic Languages
par: Pattnayak, Priyaranjan, et autres
Publié: (2025) -
SN-WER: Script-Normalized WER for Multi-Script Indic ASR Evaluation
par: Pattnayak, Priyaranjan
Publié: (2026) -
LLM-Guided Lifecycle-Aware Clustering of Multi-Turn Customer Support Conversations
par: Pattnayak, Priyaranjan, et autres
Publié: (2026) -
IndicMMLU-Pro: Benchmarking Indic Large Language Models on Multi-Task Language Understanding
par: KJ, Sankalp, et autres
Publié: (2025)