Buchumschlag

CodeMixBench: Evaluating Large Language Models on Code Generation with Code-Mixed Prompts

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Sheokand, Manik, Sawant, Parth
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Machine Learning Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

CodeMixBench: Evaluating Code-Mixing Capabilities of LLMs Across 18 Languages
von: Yang, Yilun, et al.
Veröffentlicht: (2025)

LiveCodeBench: Holistic and Contamination Free Evaluation of Large Language Models for Code
von: Jain, Naman, et al.
Veröffentlicht: (2024)

CodeJudge: Evaluating Code Generation with Large Language Models
von: Tong, Weixi, et al.
Veröffentlicht: (2024)

CodeEditorBench: Evaluating Code Editing Capability of Large Language Models
von: Guo, Jiawei, et al.
Veröffentlicht: (2024)

Comparative Study of Pre-Trained BERT and Large Language Models for Code-Mixed Named Entity Recognition
von: Shirke, Mayur, et al.
Veröffentlicht: (2025)

Synthetic Data Generation and Joint Learning for Robust Code-Mixed Translation
von: Kartik, Kartik, et al.
Veröffentlicht: (2024)

On Importance of Code-Mixed Embeddings for Hate Speech Identification
von: Jagdale, Shruti, et al.
Veröffentlicht: (2024)

Evaluating the Generalization Capabilities of Large Language Models on Code Reasoning
von: Yang, Rem, et al.
Veröffentlicht: (2025)

CMLFormer: A Dual Decoder Transformer with Switching Point Learning for Code-Mixed Language Modeling
von: Baral, Aditeya, et al.
Veröffentlicht: (2025)

CodeVisionary: An Agent-based Framework for Evaluating Large Language Models in Code Generation
von: Wang, Xinchen, et al.
Veröffentlicht: (2025)

NaturalCodeBench: Examining Coding Performance Mismatch on HumanEval and Natural User Prompts
von: Zhang, Shudan, et al.
Veröffentlicht: (2024)

Code-Mix Sentiment Analysis on Hinglish Tweets
von: Garg, Aashi, et al.
Veröffentlicht: (2026)

Evaluating Language Models for Efficient Code Generation
von: Liu, Jiawei, et al.
Veröffentlicht: (2024)

Prompting and Fine-tuning Large Language Models for Automated Code Review Comment Generation
von: Haider, Md. Asif, et al.
Veröffentlicht: (2024)

CHAI for LLMs: Improving Code-Mixed Translation in Large Language Models through Reinforcement Learning with AI Feedback
von: Zhang, Wenbo, et al.
Veröffentlicht: (2024)

DDPT: Diffusion-Driven Prompt Tuning for Large Language Model Code Generation
von: Li, Jinyang, et al.
Veröffentlicht: (2025)

ChiEngMixBench: Evaluating Large Language Models on Spontaneous and Natural Chinese-English Code-Mixed Generation
von: Yang, Qingyan, et al.
Veröffentlicht: (2026)

SURGE: On the Potential of Large Language Models as General-Purpose Surrogate Code Executors
von: Lyu, Bohan, et al.
Veröffentlicht: (2025)

DIVERS-Bench: Evaluating Language Identification Across Domain Shifts and Code-Switching
von: Ojo, Jessica, et al.
Veröffentlicht: (2025)

Quantifying Contamination in Evaluating Code Generation Capabilities of Language Models
von: Riddell, Martin, et al.
Veröffentlicht: (2024)

Code Simulation Challenges for Large Language Models
von: La Malfa, Emanuele, et al.
Veröffentlicht: (2024)

Persona-aware Generative Model for Code-mixed Language
von: Sengupta, Ayan, et al.
Veröffentlicht: (2023)

MOCHA: Are Code Language Models Robust Against Multi-Turn Malicious Coding Prompts?
von: Wahed, Muntasir, et al.
Veröffentlicht: (2025)

Interactive and Expressive Code-Augmented Planning with Large Language Models
von: Liu, Anthony Z., et al.
Veröffentlicht: (2024)

Stress Detection on Code-Mixed Texts in Dravidian Languages using Machine Learning
von: Ramos, L., et al.
Veröffentlicht: (2024)

Keyword Extraction, and Aspect Classification in Sinhala, English, and Code-Mixed Content
von: Rizvi, F. A., et al.
Veröffentlicht: (2025)

Syntax Without Semantics: Teaching Large Language Models to Code in an Unseen Language
von: Kumar, Vinayshekhar Bannihatti, et al.
Veröffentlicht: (2026)

Selective Prompt Anchoring for Code Generation
von: Tian, Yuan, et al.
Veröffentlicht: (2024)

Prompt Selection and Augmentation for Few Examples Code Generation in Large Language Model and its Application in Robotics Control
von: Wu, On Tai, et al.
Veröffentlicht: (2024)

CodeCloak: A Method for Evaluating and Mitigating Code Leakage by LLM Code Assistants
von: Noah, Amit Finkman, et al.
Veröffentlicht: (2024)

Enhancing Multilingual Sentiment Analysis with Explainability for Sinhala, English, and Code-Mixed Content
von: Rizvi, Azmarah, et al.
Veröffentlicht: (2025)

DNAZEN: Enhanced Gene Sequence Representations via Mixed Granularities of Coding Units
von: Mao, Lei, et al.
Veröffentlicht: (2025)

CodeUltraFeedback: An LLM-as-a-Judge Dataset for Aligning Large Language Models to Coding Preferences
von: Weyssow, Martin, et al.
Veröffentlicht: (2024)

VietMix: A Naturally-Occurring Parallel Corpus and Augmentation Framework for Vietnamese-English Code-Mixed Machine Translation
von: Tran, Hieu, et al.
Veröffentlicht: (2025)

Ensemble Learning for Large Language Models in Text and Code Generation: A Survey
von: Ashiga, Mari, et al.
Veröffentlicht: (2025)

BioCoder: A Benchmark for Bioinformatics Code Generation with Large Language Models
von: Tang, Xiangru, et al.
Veröffentlicht: (2023)

JavaBench: A Benchmark of Object-Oriented Code Generation for Evaluating Large Language Models
von: Cao, Jialun, et al.
Veröffentlicht: (2024)

PromptBench: A Unified Library for Evaluation of Large Language Models
von: Zhu, Kaijie, et al.
Veröffentlicht: (2023)

Self-Infilling Code Generation
von: Zheng, Lin, et al.
Veröffentlicht: (2023)

Rewriting the Code: A Simple Method for Large Language Model Augmented Code Search
von: Li, Haochen, et al.
Veröffentlicht: (2024)