Evaluating Arabic Large Language Models: A Survey of Benchmarks, Methods, and Gaps
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Alzubaidi, Ahmed, Alsuwaidi, Shaikha, Boussaha, Basma El Amel, AlQadi, Leen, Alkaabi, Omar, Alyafeai, Mohammed, Alobeidli, Hamza, Hacid, Hakim |
|---|---|
| Format: | Preprint |
| Publié: |
2025
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
Are Arabic Benchmarks Reliable? QIMMA's Quality-First Approach to LLM Evaluation
par: AlQadi, Leen, et autres
Publié: (2026)
par: AlQadi, Leen, et autres
Publié: (2026)
3LM: Bridging Arabic, STEM, and Code through Benchmarking
par: Boussaha, Basma El Amel, et autres
Publié: (2025)
par: Boussaha, Basma El Amel, et autres
Publié: (2025)
Falcon2-11B Technical Report
par: Malartic, Quentin, et autres
Publié: (2024)
par: Malartic, Quentin, et autres
Publié: (2024)
Maximizing the Potential of Synthetic Data: Insights from Random Matrix Theory
par: Firdoussi, Aymane El, et autres
Publié: (2024)
par: Firdoussi, Aymane El, et autres
Publié: (2024)
Alignment with Preference Optimization Is All You Need for LLM Safety
par: Alami, Reda, et autres
Publié: (2024)
par: Alami, Reda, et autres
Publié: (2024)
New Variations and Structural Refinements of Discrete Weighted Jensen and Hermite–Hadamard Inequalities Using ( α , m)‐Convex Mappings
par: Shama Firdous, et autres
Publié: (2026)
par: Shama Firdous, et autres
Publié: (2026)
Adaptive CUSUM Control Chart With Variable Sample Size for Monitoring Under Measurement Error
par: Abdullah Ali H. Ahmadini, et autres
Publié: (2026)
par: Abdullah Ali H. Ahmadini, et autres
Publié: (2026)
Data Quality in Edge Machine Learning: A State-of-the-Art Survey
par: Belgoumri, Mohammed Djameleddine, et autres
Publié: (2024)
par: Belgoumri, Mohammed Djameleddine, et autres
Publié: (2024)
Poem Meter Classification of Recited Arabic Poetry: Integrating High-Resource Systems for a Low-Resource Task
par: Al-Shaibani, Maged S., et autres
Publié: (2025)
par: Al-Shaibani, Maged S., et autres
Publié: (2025)
Re-thinking Human Activity Recognition with Hierarchy-aware Label Relationship Modeling
par: Zuo, Jingwei, et autres
Publié: (2024)
par: Zuo, Jingwei, et autres
Publié: (2024)
The Increasing Importance of Breast Cancer in the United Arab Emirates
par: Ruqaiyyah Siddiqui, et autres
Publié: (2025)
par: Ruqaiyyah Siddiqui, et autres
Publié: (2025)
Cutting-Edge Innovations in Teaching, Leadership, Technology, and Assessment
par: Abdallah, Asma Khaleel, et autres
Publié: (2024)
par: Abdallah, Asma Khaleel, et autres
Publié: (2024)
NeurIPS 2025 E2LM Competition : Early Training Evaluation of Language Models
par: Yagoubi, Mouadh, et autres
Publié: (2025)
par: Yagoubi, Mouadh, et autres
Publié: (2025)
MedAraBench: Large-Scale Arabic Medical Question Answering Dataset and Benchmark
par: Abu-Daoud, Mouath, et autres
Publié: (2026)
par: Abu-Daoud, Mouath, et autres
Publié: (2026)
Training Machine Learning models at the Edge: A Survey
par: Khouas, Aymen Rayane, et autres
Publié: (2024)
par: Khouas, Aymen Rayane, et autres
Publié: (2024)
PORT: Preference Optimization on Reasoning Traces
par: Lahlou, Salem, et autres
Publié: (2024)
par: Lahlou, Salem, et autres
Publié: (2024)
ALARB: An Arabic Legal Argument Reasoning Benchmark
par: Shairah, Harethah Abu, et autres
Publié: (2025)
par: Shairah, Harethah Abu, et autres
Publié: (2025)
Arab Americans in the United States
par: Al-Kuwari, Shaikha H.
Publié: (2024)
par: Al-Kuwari, Shaikha H.
Publié: (2024)
MedArabiQ: Benchmarking Large Language Models on Arabic Medical Tasks
par: Daoud, Mouath Abu, et autres
Publié: (2025)
par: Daoud, Mouath Abu, et autres
Publié: (2025)
WavLink: Compact Audio-Text Embeddings with a Global Whisper Token
par: Kumar, Gokul Karthik, et autres
Publié: (2026)
par: Kumar, Gokul Karthik, et autres
Publié: (2026)
CIDAR: Culturally Relevant Instruction Dataset For Arabic
par: Alyafeai, Zaid, et autres
Publié: (2024)
par: Alyafeai, Zaid, et autres
Publié: (2024)
Accurate and Diverse LLM Mathematical Reasoning via Automated PRM-Guided GFlowNets
par: Younsi, Adam, et autres
Publié: (2025)
par: Younsi, Adam, et autres
Publié: (2025)
Evaluating the Effects of Arabic‐Medium Behavioral Skills Training on Parenting Program Facilitators in the United Arab Emirates
par: Amina Maliki, et autres
Publié: (2025)
par: Amina Maliki, et autres
Publié: (2025)
Benchmarking Commercial ASR Systems on Code-Switching Speech: Arabic, Persian, and German
par: Abdoli, Sajjad, et autres
Publié: (2026)
par: Abdoli, Sajjad, et autres
Publié: (2026)
Beyond Microservices: Testing Web-Scale RCA Methods on GPU-Driven LLM Workloads
par: Scheinert, Dominik, et autres
Publié: (2026)
par: Scheinert, Dominik, et autres
Publié: (2026)
Chapter 7 Arabic mobile game localizations
par: Al‑Batineh, Mohammed
Publié: (2025)
par: Al‑Batineh, Mohammed
Publié: (2025)
MAGNETO: Edge AI for Human Activity Recognition -- Privacy and Personalization
par: Zuo, Jingwei, et autres
Publié: (2024)
par: Zuo, Jingwei, et autres
Publié: (2024)
ALRM: Agentic LLM for Robotic Manipulation
par: Santos, Vitor Gaboardi dos, et autres
Publié: (2026)
par: Santos, Vitor Gaboardi dos, et autres
Publié: (2026)
Rolling Ball Optimizer: Learning by ironing out loss landscape wrinkles
par: Belgoumri, Mohammed Djameleddine, et autres
Publié: (2025)
par: Belgoumri, Mohammed Djameleddine, et autres
Publié: (2025)
Mapping the Landscape of Generative Language Models in Dental Education: A Comparison Between ChatGPT and Google Bard
par: Shaikha Aldukhail
Publié: (2024)
par: Shaikha Aldukhail
Publié: (2024)
Development of a full-Scale approach to predict overlay reflective crack
par: Zhu, Zehui, et autres
Publié: (2024)
par: Zhu, Zehui, et autres
Publié: (2024)
SIFT-Aided Rectified 2D-DIC for Displacement and Strain Measurements in Asphalt Concrete Testing
par: Zhu, Zehui, et autres
Publié: (2024)
par: Zhu, Zehui, et autres
Publié: (2024)
Falcon-H1: A Family of Hybrid-Head Language Models Redefining Efficiency and Performance
par: Zuo, Jingwei, et autres
Publié: (2025)
par: Zuo, Jingwei, et autres
Publié: (2025)
BALSAM: A Platform for Benchmarking Arabic Large Language Models
par: Al-Matham, Rawan, et autres
Publié: (2025)
par: Al-Matham, Rawan, et autres
Publié: (2025)
Arabic Prompts with English Tools: A Benchmark
par: Kubrak, Konstantin, et autres
Publié: (2026)
par: Kubrak, Konstantin, et autres
Publié: (2026)
Democratic Contention and the 2024 US Presidential Election
par: Amel Ahmed
Publié: (2025)
par: Amel Ahmed
Publié: (2025)
MeXtract: Light-Weight Metadata Extraction from Scientific Papers
par: Alyafeai, Zaid, et autres
Publié: (2025)
par: Alyafeai, Zaid, et autres
Publié: (2025)
MOLE: Metadata Extraction and Validation in Scientific Papers Using LLMs
par: Alyafeai, Zaid, et autres
Publié: (2025)
par: Alyafeai, Zaid, et autres
Publié: (2025)
Immunohistochemical and Clinicopathologic Correlation of DNA Methyltransferase 3A and (C-X-C motif) Ligand 1 in Oral Squamous Cell Carcinoma
par: Basma Abdelrahman Ahmed
Publié: (2025)
par: Basma Abdelrahman Ahmed
Publié: (2025)
Cultural Benchmarking of LLMs in Standard and Dialectal Arabic Dialogues
par: Kautsar, Muhammad Dehan Al, et autres
Publié: (2026)
par: Kautsar, Muhammad Dehan Al, et autres
Publié: (2026)
Documents similaires
-
Are Arabic Benchmarks Reliable? QIMMA's Quality-First Approach to LLM Evaluation
par: AlQadi, Leen, et autres
Publié: (2026) -
3LM: Bridging Arabic, STEM, and Code through Benchmarking
par: Boussaha, Basma El Amel, et autres
Publié: (2025) -
Falcon2-11B Technical Report
par: Malartic, Quentin, et autres
Publié: (2024) -
Maximizing the Potential of Synthetic Data: Insights from Random Matrix Theory
par: Firdoussi, Aymane El, et autres
Publié: (2024) -
Alignment with Preference Optimization Is All You Need for LLM Safety
par: Alami, Reda, et autres
Publié: (2024)