Buchumschlag

ArabicMMLU: Assessing Massive Multitask Language Understanding in Arabic

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Koto, Fajri, Li, Haonan, Shatnawi, Sara, Doughman, Jad, Sadallah, Abdelrahman Boda, Alraeesi, Aisha, Almubarak, Khalid, Alyafeai, Zaid, Sengupta, Neha, Shehata, Shady, Habash, Nizar, Nakov, Preslav, Baldwin, Timothy
Format:	Preprint
Veröffentlicht:	2024
Schlagworte:	Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Instruction-Guided Poetry Generation in Arabic and Its Dialects
von: Sadallah, Abdelrahman, et al.
Veröffentlicht: (2026)

DialectalArabicMMLU: Benchmarking Dialectal Capabilities in Arabic and Multilingual Language Models
von: Altakrori, Malik H., et al.
Veröffentlicht: (2025)

Exploring the Limitations of Detecting Machine-Generated Text
von: Doughman, Jad, et al.
Veröffentlicht: (2024)

The Arabic Generality Score: Another Dimension of Modeling Arabic Dialectness
von: Shaban, Sanad, et al.
Veröffentlicht: (2025)

Arabic Dataset for LLM Safeguard Evaluation
von: Ashraf, Yasser, et al.
Veröffentlicht: (2024)

Enhancing Text Editing for Grammatical Error Correction: Arabic as a Case Study
von: Alhafni, Bashar, et al.
Veröffentlicht: (2025)

Lemmatization as a Classification Task: Results from Arabic across Multiple Genres
von: Saeed, Mostafa, et al.
Veröffentlicht: (2025)

Commonsense Reasoning in Arab Culture
von: Sadallah, Abdelrahman, et al.
Veröffentlicht: (2025)

A Derivational ChainBank for Modern Standard Arabic
von: Marzouk, Reham, et al.
Veröffentlicht: (2024)

Arabic Morphosyntactic Tagging and Dependency Parsing with Large Language Models
von: Adel, Mohamed, et al.
Veröffentlicht: (2026)

Strategies for Arabic Readability Modeling
von: Liberato, Juan Piñeros, et al.
Veröffentlicht: (2024)

ARWI: Arabic Write and Improve
von: Chirkunov, Kirill, et al.
Veröffentlicht: (2025)

Data Augmentation for Maltese NLP using Transliterated and Machine Translated Arabic Data
von: Micallef, Kurt, et al.
Veröffentlicht: (2025)

A Tale of Two Scripts: Transliteration and Post-Correction for Judeo-Arabic
von: Gonzalez, Juan Moreno, et al.
Veröffentlicht: (2025)

A Large and Balanced Corpus for Fine-grained Arabic Readability Assessment
von: Elmadani, Khalid N., et al.
Veröffentlicht: (2025)

ZAEBUC-Spoken: A Multilingual Multidialectal Arabic-English Speech Corpus
von: Hamed, Injy, et al.
Veröffentlicht: (2024)

Poem Meter Classification of Recited Arabic Poetry: Integrating High-Resource Systems for a Low-Resource Task
von: Al-Shaibani, Maged S., et al.
Veröffentlicht: (2025)

Detecting Propaganda Techniques in Code-Switched Social Media Text
von: Salman, Muhammad Umar, et al.
Veröffentlicht: (2023)

Cross-Cultural Transfer of Commonsense Reasoning in LLMs: Evidence from the Arab World
von: Almheiri, Saeed, et al.
Veröffentlicht: (2025)

Arabic Diacritics in the Wild: Exploiting Opportunities for Improved Diacritization
von: Elgamal, Salman, et al.
Veröffentlicht: (2024)

BALSAM: A Platform for Benchmarking Arabic Large Language Models
von: Al-Matham, Rawan, et al.
Veröffentlicht: (2025)

The SAMER Arabic Text Simplification Corpus
von: Alhafni, Bashar, et al.
Veröffentlicht: (2024)

CIDAR: Culturally Relevant Instruction Dataset For Arabic
von: Alyafeai, Zaid, et al.
Veröffentlicht: (2024)

Computational Morphology and Lexicography Modeling of Modern Standard Arabic Nominals
von: Khairallah, Christian, et al.
Veröffentlicht: (2024)

Proper Noun Diacritization for Arabic Wikipedia: A Benchmark Dataset
von: Bondok, Rawan, et al.
Veröffentlicht: (2025)

Cross-Lingual Empirical Evaluation of Large Language Models for Arabic Medical Tasks
von: Abouzahir, Chaimae, et al.
Veröffentlicht: (2026)

MuDRiC: Multi-Dialect Reasoning for Arabic Commonsense Validation
von: Elozeiri, Kareem, et al.
Veröffentlicht: (2025)

Enhancing Arabic Automated Essay Scoring with Synthetic Data and Error Injection
von: Qwaider, Chatrine, et al.
Veröffentlicht: (2025)

Guidelines for Fine-grained Sentence-level Arabic Readability Annotation
von: Habash, Nizar, et al.
Veröffentlicht: (2024)

Casablanca: Data and Models for Multidialectal Arabic Speech Recognition
von: Talafha, Bashar, et al.
Veröffentlicht: (2024)

Cultural Benchmarking of LLMs in Standard and Dialectal Arabic Dialogues
von: Kautsar, Muhammad Dehan Al, et al.
Veröffentlicht: (2026)

KazMMLU: Evaluating Language Models on Kazakh, Russian, and Regional Knowledge of Kazakhstan
von: Togmanov, Mukhammed, et al.
Veröffentlicht: (2025)

Arabic Stable LM: Adapting Stable LM 2 1.6B to Arabic
von: Alyafeai, Zaid, et al.
Veröffentlicht: (2024)

From Multiple-Choice to Extractive QA: A Case Study for English and Arabic
von: Lynn, Teresa, et al.
Veröffentlicht: (2024)

ArFake: A Multi-Dialect Benchmark and Baselines for Arabic Spoof-Speech Detection
von: Maged, Mohamed, et al.
Veröffentlicht: (2025)

Cracking the Code: Multi-domain LLM Evaluation on Real-World Professional Exams in Indonesia
von: Koto, Fajri
Veröffentlicht: (2024)

A Survey of Code-switched Arabic NLP: Progress, Challenges, and Future Directions
von: Hamed, Injy, et al.
Veröffentlicht: (2025)

ArabEmoNet: A Lightweight Hybrid 2D CNN-BiLSTM Model with Attention for Robust Arabic Speech Emotion Recognition
von: Abouzeid, Ali, et al.
Veröffentlicht: (2025)

Jawaher: A Multidialectal Dataset of Arabic Proverbs for LLM Benchmarking
von: Magdy, Samar M., et al.
Veröffentlicht: (2025)

Instruction Tuning on Public Government and Cultural Data for Low-Resource Language: a Case Study in Kazakh
von: Laiyk, Nurkhan, et al.
Veröffentlicht: (2025)