Buchumschlag

A Typologically Grounded Evaluation Framework for Word Order and Morphology Sensitivity in Multilingual Masked LMs

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Feldman, Anna, Barak, Libby, Peng, Jing
Format:	Preprint
Veröffentlicht:	2026
Schlagworte:	Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

When Does Language Transfer Help? Sequential Fine-Tuning for Cross-Lingual Euphemism Detection
von: Sammartino, Julia, et al.
Veröffentlicht: (2025)

Multilingual Gradient Word-Order Typology from Universal Dependencies
von: Baylor, Emi, et al.
Veröffentlicht: (2024)

When Semantic Overlap Is Not Enough: Cross-Lingual Euphemism Transfer Between Turkish and English
von: Biyik, Hasan Can, et al.
Veröffentlicht: (2026)

A Grounded Typology of Word Classes
von: Haley, Coleman, et al.
Veröffentlicht: (2024)

Which Word Orders Facilitate Length Generalization in LMs? An Investigation with GCG-Based Artificial Languages
von: El-Naggar, Nadine, et al.
Veröffentlicht: (2025)

Mask and You Shall Receive: Optimizing Masked Language Modeling For Pretraining BabyLMs
von: Edman, Lukas, et al.
Veröffentlicht: (2025)

A Principled Framework for Evaluating on Typologically Diverse Languages
von: Ploeger, Esther, et al.
Veröffentlicht: (2024)

IMPACT: Inflectional Morphology Probes Across Complex Typologies
von: Saeed, Mohammed J., et al.
Veröffentlicht: (2025)

Morphological Typology in BPE Subword Productivity and Language Modeling
von: Parra, Iñigo
Veröffentlicht: (2024)

Linguistic Generalizations are not Rules: Impacts on Evaluation of LMs
von: Weissweiler, Leonie, et al.
Veröffentlicht: (2025)

On the Interplay between Positional Encodings, Morphological Complexity, and Word Order Flexibility
von: Tatariya, Kushal, et al.
Veröffentlicht: (2025)

MMA-ASIA: A Multilingual and Multimodal Alignment Framework for Culturally-Grounded Evaluation
von: Zheng, Weihua, et al.
Veröffentlicht: (2025)

CATs are Fuzzy PETs: A Corpus and Analysis of Potentially Euphemistic Terms
von: Gavidia, Martha, et al.
Veröffentlicht: (2022)

A Psycholinguistic Evaluation of Language Models' Sensitivity to Argument Roles
von: Lee, Eun-Kyoung Rosa, et al.
Veröffentlicht: (2024)

FactCheckmate: Preemptively Detecting and Mitigating Hallucinations in LMs
von: Alnuhait, Deema, et al.
Veröffentlicht: (2024)

DSL-LLaDA: Scaling Continuous Denoising to 8B Masked Diffusion LMs
von: Yu, Longxuan, et al.
Veröffentlicht: (2026)

MEDs for PETs: Multilingual Euphemism Disambiguation for Potentially Euphemistic Terms
von: Lee, Patrick, et al.
Veröffentlicht: (2024)

HumanRankEval: Automatic Evaluation of LMs as Conversational Assistants
von: Gritta, Milan, et al.
Veröffentlicht: (2024)

Grounded Token Initialization for New Vocabulary in LMs for Generative Recommendation
von: Chen, Daiwei, et al.
Veröffentlicht: (2026)

Assessing the Impact of Typological Features on Multilingual Machine Translation in the Age of Large Language Models
von: Hirak, Vitalii, et al.
Veröffentlicht: (2026)

Can Machines Resonate with Humans? Evaluating the Emotional and Empathic Comprehension of LMs
von: Manzoor, Muhammad Arslan, et al.
Veröffentlicht: (2024)

PhoniTale: Phonologically Grounded Mnemonic Generation for Typologically Distant Language Pairs
von: Kang, Sana, et al.
Veröffentlicht: (2025)

URIEL+: Enhancing Linguistic Inclusion and Usability in a Typological and Multilingual Knowledge Base
von: Khan, Aditya, et al.
Veröffentlicht: (2024)

Are BabyLMs Second Language Learners?
von: Edman, Lukas, et al.
Veröffentlicht: (2024)

Multilingual Substitution-based Word Sense Induction
von: Kokosinskii, Denis, et al.
Veröffentlicht: (2024)

Where-to-Unmask: Ground-Truth-Guided Unmasking Order Learning for Masked Diffusion Language Models
von: Asano, Hikaru, et al.
Veröffentlicht: (2026)

Are BabyLMs Deaf to Gricean Maxims? A Pragmatic Evaluation of Sample-efficient Language Models
von: Askari, Raha, et al.
Veröffentlicht: (2025)

ColorSwap: A Color and Word Order Dataset for Multimodal Evaluation
von: Burapacheep, Jirayu, et al.
Veröffentlicht: (2024)

Bidirectional LMs are Better Knowledge Memorizers? A Benchmark for Real-world Knowledge Injection
von: Zhang, Yuwei, et al.
Veröffentlicht: (2025)

How to Make LMs Strong Node Classifiers?
von: Xu, Zhe, et al.
Veröffentlicht: (2024)

Against All Odds: Overcoming Typology, Script, and Language Confusion in Multilingual Embedding Inversion Attacks
von: Chen, Yiyi, et al.
Veröffentlicht: (2024)

MultiHal: Multilingual Dataset for Knowledge-Graph Grounded Evaluation of LLM Hallucinations
von: Lavrinovics, Ernests, et al.
Veröffentlicht: (2025)

What is Your Favorite Gender, MLM? Gender Bias Evaluation in Multilingual Masked Language Models
von: Yu, Jeongrok, et al.
Veröffentlicht: (2024)

A suite of LMs comprehend puzzle statements as well as humans
von: Goldberg, Adele E, et al.
Veröffentlicht: (2025)

MORPHOGEN: A Multilingual Benchmark for Evaluating Gender-Aware Morphological Generation
von: Agarwal, Mehul, et al.
Veröffentlicht: (2026)

Compositional preference models for aligning LMs
von: Go, Dongyoung, et al.
Veröffentlicht: (2023)

Humans and transformer LMs: Abstraction drives language learning
von: Jian, Jasper, et al.
Veröffentlicht: (2026)

Beyond Pattern Recognition: Probing Mental Representations of LMs
von: Miller, Moritz, et al.
Veröffentlicht: (2025)

Crafting In-context Examples according to LMs' Parametric Knowledge
von: Lee, Yoonsang, et al.
Veröffentlicht: (2023)

From Flat Language Labels to Typological Priors: Structured Language Conditioning for Multilingual Speech-to-Speech Translation
von: Pan, Yu, et al.
Veröffentlicht: (2026)