Manipulating language models' training data to study syntactic constraint learning: the case of English passivization
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Leong, Cara Su-Yi, Linzen, Tal |
|---|---|
| Format: | Preprint |
| Publié: |
2024
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
Why are language models less surprised than humans? Testing the Parse Multiplicity Mismatch Hypothesis
par: Timkey, William, et autres
Publié: (2026)
par: Timkey, William, et autres
Publié: (2026)
SPAWNing Structural Priming Predictions from a Cognitively Motivated Parser
par: Prasad, Grusha, et autres
Publié: (2024)
par: Prasad, Grusha, et autres
Publié: (2024)
Do Language Models' Words Refer?
par: Mandelkern, Matthew, et autres
Publié: (2023)
par: Mandelkern, Matthew, et autres
Publié: (2023)
Deconstructing sentence disambiguation by joint latent modeling of reading paradigms: LLM surprisal is not enough
par: Paape, Dario, et autres
Publié: (2026)
par: Paape, Dario, et autres
Publié: (2026)
Disambiguation of morpho-syntactic features of African American English -- the case of habitual be
par: Santiago, Harrison, et autres
Publié: (2022)
par: Santiago, Harrison, et autres
Publié: (2022)
Entailment Semantics Can Be Extracted from an Ideal Language Model
par: Merrill, William, et autres
Publié: (2022)
par: Merrill, William, et autres
Publié: (2022)
Evaluating In-Context Translation with Synchronous Context-Free Grammar Transduction
par: Petty, Jackson, et autres
Publié: (2026)
par: Petty, Jackson, et autres
Publié: (2026)
Generating event descriptions under syntactic and semantic constraints
par: Cao, Angela, et autres
Publié: (2024)
par: Cao, Angela, et autres
Publié: (2024)
LLMs syntactically adapt their language use to their conversational partner
par: Kandra, Florian, et autres
Publié: (2025)
par: Kandra, Florian, et autres
Publié: (2025)
How language models extrapolate outside the training data: A case study in Textualized Gridworld
par: Kim, Doyoung, et autres
Publié: (2024)
par: Kim, Doyoung, et autres
Publié: (2024)
What Goes Into a LM Acceptability Judgment? Rethinking the Impact of Frequency and Length
par: Tjuatja, Lindia, et autres
Publié: (2024)
par: Tjuatja, Lindia, et autres
Publié: (2024)
In-context Learning Generalizes, But Not Always Robustly: The Case of Syntax
par: Mueller, Aaron, et autres
Publié: (2023)
par: Mueller, Aaron, et autres
Publié: (2023)
How Does Code Pretraining Affect Language Model Task Performance?
par: Petty, Jackson, et autres
Publié: (2024)
par: Petty, Jackson, et autres
Publié: (2024)
Multilingual Prompting for Improving LLM Generation Diversity
par: Wang, Qihan, et autres
Publié: (2025)
par: Wang, Qihan, et autres
Publié: (2025)
Different types of syntactic agreement recruit the same units within large language models
par: Kryvosheieva, Daria, et autres
Publié: (2025)
par: Kryvosheieva, Daria, et autres
Publié: (2025)
Can You Learn Semantics Through Next-Word Prediction? The Case of Entailment
par: Merrill, William, et autres
Publié: (2024)
par: Merrill, William, et autres
Publié: (2024)
Emergence of Linear Truth Encodings in Language Models
par: Ravfogel, Shauli, et autres
Publié: (2025)
par: Ravfogel, Shauli, et autres
Publié: (2025)
A hierarchical Bayesian model for syntactic priming
par: Xu, Weijie, et autres
Publié: (2024)
par: Xu, Weijie, et autres
Publié: (2024)
Language Models Struggle to Use Representations Learned In-Context
par: Lepori, Michael A., et autres
Publié: (2026)
par: Lepori, Michael A., et autres
Publié: (2026)
Formalising lexical and syntactic diversity for data sampling in French
par: Estève, Louis, et autres
Publié: (2025)
par: Estève, Louis, et autres
Publié: (2025)
Counting trees: A treebank-driven exploration of syntactic variation in speech and writing across languages
par: Dobrovoljc, Kaja
Publié: (2025)
par: Dobrovoljc, Kaja
Publié: (2025)
Tiny language models
par: Gross, Ronit D., et autres
Publié: (2025)
par: Gross, Ronit D., et autres
Publié: (2025)
Rapid Word Learning Through Meta In-Context Learning
par: Wang, Wentao, et autres
Publié: (2025)
par: Wang, Wentao, et autres
Publié: (2025)
The distribution of syntactic dependency distances
par: Petrini, Sonia, et autres
Publié: (2022)
par: Petrini, Sonia, et autres
Publié: (2022)
Automata-based constraints for language model decoding
par: Koo, Terry, et autres
Publié: (2024)
par: Koo, Terry, et autres
Publié: (2024)
Exploring language relations through syntactic distances and geographic proximity
par: De Gregorio, Juan, et autres
Publié: (2024)
par: De Gregorio, Juan, et autres
Publié: (2024)
Dynamic data sampler for cross-language transfer learning in large language models
par: Li, Yudong, et autres
Publié: (2024)
par: Li, Yudong, et autres
Publié: (2024)
RELIC: Evaluating Complex Reasoning via the Recognition of Languages In-Context
par: Petty, Jackson, et autres
Publié: (2025)
par: Petty, Jackson, et autres
Publié: (2025)
The Impact of Depth on Compositional Generalization in Transformer Language Models
par: Petty, Jackson, et autres
Publié: (2023)
par: Petty, Jackson, et autres
Publié: (2023)
Can language models learn analogical reasoning? Investigating training objectives and comparisons to human performance
par: Petersen, Molly R., et autres
Publié: (2023)
par: Petersen, Molly R., et autres
Publié: (2023)
Between Circuits and Chomsky: Pre-pretraining on Formal Languages Imparts Linguistic Biases
par: Hu, Michael Y., et autres
Publié: (2025)
par: Hu, Michael Y., et autres
Publié: (2025)
Always Learning, Always Mixing: Efficient and Simple Data Mixing All The Time
par: Hu, Michael Y., et autres
Publié: (2026)
par: Hu, Michael Y., et autres
Publié: (2026)
Large language models have learned to use language
par: Lupyan, Gary
Publié: (2025)
par: Lupyan, Gary
Publié: (2025)
Bayesian Teaching Enables Probabilistic Reasoning in Large Language Models
par: Qiu, Linlu, et autres
Publié: (2025)
par: Qiu, Linlu, et autres
Publié: (2025)
We can still parse using syntactic rules
par: Hussein, Ghaly
Publié: (2026)
par: Hussein, Ghaly
Publié: (2026)
Symbol tuning improves in-context learning in language models
par: Wei, Jerry, et autres
Publié: (2023)
par: Wei, Jerry, et autres
Publié: (2023)
Data Augmentation With Back translation for Low Resource languages: A case of English and Luganda
par: Kimera, Richard, et autres
Publié: (2025)
par: Kimera, Richard, et autres
Publié: (2025)
Revisiting subword tokenization: A case study on affixal negation in large language models
par: Truong, Thinh Hung, et autres
Publié: (2024)
par: Truong, Thinh Hung, et autres
Publié: (2024)
Do we really have to filter out random noise in pre-training data for language models?
par: Ru, Jinghan, et autres
Publié: (2025)
par: Ru, Jinghan, et autres
Publié: (2025)
StatLLaMA: Multi-Stage training for domain-optimized statistical large language models
par: Zeng, Jing-Yi, et autres
Publié: (2025)
par: Zeng, Jing-Yi, et autres
Publié: (2025)
Documents similaires
-
Why are language models less surprised than humans? Testing the Parse Multiplicity Mismatch Hypothesis
par: Timkey, William, et autres
Publié: (2026) -
SPAWNing Structural Priming Predictions from a Cognitively Motivated Parser
par: Prasad, Grusha, et autres
Publié: (2024) -
Do Language Models' Words Refer?
par: Mandelkern, Matthew, et autres
Publié: (2023) -
Deconstructing sentence disambiguation by joint latent modeling of reading paradigms: LLM surprisal is not enough
par: Paape, Dario, et autres
Publié: (2026) -
Disambiguation of morpho-syntactic features of African American English -- the case of habitual be
par: Santiago, Harrison, et autres
Publié: (2022)