The Expressive Power of Transformers with Chain of Thought
Fuente:
arXiv
Salvato in:
| Autori principali: | Merrill, William, Sabharwal, Ashish |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2023
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Exact Expressive Power of Transformers with Padding
di: Merrill, William, et al.
Pubblicazione: (2025)
di: Merrill, William, et al.
Pubblicazione: (2025)
A Little Depth Goes a Long Way: The Expressive Power of Log-Depth Transformers
di: Merrill, William, et al.
Pubblicazione: (2025)
di: Merrill, William, et al.
Pubblicazione: (2025)
Revisiting Padded Transformer Expressivity: Which Architectural Choices Matter and Which Don't
di: Svete, Anej, et al.
Pubblicazione: (2026)
di: Svete, Anej, et al.
Pubblicazione: (2026)
A Logic for Expressing Log-Precision Transformers
di: Merrill, William, et al.
Pubblicazione: (2022)
di: Merrill, William, et al.
Pubblicazione: (2022)
The Illusion of State in State-Space Models
di: Merrill, William, et al.
Pubblicazione: (2024)
di: Merrill, William, et al.
Pubblicazione: (2024)
The Expressive Power of Low Precision Softmax Transformers with (Summarized) Chain-of-Thought
di: Brösamle, Moritz, et al.
Pubblicazione: (2026)
di: Brösamle, Moritz, et al.
Pubblicazione: (2026)
Why Are Linear RNNs More Parallelizable?
di: Merrill, William, et al.
Pubblicazione: (2026)
di: Merrill, William, et al.
Pubblicazione: (2026)
The Complexity and Expressive Power of Second-Order Extended Logic
di: Feng, Shiguang, et al.
Pubblicazione: (2022)
di: Feng, Shiguang, et al.
Pubblicazione: (2022)
The Descriptive Complexity of Graph Neural Networks
di: Grohe, Martin
Pubblicazione: (2023)
di: Grohe, Martin
Pubblicazione: (2023)
Local vs. Global Interpretability: A Computational Complexity Perspective
di: Bassan, Shahaf, et al.
Pubblicazione: (2024)
di: Bassan, Shahaf, et al.
Pubblicazione: (2024)
On the Computational Tractability of the (Many) Shapley Values
di: Marzouk, Reda, et al.
Pubblicazione: (2025)
di: Marzouk, Reda, et al.
Pubblicazione: (2025)
Hard to Explain: On the Computational Hardness of In-Distribution Model Interpretation
di: Amir, Guy, et al.
Pubblicazione: (2024)
di: Amir, Guy, et al.
Pubblicazione: (2024)
Verifying Quantized Graph Neural Networks is PSPACE-complete
di: Sälzer, Marco, et al.
Pubblicazione: (2025)
di: Sälzer, Marco, et al.
Pubblicazione: (2025)
Provably Explaining Neural Additive Models
di: Bassan, Shahaf, et al.
Pubblicazione: (2026)
di: Bassan, Shahaf, et al.
Pubblicazione: (2026)
Is uniform expressivity too restrictive? Towards efficient expressivity of graph neural networks
di: Khalife, Sammy, et al.
Pubblicazione: (2024)
di: Khalife, Sammy, et al.
Pubblicazione: (2024)
What makes an Ensemble (Un) Interpretable?
di: Bassan, Shahaf, et al.
Pubblicazione: (2025)
di: Bassan, Shahaf, et al.
Pubblicazione: (2025)
The Complexity of Verifying Feedforward Neural Networks in Quantised Settings
di: Alsmann, Eric, et al.
Pubblicazione: (2026)
di: Alsmann, Eric, et al.
Pubblicazione: (2026)
Limits of Deep Learning: Sequence Modeling through the Lens of Complexity Theory
di: Zubić, Nikola, et al.
Pubblicazione: (2024)
di: Zubić, Nikola, et al.
Pubblicazione: (2024)
Transformer Encoder Satisfiability: Complexity and Impact on Formal Reasoning
di: Sälzer, Marco, et al.
Pubblicazione: (2024)
di: Sälzer, Marco, et al.
Pubblicazione: (2024)
Kleene algebra with commutativity conditions is undecidable
di: de Amorim, Arthur Azevedo, et al.
Pubblicazione: (2024)
di: de Amorim, Arthur Azevedo, et al.
Pubblicazione: (2024)
What Formal Languages Can Transformers Express? A Survey
di: Strobl, Lena, et al.
Pubblicazione: (2023)
di: Strobl, Lena, et al.
Pubblicazione: (2023)
The Power of Negation in Higher-Order Datalog
di: Charalambidis, Angelos, et al.
Pubblicazione: (2025)
di: Charalambidis, Angelos, et al.
Pubblicazione: (2025)
Reasonable Space for the $λ$-Calculus, Logarithmically
di: Accattoli, Beniamino, et al.
Pubblicazione: (2022)
di: Accattoli, Beniamino, et al.
Pubblicazione: (2022)
LFPL: Revisited and Mechanized
di: Glover, Nathaniel, et al.
Pubblicazione: (2026)
di: Glover, Nathaniel, et al.
Pubblicazione: (2026)
Complete and tractable machine-independent characterizations of second-order polytime
di: Hainry, Emmanuel, et al.
Pubblicazione: (2022)
di: Hainry, Emmanuel, et al.
Pubblicazione: (2022)
Reversible Computation with Stacks and "Reversible Management of Failures"
di: Palazzo, Matteo, et al.
Pubblicazione: (2025)
di: Palazzo, Matteo, et al.
Pubblicazione: (2025)
Program Synthesis is $Σ_3^0$-Complete
di: Kim, Jinwoo
Pubblicazione: (2024)
di: Kim, Jinwoo
Pubblicazione: (2024)
The Reachability Problem for Neural-Network Control Systems
di: Schilling, Christian, et al.
Pubblicazione: (2024)
di: Schilling, Christian, et al.
Pubblicazione: (2024)
The Computational Complexity of Satisfiability in State Space Models
di: Alsmann, Eric, et al.
Pubblicazione: (2025)
di: Alsmann, Eric, et al.
Pubblicazione: (2025)
Verifying Quantized GNNs With Readout Is Decidable But Highly Intractable
di: Chernobrovkin, Artem, et al.
Pubblicazione: (2025)
di: Chernobrovkin, Artem, et al.
Pubblicazione: (2025)
Data Complexity in Expressive Description Logics With Path Expressions
di: Bednarczyk, Bartosz
Pubblicazione: (2024)
di: Bednarczyk, Bartosz
Pubblicazione: (2024)
Primitive Recursion without Composition: Dynamical Characterizations, from Neural Networks to Polynomial ODEs
di: Bournez, Olivier
Pubblicazione: (2026)
di: Bournez, Olivier
Pubblicazione: (2026)
Theoretical Constraints on the Expressive Power of $\mathsf{RoPE}$-based Tensor Attention Transformers
di: Li, Xiaoyu, et al.
Pubblicazione: (2024)
di: Li, Xiaoyu, et al.
Pubblicazione: (2024)
Context-Free Recognition with Transformers
di: Jerad, Selim, et al.
Pubblicazione: (2026)
di: Jerad, Selim, et al.
Pubblicazione: (2026)
Non-commutative linear logic fragments with sub-context-free complexity
di: Nishimiya, Yusaku, et al.
Pubblicazione: (2025)
di: Nishimiya, Yusaku, et al.
Pubblicazione: (2025)
An order out of nowhere: a new algorithm for infinite-domain CSPs
di: Mottet, Antoine, et al.
Pubblicazione: (2023)
di: Mottet, Antoine, et al.
Pubblicazione: (2023)
Functional variant of Polynomial Analogue of Gandy's Fixed Point Theorem
di: Nechesov, Andrey
Pubblicazione: (2024)
di: Nechesov, Andrey
Pubblicazione: (2024)
Proof Complexity of Linear Logics
di: Tabatabai, Amirhossein Akbar, et al.
Pubblicazione: (2026)
di: Tabatabai, Amirhossein Akbar, et al.
Pubblicazione: (2026)
The Proof Analysis Problem
di: Arteche, Noel, et al.
Pubblicazione: (2025)
di: Arteche, Noel, et al.
Pubblicazione: (2025)
Proof complexity of positive branching programs
di: Das, Anupam, et al.
Pubblicazione: (2021)
di: Das, Anupam, et al.
Pubblicazione: (2021)
Documenti analoghi
-
Exact Expressive Power of Transformers with Padding
di: Merrill, William, et al.
Pubblicazione: (2025) -
A Little Depth Goes a Long Way: The Expressive Power of Log-Depth Transformers
di: Merrill, William, et al.
Pubblicazione: (2025) -
Revisiting Padded Transformer Expressivity: Which Architectural Choices Matter and Which Don't
di: Svete, Anej, et al.
Pubblicazione: (2026) -
A Logic for Expressing Log-Precision Transformers
di: Merrill, William, et al.
Pubblicazione: (2022) -
The Illusion of State in State-Space Models
di: Merrill, William, et al.
Pubblicazione: (2024)