Interpretable Next-token Prediction via the Generalized Induction Head

Documenti analoghi

• Rethinking Interpretability in the Era of Large Language Models
  di: Singh, Chandan, et al.
  Pubblicazione: (2024)
• Agentic-imodels: Evolving agentic interpretability tools via autoresearch
  di: Singh, Chandan, et al.
  Pubblicazione: (2026)
• Large Language Models are Skeptics: False Negative Problem of Input-conflicting Hallucination
  di: Song, Jongyoon, et al.
  Pubblicazione: (2024)
• Physics in Next-token Prediction
  di: An, Hongjun, et al.
  Pubblicazione: (2024)
• Learning a Decision Tree Algorithm with Transformers
  di: Zhuang, Yufan, et al.
  Pubblicazione: (2024)