Correlating instruction-tuning (in multimodal models) with vision-language processing (in the brain)
Fuente:
arXiv
Gespeichert in:
| Hauptverfasser: | Oota, Subba Reddy, Jindal, Akshett, Mondal, Ishani, Pahwa, Khushbu, Namburi, Satya Sai Srinath, Shrivastava, Manish, Singh, Maneesh, Raju, Bapi S., Gupta, Manish |
|---|---|
| Format: | Preprint |
| Veröffentlicht: |
2025
|
| Schlagworte: | |
| Online-Zugang: | |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Ähnliche Einträge
Task-conditioned probing of instruction-tuned multimodal LLMs: Region-specific brain alignment patterns under naturalistic stimuli
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2025)
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2025)
Brain alignment of reasoning and action representations from vision-language and action models during naturalistic gameplay
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2026)
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2026)
Linguistic properties and model scale in brain encoding: from small to compressed language models
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2026)
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2026)
Multi-modal brain encoding models for multi-modal stimuli
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2025)
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2025)
How does longer temporal context enhance multimodal narrative video processing in the brain?
von: Jindal, Prachi, et al.
Veröffentlicht: (2026)
von: Jindal, Prachi, et al.
Veröffentlicht: (2026)
Deep Neural Networks and Brain Alignment: Brain Encoding and Decoding (Survey)
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2023)
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2023)
Speech language models lack important brain-relevant semantics
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2023)
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2023)
DaVinci at SemEval-2024 Task 9: Few-shot prompting GPT-3.5 for Unconventional Reasoning
von: Mathur, Suyash Vardhan, et al.
Veröffentlicht: (2024)
von: Mathur, Suyash Vardhan, et al.
Veröffentlicht: (2024)
Embodiment in multimodal large language models
von: Kadambi, Akila, et al.
Veröffentlicht: (2025)
von: Kadambi, Akila, et al.
Veröffentlicht: (2025)
The time course of visuo-semantic representations in the human brain is captured by combining vision and language models
von: Rong, Boyan, et al.
Veröffentlicht: (2025)
von: Rong, Boyan, et al.
Veröffentlicht: (2025)
LastResort at SemEval-2024 Task 3: Exploring Multimodal Emotion Cause Pair Extraction as Sequence Labelling Task
von: Mathur, Suyash Vardhan, et al.
Veröffentlicht: (2024)
von: Mathur, Suyash Vardhan, et al.
Veröffentlicht: (2024)
Language modulates vision: Evidence from neural networks and human brain-lesion models
von: Chen, Haoyang, et al.
Veröffentlicht: (2025)
von: Chen, Haoyang, et al.
Veröffentlicht: (2025)
A foundation model of vision, audition, and language for in-silico neuroscience
von: d'Ascoli, Stéphane, et al.
Veröffentlicht: (2026)
von: d'Ascoli, Stéphane, et al.
Veröffentlicht: (2026)
Fibration symmetry-breaking supports functional transitions in a brain network engaged in language
von: Gili, Tommaso, et al.
Veröffentlicht: (2024)
von: Gili, Tommaso, et al.
Veröffentlicht: (2024)
Representations in vision and language converge in a shared, multidimensional space of perceived similarities
von: Simkova, Katerina Marie, et al.
Veröffentlicht: (2025)
von: Simkova, Katerina Marie, et al.
Veröffentlicht: (2025)
State-dependent brain responsiveness, from local circuits to the whole brain
von: Destexhe, A., et al.
Veröffentlicht: (2025)
von: Destexhe, A., et al.
Veröffentlicht: (2025)
BrainSymphony: A parameter-efficient multimodal foundation model for brain dynamics with limited data
von: Khajehnejad, Moein, et al.
Veröffentlicht: (2025)
von: Khajehnejad, Moein, et al.
Veröffentlicht: (2025)
The Idea of Exo-brain
von: Betageri, Ankur
Veröffentlicht: (2022)
von: Betageri, Ankur
Veröffentlicht: (2022)
The brain as a blueprint: a survey of brain-inspired approaches to learning in artificial intelligence
von: Etter, Guillaume
Veröffentlicht: (2025)
von: Etter, Guillaume
Veröffentlicht: (2025)
Multi-centre normative brain mapping of intracranial EEG lifespan patterns in the human brain
von: Woodhouse, Heather, et al.
Veröffentlicht: (2024)
von: Woodhouse, Heather, et al.
Veröffentlicht: (2024)
Models of attractor dynamics in the brain
von: Fakhoury, Tala, et al.
Veröffentlicht: (2025)
von: Fakhoury, Tala, et al.
Veröffentlicht: (2025)
Peripheral brain interfacing: Reading high-frequency brain signals from the output of the nervous system
von: Ibáñez, Jaime, et al.
Veröffentlicht: (2024)
von: Ibáñez, Jaime, et al.
Veröffentlicht: (2024)
A region-specific brain dysfunction underlies cognitive impairment in long COVID brain fog
von: Yang, Jinhao, et al.
Veröffentlicht: (2025)
von: Yang, Jinhao, et al.
Veröffentlicht: (2025)
Analyzing Brain Tumor Connectomics using Graphs and Persistent Homology
von: Bhattacharya, Debanjali, et al.
Veröffentlicht: (2024)
von: Bhattacharya, Debanjali, et al.
Veröffentlicht: (2024)
The immediate effect of kangaroo mother care on Mother-infant inter-brain synchrony and infant brain function
von: Liu, Yu, et al.
Veröffentlicht: (2026)
von: Liu, Yu, et al.
Veröffentlicht: (2026)
Brains and language models converge on a shared conceptual space across different languages
von: Zada, Zaid, et al.
Veröffentlicht: (2025)
von: Zada, Zaid, et al.
Veröffentlicht: (2025)
Distinct social-linguistic processing between humans and large audio-language models: Evidence from model-brain alignment
von: Wu, Hanlin, et al.
Veröffentlicht: (2025)
von: Wu, Hanlin, et al.
Veröffentlicht: (2025)
Amortizing personalization in virtual brain twins
von: Baldy, Nina, et al.
Veröffentlicht: (2025)
von: Baldy, Nina, et al.
Veröffentlicht: (2025)
Spurious reconstruction from brain activity
von: Shirakawa, Ken, et al.
Veröffentlicht: (2024)
von: Shirakawa, Ken, et al.
Veröffentlicht: (2024)
Simulation and assimilation of the digital human brain
von: Lu, Wenlian, et al.
Veröffentlicht: (2022)
von: Lu, Wenlian, et al.
Veröffentlicht: (2022)
The embodied brain: Bridging the brain, body, and behavior with neuromechanical digital twins
von: Wang-Chen, Sibo, et al.
Veröffentlicht: (2026)
von: Wang-Chen, Sibo, et al.
Veröffentlicht: (2026)
The "Bayesian" brain, with a bit less Bayes
von: Spaak, Eelke
Veröffentlicht: (2021)
von: Spaak, Eelke
Veröffentlicht: (2021)
Unconsciousness reconfigures modular brain network dynamics
von: del Pozo, Sofia Morena, et al.
Veröffentlicht: (2020)
von: del Pozo, Sofia Morena, et al.
Veröffentlicht: (2020)
Baseline behaviour in human vision
von: Fabian, Thomas
Veröffentlicht: (2025)
von: Fabian, Thomas
Veröffentlicht: (2025)
The Multi-biophysical nature of Computation in brain neural networks
von: Winlow, William, et al.
Veröffentlicht: (2025)
von: Winlow, William, et al.
Veröffentlicht: (2025)
How memories are stored in the brain: the declarative memory model
von: Zhang, Jie
Veröffentlicht: (2024)
von: Zhang, Jie
Veröffentlicht: (2024)
Firing rate model for brain rhythms controlled by astrocytes
von: Stasenko, Sergey V., et al.
Veröffentlicht: (2024)
von: Stasenko, Sergey V., et al.
Veröffentlicht: (2024)
The explanatory power of activity flow models of brain function
von: Cole, Michael W.
Veröffentlicht: (2024)
von: Cole, Michael W.
Veröffentlicht: (2024)
Allometric scaling of brain activity explained by avalanche criticality
von: Simões, Tiago S. A. N., et al.
Veröffentlicht: (2025)
von: Simões, Tiago S. A. N., et al.
Veröffentlicht: (2025)
Meditative absorption shifts brain dynamics toward criticality
von: Mago, Jonas, et al.
Veröffentlicht: (2025)
von: Mago, Jonas, et al.
Veröffentlicht: (2025)
Ähnliche Einträge
-
Task-conditioned probing of instruction-tuned multimodal LLMs: Region-specific brain alignment patterns under naturalistic stimuli
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2025) -
Brain alignment of reasoning and action representations from vision-language and action models during naturalistic gameplay
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2026) -
Linguistic properties and model scale in brain encoding: from small to compressed language models
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2026) -
Multi-modal brain encoding models for multi-modal stimuli
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2025) -
How does longer temporal context enhance multimodal narrative video processing in the brain?
von: Jindal, Prachi, et al.
Veröffentlicht: (2026)