Buchumschlag

Multi-modal brain encoding models for multi-modal stimuli

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Oota, Subba Reddy, Pahwa, Khushbu, Marreddy, Mounika, Singh, Maneesh, Gupta, Manish, Raju, Bapi S.
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Neurons and Cognition Artificial Intelligence Computation and Language Machine Learning Audio and Speech Processing Image and Video Processing
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Speech language models lack important brain-relevant semantics
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2023)

Multi-modal MRI sensitive to age: Focus on early brain development in infants
von: Dubois, Jessica
Veröffentlicht: (2023)

SIM: Surface-based fMRI Analysis for Inter-Subject Multimodal Decoding from Movie-Watching Experiments
von: Dahan, Simon, et al.
Veröffentlicht: (2025)

Detection of Auditory Brainstem Response Peaks Using Image Processing Techniques in Infants with Normal Hearing Sensitivity
von: Majidpour, Amir, et al.
Veröffentlicht: (2024)

Task-conditioned probing of instruction-tuned multimodal LLMs: Region-specific brain alignment patterns under naturalistic stimuli
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2025)

Correlating instruction-tuning (in multimodal models) with vision-language processing (in the brain)
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2025)

Perception of dynamic multi-speaker auditory scenes under different modes of attention
von: Graceffo, Stephanie, et al.
Veröffentlicht: (2025)

PTSD-MDNN : Fusion tardive de réseaux de neurones profonds multimodaux pour la détection du trouble de stress post-traumatique
von: Nguyen-Phuoc, Long, et al.
Veröffentlicht: (2024)

Cortical Temporal Mismatch Compensation in Bimodal Cochlear Implant Users: Selective Attention Decoding and Pupillometry Study
von: Dolhopiatenko, Hanna, et al.
Veröffentlicht: (2025)

A computational loudness model for electrical stimulation with cochlear implants
von: Alvarez, Franklin, et al.
Veröffentlicht: (2025)

Interpretable Embeddings of Speech Enhance and Explain Brain Encoding Performance of Audio Models
von: Shimizu, Riki, et al.
Veröffentlicht: (2025)

Linguistic properties and model scale in brain encoding: from small to compressed language models
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2026)

A human brain atlas of chi-separation for normative iron and myelin distributions
von: Min, Kyeongseon, et al.
Veröffentlicht: (2023)

A multi-modal approach for identifying schizophrenia using cross-modal attention
von: Premananth, Gowtham, et al.
Veröffentlicht: (2023)

Looking through the mind's eye via multimodal encoder-decoder networks
von: Afrasiyabi, Arman, et al.
Veröffentlicht: (2024)

From Spikes to Speech: NeuroVoc -- A Biologically Plausible Vocoder Framework for Auditory Perception and Cochlear Implant Simulation
von: de Nobel, Jacob, et al.
Veröffentlicht: (2025)

Soft-Weighted CrossEntropy Loss for Continous Alzheimer's Disease Detection
von: Zhang, Xiaohui, et al.
Veröffentlicht: (2024)

Neural2Speech: A Transfer Learning Framework for Neural-Driven Speech Reconstruction
von: Li, Jiawei, et al.
Veröffentlicht: (2023)

Désentrelacement Fréquentiel Doux pour les Codecs Audio Neuronaux
von: Giniès, Benoît, et al.
Veröffentlicht: (2025)

Performance Modeling for Correlation-based Neural Decoding of Auditory Attention to Speech
von: Geirnaert, Simon, et al.
Veröffentlicht: (2025)

Selection and Stability of Functional Connectivity Features for Classification of Brain Disorders
von: Saha, Aniruddha, et al.
Veröffentlicht: (2025)

Attention-Based CNN-BiLSTM for Sleep State Classification of Spatiotemporal Wide-Field Calcium Imaging Data
von: Zhang, Xiaohui, et al.
Veröffentlicht: (2024)

Biomarker Investigation using Multiple Brain Measures from MRI through XAI in Alzheimer's Disease Classification
von: Coluzzi, Davide, et al.
Veröffentlicht: (2023)

Topological Analysis of Mouse Brain Vasculature via 3D Light-sheet Microscopy Images
von: Yao, Jiachen, et al.
Veröffentlicht: (2024)

Normative Modelling in Neuroimaging: A Practical Guide for Researchers
von: Alyas, Nida, et al.
Veröffentlicht: (2025)

Evaluation of Mean Shift, ComBat, and CycleGAN for Harmonizing Brain Connectivity Matrices Across Sites
von: Xu, Hanliang, et al.
Veröffentlicht: (2024)

Algebraic Connectivity Reveals Modulated High-Order Functional Networks in Alzheimer's Disease
von: Dolci, Giorgio, et al.
Veröffentlicht: (2025)

Neuromorphic Dual-channel Encoding of Luminance and Contrast
von: Greene, Ernest
Veröffentlicht: (2024)

Spectral Brain Graph Neural Network for Prediction of Anxiety in Children with Autism Spectrum Disorder
von: Duan, Peiyu, et al.
Veröffentlicht: (2024)

Sulcal Pattern Matching with the Wasserstein Distance
von: Chen, Zijian, et al.
Veröffentlicht: (2023)

Brain alignment of reasoning and action representations from vision-language and action models during naturalistic gameplay
von: Oota, Subba Reddy, et al.
Veröffentlicht: (2026)

neuro2voc: Decoding Vocalizations from Neural Activity
von: Gao, Fei
Veröffentlicht: (2025)

Utilizing Information Theoretic Approach to Study Cochlear Neural Degeneration
von: Cheema, Ahsan J., et al.
Veröffentlicht: (2025)

Translating the future: Image-to-image translation for the prediction of future brain metabolism
von: Doering, Elena, et al.
Veröffentlicht: (2024)

The shape of the brain's connections is predictive of cognitive performance: an explainable machine learning study
von: Lo, Yui, et al.
Veröffentlicht: (2024)

Do self-supervised speech and language models extract similar representations as human brain?
von: Chen, Peili, et al.
Veröffentlicht: (2023)

Interactive Manipulation and Visualization of 3D Brain MRI for Surgical Training
von: Jha, Siddharth, et al.
Veröffentlicht: (2024)

Learning spatial hearing via innate mechanisms
von: Chu, Yang, et al.
Veröffentlicht: (2020)

Brain-tuned Speech Models Better Reflect Speech Processing Stages in the Brain
von: Moussa, Omer, et al.
Veröffentlicht: (2025)

Understanding Auditory Evoked Brain Signal via Physics-informed Embedding Network with Multi-Task Transformer
von: Ma, Wanli, et al.
Veröffentlicht: (2024)