BrainWavLM: Fine-tuning Speech Representations with Brain Responses to Language
Fuente:
arXiv
Salvato in:
| Autori principali: | Vattikonda, Nishitha, Vaidya, Aditya R., Antonello, Richard J., Huth, Alexander G. |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Fine-tuning language encoding models on slow fMRI improves prediction for fast ECoG
di: Vaidya, Aditya R., et al.
Pubblicazione: (2026)
di: Vaidya, Aditya R., et al.
Pubblicazione: (2026)
Abstraction Induces the Brain Alignment of Language and Speech Models
di: Cheng, Emily, et al.
Pubblicazione: (2026)
di: Cheng, Emily, et al.
Pubblicazione: (2026)
Low-Dimensional Structure in the Space of Language Representations is Reflected in Brain Responses
di: Antonello, Richard, et al.
Pubblicazione: (2021)
di: Antonello, Richard, et al.
Pubblicazione: (2021)
Scaling laws for language encoding models in fMRI
di: Antonello, Richard, et al.
Pubblicazione: (2023)
di: Antonello, Richard, et al.
Pubblicazione: (2023)
How Many Bytes Can You Take Out Of Brain-To-Text Decoding?
di: Antonello, Richard, et al.
Pubblicazione: (2024)
di: Antonello, Richard, et al.
Pubblicazione: (2024)
WavSLM: Single-Stream Speech Language Modeling via WavLM Distillation
di: Della Libera, Luca, et al.
Pubblicazione: (2026)
di: Della Libera, Luca, et al.
Pubblicazione: (2026)
Demographic Attributes Prediction from Speech Using WavLM Embeddings
di: Yang, Yuchen, et al.
Pubblicazione: (2025)
di: Yang, Yuchen, et al.
Pubblicazione: (2025)
Brain-tuning Improves Generalizability and Efficiency of Brain Alignment in Speech Models
di: Moussa, Omer, et al.
Pubblicazione: (2025)
di: Moussa, Omer, et al.
Pubblicazione: (2025)
Improving Semantic Understanding in Speech Language Models via Brain-tuning
di: Moussa, Omer, et al.
Pubblicazione: (2024)
di: Moussa, Omer, et al.
Pubblicazione: (2024)
Brain-tuned Speech Models Better Reflect Speech Processing Stages in the Brain
di: Moussa, Omer, et al.
Pubblicazione: (2025)
di: Moussa, Omer, et al.
Pubblicazione: (2025)
JudgeLM: Fine-tuned Large Language Models are Scalable Judges
di: Zhu, Lianghui, et al.
Pubblicazione: (2023)
di: Zhu, Lianghui, et al.
Pubblicazione: (2023)
UniWav: Towards Unified Pre-training for Speech Representation Learning and Generation
di: Liu, Alexander H., et al.
Pubblicazione: (2025)
di: Liu, Alexander H., et al.
Pubblicazione: (2025)
Normalization through Fine-tuning: Understanding Wav2vec 2.0 Embeddings for Phonetic Analysis
di: Wang, Yiming, et al.
Pubblicazione: (2025)
di: Wang, Yiming, et al.
Pubblicazione: (2025)
The Echoes of Multilinguality: Tracing Cultural Value Shifts during LM Fine-tuning
di: Choenni, Rochelle, et al.
Pubblicazione: (2024)
di: Choenni, Rochelle, et al.
Pubblicazione: (2024)
Wav2Gloss: Generating Interlinear Glossed Text from Speech
di: He, Taiqi, et al.
Pubblicazione: (2024)
di: He, Taiqi, et al.
Pubblicazione: (2024)
Instruction-tuning Aligns LLMs to the Human Brain
di: Aw, Khai Loong, et al.
Pubblicazione: (2023)
di: Aw, Khai Loong, et al.
Pubblicazione: (2023)
Investigating the Representation of Backchannels and Fillers in Fine-tuned Language Models
di: Wang, Yu, et al.
Pubblicazione: (2025)
di: Wang, Yu, et al.
Pubblicazione: (2025)
Position-invariant Fine-tuning of Speech Enhancement Models with Self-supervised Speech Representations
di: Meghanani, Amit, et al.
Pubblicazione: (2026)
di: Meghanani, Amit, et al.
Pubblicazione: (2026)
Far from the Shallow: Brain-Predictive Reasoning Embedding through Residual Disentanglement
di: He, Linyang, et al.
Pubblicazione: (2025)
di: He, Linyang, et al.
Pubblicazione: (2025)
Speaker Diarization for Low-Resource Languages Through Wav2vec Fine-Tuning
di: Abdullah, Abdulhady Abas, et al.
Pubblicazione: (2025)
di: Abdullah, Abdulhady Abas, et al.
Pubblicazione: (2025)
BAMBINO-LM: (Bilingual-)Human-Inspired Continual Pretraining of BabyLM
di: Shen, Zhewen, et al.
Pubblicazione: (2024)
di: Shen, Zhewen, et al.
Pubblicazione: (2024)
WavLLM: Towards Robust and Adaptive Speech Large Language Model
di: Hu, Shujie, et al.
Pubblicazione: (2024)
di: Hu, Shujie, et al.
Pubblicazione: (2024)
KALE-LM-Chem: Vision and Practice Toward an AI Brain for Chemistry
di: Dai, Weichen, et al.
Pubblicazione: (2024)
di: Dai, Weichen, et al.
Pubblicazione: (2024)
Bangla Hate Speech Classification with Fine-tuned Transformer Models
di: Jafari, Yalda Keivan, et al.
Pubblicazione: (2025)
di: Jafari, Yalda Keivan, et al.
Pubblicazione: (2025)
WavCube: Unifying Speech Representation for Understanding and Generation via Semantic-Acoustic Joint Modeling
di: Yang, Guanrou, et al.
Pubblicazione: (2026)
di: Yang, Guanrou, et al.
Pubblicazione: (2026)
Compositional Subspace Representation Fine-tuning for Adaptive Large Language Models
di: Zhou, Andy
Pubblicazione: (2025)
di: Zhou, Andy
Pubblicazione: (2025)
LoFiT: Localized Fine-tuning on LLM Representations
di: Yin, Fangcong, et al.
Pubblicazione: (2024)
di: Yin, Fangcong, et al.
Pubblicazione: (2024)
BrainLLM: Generative Language Decoding from Brain Recordings
di: Ye, Ziyi, et al.
Pubblicazione: (2023)
di: Ye, Ziyi, et al.
Pubblicazione: (2023)
Generative causal testing to bridge data-driven models and scientific theories in language neuroscience
di: Antonello, Richard, et al.
Pubblicazione: (2024)
di: Antonello, Richard, et al.
Pubblicazione: (2024)
Multistage Fine-tuning Strategies for Automatic Speech Recognition in Low-resource Languages
di: Pillai, Leena G, et al.
Pubblicazione: (2024)
di: Pillai, Leena G, et al.
Pubblicazione: (2024)
Rubric-Guided Fine-tuning of SpeechLLMs for Multi-Aspect, Multi-Rater L2 Reading-Speech Assessment
di: Parikh, Aditya Kamlesh, et al.
Pubblicazione: (2026)
di: Parikh, Aditya Kamlesh, et al.
Pubblicazione: (2026)
Evidence from fMRI Supports a Two-Phase Abstraction Process in Language Models
di: Cheng, Emily, et al.
Pubblicazione: (2024)
di: Cheng, Emily, et al.
Pubblicazione: (2024)
ESPnet-SpeechLM: An Open Speech Language Model Toolkit
di: Tian, Jinchuan, et al.
Pubblicazione: (2025)
di: Tian, Jinchuan, et al.
Pubblicazione: (2025)
Explanations of Large Language Models Explain Language Representations in the Brain
di: Rahimi, Maryam, et al.
Pubblicazione: (2025)
di: Rahimi, Maryam, et al.
Pubblicazione: (2025)
Crafting Interpretable Embeddings by Asking LLMs Questions
di: Benara, Vinamra, et al.
Pubblicazione: (2024)
di: Benara, Vinamra, et al.
Pubblicazione: (2024)
PARA: Parameter-Efficient Fine-tuning with Prompt Aware Representation Adjustment
di: Liu, Zequan, et al.
Pubblicazione: (2025)
di: Liu, Zequan, et al.
Pubblicazione: (2025)
Navigating Brain Language Representations: A Comparative Analysis of Neural Language Models and Psychologically Plausible Models
di: Zhang, Yunhao, et al.
Pubblicazione: (2024)
di: Zhang, Yunhao, et al.
Pubblicazione: (2024)
LegiLM: A Fine-Tuned Legal Language Model for Data Compliance
di: Zhu, Linkai, et al.
Pubblicazione: (2024)
di: Zhu, Linkai, et al.
Pubblicazione: (2024)
Detecting Bias in Large Language Models: Fine-tuned KcBERT
di: Lee, J. K., et al.
Pubblicazione: (2024)
di: Lee, J. K., et al.
Pubblicazione: (2024)
SageLM: A Multi-aspect and Explainable Large Language Model for Speech Judgement
di: Ge, Yuan, et al.
Pubblicazione: (2025)
di: Ge, Yuan, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Fine-tuning language encoding models on slow fMRI improves prediction for fast ECoG
di: Vaidya, Aditya R., et al.
Pubblicazione: (2026) -
Abstraction Induces the Brain Alignment of Language and Speech Models
di: Cheng, Emily, et al.
Pubblicazione: (2026) -
Low-Dimensional Structure in the Space of Language Representations is Reflected in Brain Responses
di: Antonello, Richard, et al.
Pubblicazione: (2021) -
Scaling laws for language encoding models in fMRI
di: Antonello, Richard, et al.
Pubblicazione: (2023) -
How Many Bytes Can You Take Out Of Brain-To-Text Decoding?
di: Antonello, Richard, et al.
Pubblicazione: (2024)