SpeechLLM: Unified Speech and Language Model for Enhanced Multi-Task Understanding in Low Resource Settings
Fuente:
arXiv
Salvato in:
| Autori principali: | Yoo, Jaekwon, Chandiramani, Kunal, Tadimeti, Divya, Girma, Abenezer, Dhir, Chandra |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Streaming Speech-to-Text Translation with a SpeechLLM
di: Parcollet, Titouan, et al.
Pubblicazione: (2026)
di: Parcollet, Titouan, et al.
Pubblicazione: (2026)
Conversational Speech Reveals Structural Robustness Failures in SpeechLLM Backbones
di: Teleki, Maria, et al.
Pubblicazione: (2025)
di: Teleki, Maria, et al.
Pubblicazione: (2025)
Measuring the Redundancy of Decoder Layers in SpeechLLMs
di: Moumen, Adel, et al.
Pubblicazione: (2026)
di: Moumen, Adel, et al.
Pubblicazione: (2026)
Better Pseudo-labeling with Multi-ASR Fusion and Error Correction by SpeechLLM
di: Prakash, Jeena, et al.
Pubblicazione: (2025)
di: Prakash, Jeena, et al.
Pubblicazione: (2025)
Task-Lens: Cross-Task Utility Based Speech Dataset Profiling for Low-Resource Indian Languages
di: Sharma, Swati, et al.
Pubblicazione: (2026)
di: Sharma, Swati, et al.
Pubblicazione: (2026)
Contrastive Learning for Task-Independent SpeechLLM-Pretraining
di: Züfle, Maike, et al.
Pubblicazione: (2024)
di: Züfle, Maike, et al.
Pubblicazione: (2024)
Slot Filling as a Reasoning Task for SpeechLLMs
di: Hacioglu, Kadri, et al.
Pubblicazione: (2025)
di: Hacioglu, Kadri, et al.
Pubblicazione: (2025)
Rubric-Guided Fine-tuning of SpeechLLMs for Multi-Aspect, Multi-Rater L2 Reading-Speech Assessment
di: Parikh, Aditya Kamlesh, et al.
Pubblicazione: (2026)
di: Parikh, Aditya Kamlesh, et al.
Pubblicazione: (2026)
Detecting Hallucinations in SpeechLLMs at Inference Time Using Attention Maps
di: Waldendorf, Jonas, et al.
Pubblicazione: (2026)
di: Waldendorf, Jonas, et al.
Pubblicazione: (2026)
Speech Discrete Tokens or Continuous Features? A Comparative Analysis for Spoken Language Understanding in SpeechLLMs
di: Wang, Dingdong, et al.
Pubblicazione: (2025)
di: Wang, Dingdong, et al.
Pubblicazione: (2025)
LoASR-Bench: Evaluating Large Speech Language Models on Low-Resource Automatic Speech Recognition Across Language Families
di: Chen, Jianan, et al.
Pubblicazione: (2026)
di: Chen, Jianan, et al.
Pubblicazione: (2026)
WildSpeech-Bench: Benchmarking End-to-End SpeechLLMs in the Wild
di: Zhang, Linhao, et al.
Pubblicazione: (2025)
di: Zhang, Linhao, et al.
Pubblicazione: (2025)
DOA: Training-Free Decoder-Only Attention Policy for Long-Form Simultaneous Translation with SpeechLLMs
di: Papi, Sara, et al.
Pubblicazione: (2026)
di: Papi, Sara, et al.
Pubblicazione: (2026)
SpeechPrompt: Prompting Speech Language Models for Speech Processing Tasks
di: Chang, Kai-Wei, et al.
Pubblicazione: (2024)
di: Chang, Kai-Wei, et al.
Pubblicazione: (2024)
SpeechComposer: Unifying Multiple Speech Tasks with Prompt Composition
di: Wu, Yihan, et al.
Pubblicazione: (2024)
di: Wu, Yihan, et al.
Pubblicazione: (2024)
Speech-Worthy Alignment for Japanese SpeechLLMs via Direct Preference Optimization
di: Zhao, Mengjie, et al.
Pubblicazione: (2026)
di: Zhao, Mengjie, et al.
Pubblicazione: (2026)
Short-form Text Rewriting with Phi Silica
di: Tadimeti, Divya, et al.
Pubblicazione: (2026)
di: Tadimeti, Divya, et al.
Pubblicazione: (2026)
Leveraging the Potential of Prompt Engineering for Hate Speech Detection in Low-Resource Languages
di: Prome, Ruhina Tabasshum, et al.
Pubblicazione: (2025)
di: Prome, Ruhina Tabasshum, et al.
Pubblicazione: (2025)
Do Bias Benchmarks Generalise? Evidence from Voice-based Evaluation of Gender Bias in SpeechLLMs
di: Satish, Shree Harsha Bokkahalli, et al.
Pubblicazione: (2025)
di: Satish, Shree Harsha Bokkahalli, et al.
Pubblicazione: (2025)
Aligning Paralinguistic Understanding and Generation in Speech LLMs via Multi-Task Reinforcement Learning
di: Chen, Jingxiang, et al.
Pubblicazione: (2026)
di: Chen, Jingxiang, et al.
Pubblicazione: (2026)
Exploring In-Context Learning of Textless Speech Language Model for Speech Classification Tasks
di: Hsu, Ming-Hao, et al.
Pubblicazione: (2023)
di: Hsu, Ming-Hao, et al.
Pubblicazione: (2023)
StableToken: A Noise-Robust Semantic Speech Tokenizer for Resilient SpeechLLMs
di: Song, Yuhan, et al.
Pubblicazione: (2025)
di: Song, Yuhan, et al.
Pubblicazione: (2025)
Understanding the Modality Gap: An Empirical Study on the Speech-Text Alignment Mechanism of Large Speech Language Models
di: Xiang, Bajian, et al.
Pubblicazione: (2025)
di: Xiang, Bajian, et al.
Pubblicazione: (2025)
A Unified Speech LLM for Diarization and Speech Recognition in Multilingual Conversations
di: Saengthong, Phurich, et al.
Pubblicazione: (2025)
di: Saengthong, Phurich, et al.
Pubblicazione: (2025)
Preservation of Language Understanding Capabilities in Speech-aware Large Language Models
di: Kubis, Marek, et al.
Pubblicazione: (2025)
di: Kubis, Marek, et al.
Pubblicazione: (2025)
Task Arithmetic for Language Expansion in Speech Translation
di: Cheng, Yao-Fei, et al.
Pubblicazione: (2024)
di: Cheng, Yao-Fei, et al.
Pubblicazione: (2024)
Advancing Speech Understanding in Speech-Aware Language Models with GRPO
di: Elmakies, Avishai, et al.
Pubblicazione: (2025)
di: Elmakies, Avishai, et al.
Pubblicazione: (2025)
Northeastern Uni at Multilingual Counterspeech Generation: Enhancing Counter Speech Generation with LLM Alignment through Direct Preference Optimization
di: Wadhwa, Sahil, et al.
Pubblicazione: (2024)
di: Wadhwa, Sahil, et al.
Pubblicazione: (2024)
Enhancing Speech Instruction Understanding and Disambiguation in Robotics via Speech Prosody
di: Sasu, David, et al.
Pubblicazione: (2025)
di: Sasu, David, et al.
Pubblicazione: (2025)
SEAHateCheck: Functional Tests for Detecting Hate Speech in Low-Resource Languages of Southeast Asia
di: Ng, Ri Chi, et al.
Pubblicazione: (2026)
di: Ng, Ri Chi, et al.
Pubblicazione: (2026)
Can Linguistically Related Languages Guide LLM Translation in Low-Resource Settings?
di: Ramasethu, Aishwarya, et al.
Pubblicazione: (2026)
di: Ramasethu, Aishwarya, et al.
Pubblicazione: (2026)
Ming-UniAudio: Speech LLM for Joint Understanding, Generation and Editing with Unified Representation
di: Yan, Canxiang, et al.
Pubblicazione: (2025)
di: Yan, Canxiang, et al.
Pubblicazione: (2025)
Improving Semantic Understanding in Speech Language Models via Brain-tuning
di: Moussa, Omer, et al.
Pubblicazione: (2024)
di: Moussa, Omer, et al.
Pubblicazione: (2024)
GHaLIB: A Multilingual Framework for Hope Speech Detection in Low-Resource Languages
di: Abdullah, Ahmed, et al.
Pubblicazione: (2025)
di: Abdullah, Ahmed, et al.
Pubblicazione: (2025)
Locate-and-Focus: Enhancing Terminology Translation in Speech Language Models
di: Wu, Suhang, et al.
Pubblicazione: (2025)
di: Wu, Suhang, et al.
Pubblicazione: (2025)
The Voice Behind the Words: Quantifying Intersectional Bias in SpeechLLMs
di: Satish, Shree Harsha Bokkahalli, et al.
Pubblicazione: (2026)
di: Satish, Shree Harsha Bokkahalli, et al.
Pubblicazione: (2026)
STTATTS: Unified Speech-To-Text And Text-To-Speech Model
di: Toyin, Hawau Olamide, et al.
Pubblicazione: (2024)
di: Toyin, Hawau Olamide, et al.
Pubblicazione: (2024)
Speech LLMs in Low-Resource Scenarios: Data Volume Requirements and the Impact of Pretraining on High-Resource Languages
di: Fong, Seraphina, et al.
Pubblicazione: (2025)
di: Fong, Seraphina, et al.
Pubblicazione: (2025)
SpeechLLMs for Large-scale Contextualized Zero-shot Slot Filling
di: Hacioglu, Kadri, et al.
Pubblicazione: (2025)
di: Hacioglu, Kadri, et al.
Pubblicazione: (2025)
Speech-to-Speech Translation Pipelines for Conversations in Low-Resource Languages
di: Popescu-Belis, Andrei, et al.
Pubblicazione: (2025)
di: Popescu-Belis, Andrei, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Streaming Speech-to-Text Translation with a SpeechLLM
di: Parcollet, Titouan, et al.
Pubblicazione: (2026) -
Conversational Speech Reveals Structural Robustness Failures in SpeechLLM Backbones
di: Teleki, Maria, et al.
Pubblicazione: (2025) -
Measuring the Redundancy of Decoder Layers in SpeechLLMs
di: Moumen, Adel, et al.
Pubblicazione: (2026) -
Better Pseudo-labeling with Multi-ASR Fusion and Error Correction by SpeechLLM
di: Prakash, Jeena, et al.
Pubblicazione: (2025) -
Task-Lens: Cross-Task Utility Based Speech Dataset Profiling for Low-Resource Indian Languages
di: Sharma, Swati, et al.
Pubblicazione: (2026)