MoE Jetpack: From Dense Checkpoints to Adaptive Mixture of Experts for Vision Tasks
Fuente:
arXiv
Salvato in:
| Autori principali: | Zhu, Xingkui, Guan, Yiran, Liang, Dingkang, Chen, Yuchao, Liu, Yuliang, Bai, Xiang |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
A Mixture of Experts (MoE) model to improve AI-based computational pathology prediction performance under variable levels of histopathology image blur
di: Xiang, Yujie, et al.
Pubblicazione: (2024)
di: Xiang, Yujie, et al.
Pubblicazione: (2024)
MoDE: Mixture of Diffusion Experts for Any Occluded Face Recognition
di: Fan, Qiannan, et al.
Pubblicazione: (2025)
di: Fan, Qiannan, et al.
Pubblicazione: (2025)
Fair-MoE: Fairness-Oriented Mixture of Experts in Vision-Language Models
di: Wang, Peiran, et al.
Pubblicazione: (2025)
di: Wang, Peiran, et al.
Pubblicazione: (2025)
MoE-LLaVA: Mixture of Experts for Large Vision-Language Models
di: Lin, Bin, et al.
Pubblicazione: (2024)
di: Lin, Bin, et al.
Pubblicazione: (2024)
Beyond Routing: Characterising Expert Tuning and Representation in Vision Mixture-of-Experts
di: Tangtartharakul, Gene, et al.
Pubblicazione: (2026)
di: Tangtartharakul, Gene, et al.
Pubblicazione: (2026)
TAG-MoE: Task-Aware Gating for Unified Generative Mixture-of-Experts
di: Xu, Yu, et al.
Pubblicazione: (2026)
di: Xu, Yu, et al.
Pubblicazione: (2026)
HMVLM: Human Motion-Vision-Lanuage Model via MoE LoRA
di: Hu, Lei, et al.
Pubblicazione: (2025)
di: Hu, Lei, et al.
Pubblicazione: (2025)
CBDES MoE: Hierarchically Decoupled Mixture-of-Experts for Functional Modules in Autonomous Driving
di: Xiang, Qi, et al.
Pubblicazione: (2025)
di: Xiang, Qi, et al.
Pubblicazione: (2025)
MoE-GS: Mixture of Experts for Dynamic Gaussian Splatting
di: Jin, In-Hwan, et al.
Pubblicazione: (2025)
di: Jin, In-Hwan, et al.
Pubblicazione: (2025)
Dynamic Adapter Meets Prompt Tuning: Parameter-Efficient Transfer Learning for Point Cloud Analysis
di: Zhou, Xin, et al.
Pubblicazione: (2024)
di: Zhou, Xin, et al.
Pubblicazione: (2024)
InterMoE: Individual-Specific 3D Human Interaction Generation via Dynamic Temporal-Selective MoE
di: Wang, Lipeng, et al.
Pubblicazione: (2025)
di: Wang, Lipeng, et al.
Pubblicazione: (2025)
MoE-GRPO: Optimizing Mixture-of-Experts via Reinforcement Learning in Vision-Language Models
di: Ko, Dohwan, et al.
Pubblicazione: (2026)
di: Ko, Dohwan, et al.
Pubblicazione: (2026)
Video Streaming Thinking: VideoLLMs Can Watch and Think Simultaneously
di: Guan, Yiran, et al.
Pubblicazione: (2026)
di: Guan, Yiran, et al.
Pubblicazione: (2026)
Med-MoE: Mixture of Domain-Specific Experts for Lightweight Medical Vision-Language Models
di: Jiang, Songtao, et al.
Pubblicazione: (2024)
di: Jiang, Songtao, et al.
Pubblicazione: (2024)
CLIP-MoE: Towards Building Mixture of Experts for CLIP with Diversified Multiplet Upcycling
di: Zhang, Jihai, et al.
Pubblicazione: (2024)
di: Zhang, Jihai, et al.
Pubblicazione: (2024)
Semi-MoE: Mixture-of-Experts meets Semi-Supervised Histopathology Segmentation
di: Vu, Nguyen Lan Vi, et al.
Pubblicazione: (2025)
di: Vu, Nguyen Lan Vi, et al.
Pubblicazione: (2025)
GM-MoE: Low-Light Enhancement with Gated-Mechanism Mixture-of-Experts
di: Liao, Minwen, et al.
Pubblicazione: (2025)
di: Liao, Minwen, et al.
Pubblicazione: (2025)
MoE3D: Mixture of Experts meets Multi-Modal 3D Understanding
di: Li, Yu, et al.
Pubblicazione: (2025)
di: Li, Yu, et al.
Pubblicazione: (2025)
PointMamba: A Simple State Space Model for Point Cloud Analysis
di: Liang, Dingkang, et al.
Pubblicazione: (2024)
di: Liang, Dingkang, et al.
Pubblicazione: (2024)
ThinkOmni: Lifting Textual Reasoning to Omni-modal Scenarios via Guidance Decoding
di: Guan, Yiran, et al.
Pubblicazione: (2026)
di: Guan, Yiran, et al.
Pubblicazione: (2026)
A Unified Image-Dense Annotation Generation Model for Underwater Scenes
di: Lin, Hongkai, et al.
Pubblicazione: (2025)
di: Lin, Hongkai, et al.
Pubblicazione: (2025)
ExpressNet-MoE: A Hybrid Deep Neural Network for Emotion Recognition
di: Banerjee, Deeptimaan, et al.
Pubblicazione: (2025)
di: Banerjee, Deeptimaan, et al.
Pubblicazione: (2025)
Steer-MoE: Efficient Audio-Language Alignment with a Mixture-of-Experts Steering Module
di: Feng, Ruitao, et al.
Pubblicazione: (2025)
di: Feng, Ruitao, et al.
Pubblicazione: (2025)
MoE-FFD: Mixture of Experts for Generalized and Parameter-Efficient Face Forgery Detection
di: Kong, Chenqi, et al.
Pubblicazione: (2024)
di: Kong, Chenqi, et al.
Pubblicazione: (2024)
MoE3D: A Mixture-of-Experts Module for 3D Reconstruction
di: Wang, Zichen, et al.
Pubblicazione: (2026)
di: Wang, Zichen, et al.
Pubblicazione: (2026)
R^2MoE: Redundancy-Removal Mixture of Experts for Lifelong Concept Learning
di: Guo, Xiaohan, et al.
Pubblicazione: (2025)
di: Guo, Xiaohan, et al.
Pubblicazione: (2025)
Adapted-MoE: Mixture of Experts with Test-Time Adaption for Anomaly Detection
di: Lei, Tianwu, et al.
Pubblicazione: (2024)
di: Lei, Tianwu, et al.
Pubblicazione: (2024)
CL-MoE: Enhancing Multimodal Large Language Model with Dual Momentum Mixture-of-Experts for Continual Visual Question Answering
di: Huai, Tianyu, et al.
Pubblicazione: (2025)
di: Huai, Tianyu, et al.
Pubblicazione: (2025)
Dense2MoE: Restructuring Diffusion Transformer to MoE for Efficient Text-to-Image Generation
di: Zheng, Youwei, et al.
Pubblicazione: (2025)
di: Zheng, Youwei, et al.
Pubblicazione: (2025)
Conscious Gaze: Adaptive Attention Mechanisms for Hallucination Mitigation in Vision-Language Models
di: Bu, Weijue, et al.
Pubblicazione: (2025)
di: Bu, Weijue, et al.
Pubblicazione: (2025)
Uni-MoE: Scaling Unified Multimodal LLMs with Mixture of Experts
di: Li, Yunxin, et al.
Pubblicazione: (2024)
di: Li, Yunxin, et al.
Pubblicazione: (2024)
Mixture of Experts Approaches in Dense Retrieval Tasks
di: Sokli, Effrosyni, et al.
Pubblicazione: (2025)
di: Sokli, Effrosyni, et al.
Pubblicazione: (2025)
Mini-Monkey: Alleviating the Semantic Sawtooth Effect for Lightweight MLLMs via Complementary Image Pyramid
di: Huang, Mingxin, et al.
Pubblicazione: (2024)
di: Huang, Mingxin, et al.
Pubblicazione: (2024)
CP-MoE: Consistency-Preserving Mixture-of-Experts for Continual Learning
di: Liu, Yang, et al.
Pubblicazione: (2026)
di: Liu, Yang, et al.
Pubblicazione: (2026)
I2MoE: Interpretable Multimodal Interaction-aware Mixture-of-Experts
di: Xin, Jiayi, et al.
Pubblicazione: (2025)
di: Xin, Jiayi, et al.
Pubblicazione: (2025)
SocialNav-MoE: A Mixture-of-Experts Vision Language Model for Socially Compliant Navigation with Reinforcement Fine-Tuning
di: Kawabata, Tomohito, et al.
Pubblicazione: (2025)
di: Kawabata, Tomohito, et al.
Pubblicazione: (2025)
BioFact-MoE: Biologically Factorized Mixture of Experts for Vision-Language Prognostic Modeling in Hepatocellular Carcinoma
di: Yang, Junlin, et al.
Pubblicazione: (2026)
di: Yang, Junlin, et al.
Pubblicazione: (2026)
WM-MoE: Weather-aware Multi-scale Mixture-of-Experts for Blind Adverse Weather Removal
di: Luo, Yulin, et al.
Pubblicazione: (2023)
di: Luo, Yulin, et al.
Pubblicazione: (2023)
StreamSense: Streaming Social Task Detection with Selective Vision-Language Model Routing
di: Wang, Han, et al.
Pubblicazione: (2026)
di: Wang, Han, et al.
Pubblicazione: (2026)
RS-MoE: A Vision-Language Model with Mixture of Experts for Remote Sensing Image Captioning and Visual Question Answering
di: Lin, Hui, et al.
Pubblicazione: (2024)
di: Lin, Hui, et al.
Pubblicazione: (2024)
Documenti analoghi
-
A Mixture of Experts (MoE) model to improve AI-based computational pathology prediction performance under variable levels of histopathology image blur
di: Xiang, Yujie, et al.
Pubblicazione: (2024) -
MoDE: Mixture of Diffusion Experts for Any Occluded Face Recognition
di: Fan, Qiannan, et al.
Pubblicazione: (2025) -
Fair-MoE: Fairness-Oriented Mixture of Experts in Vision-Language Models
di: Wang, Peiran, et al.
Pubblicazione: (2025) -
MoE-LLaVA: Mixture of Experts for Large Vision-Language Models
di: Lin, Bin, et al.
Pubblicazione: (2024) -
Beyond Routing: Characterising Expert Tuning and Representation in Vision Mixture-of-Experts
di: Tangtartharakul, Gene, et al.
Pubblicazione: (2026)