Buchumschlag

M3-JEPA: Multimodal Alignment via Multi-gate MoE based on the Joint-Embedding Predictive Architecture

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Lei, Hongyang, Cheng, Xiaolong, Qin, Qi, Wang, Dan, Fan, Kun, Huang, Huazhen, Gu, Qingqing, Wu, Yetao, Jiang, Zhonglin, Chen, Yong, Ji, Luo
Format:	Preprint
Veröffentlicht:	2024
Schlagworte:	Machine Learning Artificial Intelligence
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

A-JEPA: Joint-Embedding Predictive Architecture Can Listen
von: Fei, Zhengcong, et al.
Veröffentlicht: (2023)

DSeq-JEPA: Discriminative Sequential Joint-Embedding Predictive Architecture
von: He, Xiangteng, et al.
Veröffentlicht: (2025)

JEPA-MSAC: A Joint-Embedding Predictive Architecture for Multimodal Sensing-Assisted Communications
von: Zheng, Can, et al.
Veröffentlicht: (2026)

VL-JEPA: Joint Embedding Predictive Architecture for Vision-language
von: Chen, Delong, et al.
Veröffentlicht: (2025)

JEPA-DNA: Grounding Genomic Foundation Models through Joint-Embedding Predictive Architectures
von: Larey, Ariel, et al.
Veröffentlicht: (2026)

T-JEPA: A Joint-Embedding Predictive Architecture for Trajectory Similarity Computation
von: Li, Lihuan, et al.
Veröffentlicht: (2024)

JEPA for RL: Investigating Joint-Embedding Predictive Architectures for Reinforcement Learning
von: Kenneweg, Tristan, et al.
Veröffentlicht: (2025)

US-JEPA: A Joint Embedding Predictive Architecture for Medical Ultrasound
von: Radhachandran, Ashwath, et al.
Veröffentlicht: (2026)

Audio-JEPA: Joint-Embedding Predictive Architecture for Audio Representation Learning
von: Tuncay, Ludovic, et al.
Veröffentlicht: (2025)

SparseJEPA: Sparse Representation Learning of Joint Embedding Predictive Architectures
von: Hartman, Max, et al.
Veröffentlicht: (2025)

JEPA-T: Joint-Embedding Predictive Architecture with Text Fusion for Image Generation
von: Wan, Siheng, et al.
Veröffentlicht: (2025)

DMT-JEPA: Discriminative Masked Targets for Joint-Embedding Predictive Architecture
von: Mo, Shentong, et al.
Veröffentlicht: (2024)

LLM-JEPA: Large Language Models Meet Joint Embedding Predictive Architectures
von: Huang, Hai, et al.
Veröffentlicht: (2025)

UR-JEPA: Uniform Rectifiability as a Regularizer for Joint-Embedding Predictive Architectures
von: Le, Triet M.
Veröffentlicht: (2026)

LaMsS: When Large Language Models Meet Self-Skepticism
von: Wu, Yetao, et al.
Veröffentlicht: (2024)

A Practice of Post-Training on Llama-3 70B with Optimal Selection of Additional Language Mixture Ratio
von: Xi, Ningyuan, et al.
Veröffentlicht: (2024)

MTS-JEPA: Multi-Resolution Joint-Embedding Predictive Architecture for Time-Series Anomaly Prediction
von: He, Yanan, et al.
Veröffentlicht: (2026)

Demo-JEPA: Joint-Embedding Predictive Architecture for One-shot Cross-Embodiment Imitation
von: He, Jingyang, et al.
Veröffentlicht: (2026)

BiJEPA: Bi-directional Joint Embedding Predictive Architecture for Symmetric Representation Learning
von: Huang, Yongchao
Veröffentlicht: (2026)

ACT-JEPA: Novel Joint-Embedding Predictive Architecture for Efficient Policy Representation Learning
von: Vujinovic, Aleksandar, et al.
Veröffentlicht: (2025)

Stem-JEPA: A Joint-Embedding Predictive Architecture for Musical Stem Compatibility Estimation
von: Riou, Alain, et al.
Veröffentlicht: (2024)

Rectified LpJEPA: Joint-Embedding Predictive Architectures with Sparse and Maximum-Entropy Representations
von: Kuang, Yilun, et al.
Veröffentlicht: (2026)

Point-JEPA: A Joint Embedding Predictive Architecture for Self-Supervised Learning on Point Cloud
von: Saito, Ayumu, et al.
Veröffentlicht: (2024)

RadJEPA: Radiology Encoder for Chest X-Rays via Joint Embedding Predictive Architecture
von: Khan, Anas Anwarul Haq, et al.
Veröffentlicht: (2026)

CNN-JEPA: Self-Supervised Pretraining Convolutional Neural Networks Using Joint Embedding Predictive Architecture
von: Kalapos, András, et al.
Veröffentlicht: (2024)

Var-JEPA: A Variational Formulation of the Joint-Embedding Predictive Architecture -- Bridging Predictive and Generative Self-Supervised Learning
von: Gögl, Moritz, et al.
Veröffentlicht: (2026)

GOT-JEPA: Generic Object Tracking with Model Adaptation and Occlusion Handling using Joint-Embedding Predictive Architecture
von: Chen, Shih-Fang, et al.
Veröffentlicht: (2026)

JEPA4Rec: Learning Effective Language Representations for Sequential Recommendation via Joint Embedding Predictive Architecture
von: Nguyen, Minh-Anh, et al.
Veröffentlicht: (2025)

HQ-JEPA: Hybrid Quantum Joint-Embedding Predictive Architecture for Cross-Modal Remote Sensing Representation Learning
von: Hossain, Md Aminur, et al.
Veröffentlicht: (2026)

3D-JEPA: A Joint Embedding Predictive Architecture for 3D Self-Supervised Representation Learning
von: Hu, Naiwen, et al.
Veröffentlicht: (2024)

MeTHanol: Modularized Thinking Language Models with Intermediate Layer Thinking, Decoding and Bootstrapping Reasoning
von: Xi, Ningyuan, et al.
Veröffentlicht: (2024)

TI-JEPA: An Innovative Energy-based Joint Embedding Strategy for Text-Image Multimodal Systems
von: Vo, Khang H. N., et al.
Veröffentlicht: (2025)

SPHERE-JEPA: Spherical Prediction with Homogeneous Embeddings
von: Nicollier, Léo, et al.
Veröffentlicht: (2026)

CrossJEPA: Cross-Modal Joint-Embedding Predictive Architecture for Efficient 3D Representation Learning from 2D Images
von: Perera, Avishka, et al.
Veröffentlicht: (2025)

CR-JEPA: Cross-Modal Joint-Embedding Predictive Learning for Remote Sensing Image Retrieval
von: Hossain, Md Aminur, et al.
Veröffentlicht: (2026)

Label-Efficient Grasp Joint Prediction with Point-JEPA
von: Guzelkabaagac, Jed, et al.
Veröffentlicht: (2025)

Joint Optimal Transport and Embedding for Network Alignment
von: Yu, Qi, et al.
Veröffentlicht: (2025)

Chain-of-Conceptual-Thought Elicits Daily Conversation in Large Language Models
von: Gu, Qingqing, et al.
Veröffentlicht: (2025)

Efficient Rationale-based Retrieval: On-policy Distillation from Generative Rerankers based on JEPA
von: Chen, Teng, et al.
Veröffentlicht: (2026)

JEPA-VLA: Video Predictive Embedding is Needed for VLA Models
von: Miao, Shangchen, et al.
Veröffentlicht: (2026)