Downstream Task Guided Masking Learning in Masked Autoencoders Using Multi-Level Optimization
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Guo, Han, Hosseini, Ramtin, Zhang, Ruiyi, Somayajula, Sai Ashish, Chowdhury, Ranak Roy, Gupta, Rajesh K., Xie, Pengtao |
|---|---|
| Format: | Preprint |
| Publié: |
2024
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
TapWeight: Reweighting Pretraining Objectives for Task-Adaptive Pretraining
par: Zhang, Ruiyi, et autres
Publié: (2024)
par: Zhang, Ruiyi, et autres
Publié: (2024)
AutoLoRA: Automatically Tuning Matrix Ranks in Low-Rank Adaptation Based on Meta Learning
par: Zhang, Ruiyi, et autres
Publié: (2024)
par: Zhang, Ruiyi, et autres
Publié: (2024)
DreamPRM: Domain-Reweighted Process Reward Model for Multimodal Reasoning
par: Cao, Qi, et autres
Publié: (2025)
par: Cao, Qi, et autres
Publié: (2025)
Improving the Language Understanding Capabilities of Large Language Models Using Reinforcement Learning
par: Hu, Bokai, et autres
Publié: (2024)
par: Hu, Bokai, et autres
Publié: (2024)
Can Prompts Rewind Time for LLMs? Evaluating the Effectiveness of Prompted Knowledge Cutoffs
par: Gao, Xin, et autres
Publié: (2025)
par: Gao, Xin, et autres
Publié: (2025)
Large Language Models for Time Series: A Survey
par: Zhang, Xiyuan, et autres
Publié: (2024)
par: Zhang, Xiyuan, et autres
Publié: (2024)
Generalizable and Stable Finetuning of Pretrained Language Models on Low-Resource Texts
par: Somayajula, Sai Ashish, et autres
Publié: (2024)
par: Somayajula, Sai Ashish, et autres
Publié: (2024)
How Effective is Pre-training of Large Masked Autoencoders for Downstream Earth Observation Tasks?
par: Sosa, Jose, et autres
Publié: (2024)
par: Sosa, Jose, et autres
Publié: (2024)
Token-Specific Watermarking with Enhanced Detectability and Semantic Coherence for Large Language Models
par: Huo, Mingjia, et autres
Publié: (2024)
par: Huo, Mingjia, et autres
Publié: (2024)
Where to Mask: Structure-Guided Masking for Graph Masked Autoencoders
par: Liu, Chuang, et autres
Publié: (2024)
par: Liu, Chuang, et autres
Publié: (2024)
Masked Autoencoders for Ultrasound Signals: Robust Representation Learning for Downstream Applications
par: Roßteutscher, Immanuel, et autres
Publié: (2025)
par: Roßteutscher, Immanuel, et autres
Publié: (2025)
Self-Guided Masked Autoencoder
par: Shin, Jeongwoo, et autres
Publié: (2025)
par: Shin, Jeongwoo, et autres
Publié: (2025)
BiDoRA: Bi-level Optimization-Based Weight-Decomposed Low-Rank Adaptation
par: Qin, Peijia, et autres
Publié: (2024)
par: Qin, Peijia, et autres
Publié: (2024)
Text-Guided Video Masked Autoencoder
par: Fan, David, et autres
Publié: (2024)
par: Fan, David, et autres
Publié: (2024)
BiLoRA: A Bi-level Optimization Framework for Overfitting-Resilient Low-Rank Adaptation of Large Pre-trained Models
par: Qiang, Rushi, et autres
Publié: (2024)
par: Qiang, Rushi, et autres
Publié: (2024)
Mask-Guided Multi-Task Network for Face Attribute Recognition
par: Gao, Gong, et autres
Publié: (2026)
par: Gao, Gong, et autres
Publié: (2026)
UniMTS: Unified Pre-training for Motion Time Series
par: Zhang, Xiyuan, et autres
Publié: (2024)
par: Zhang, Xiyuan, et autres
Publié: (2024)
Task-Informed Anti-Curriculum by Masking Improves Downstream Performance on Text
par: Jarca, Andrei, et autres
Publié: (2025)
par: Jarca, Andrei, et autres
Publié: (2025)
Self-Guided Masked Autoencoders for Domain-Agnostic Self-Supervised Learning
par: Xie, Johnathan, et autres
Publié: (2024)
par: Xie, Johnathan, et autres
Publié: (2024)
Improving Masked Autoencoders by Learning Where to Mask
par: Chen, Haijian, et autres
Publié: (2023)
par: Chen, Haijian, et autres
Publié: (2023)
Masked Autoencoders as Universal Speech Enhancer
par: Rajagopalan, Rajalaxmi, et autres
Publié: (2026)
par: Rajagopalan, Rajalaxmi, et autres
Publié: (2026)
AM-SAM: Automated Prompting and Mask Calibration for Segment Anything Model
par: Li, Yuchen, et autres
Publié: (2024)
par: Li, Yuchen, et autres
Publié: (2024)
Attention-Guided Masked Autoencoders For Learning Image Representations
par: Sick, Leon, et autres
Publié: (2024)
par: Sick, Leon, et autres
Publié: (2024)
Domain-Guided Masked Autoencoders for Unique Player Identification
par: Balaji, Bavesh, et autres
Publié: (2024)
par: Balaji, Bavesh, et autres
Publié: (2024)
Audiovisual Masked Autoencoders
par: Georgescu, Mariana-Iuliana, et autres
Publié: (2022)
par: Georgescu, Mariana-Iuliana, et autres
Publié: (2022)
Gaussian Masked Autoencoders
par: Rajasegaran, Jathushan, et autres
Publié: (2025)
par: Rajasegaran, Jathushan, et autres
Publié: (2025)
Masked Capsule Autoencoders
par: Everett, Miles, et autres
Publié: (2024)
par: Everett, Miles, et autres
Publié: (2024)
A Multi-Task Foundation Model for Wireless Channel Representation Using Contrastive and Masked Autoencoder Learning
par: Guler, Berkay, et autres
Publié: (2025)
par: Guler, Berkay, et autres
Publié: (2025)
SteganoBackdoor: Stealthy and Data-Efficient Backdoor Attacks on Language Models
par: Xue, Eric, et autres
Publié: (2025)
par: Xue, Eric, et autres
Publié: (2025)
Viewpoint Matters: Dynamically Optimizing Viewpoints with Masked Autoencoder for Visual Manipulation
par: Yi, Pengfei, et autres
Publié: (2026)
par: Yi, Pengfei, et autres
Publié: (2026)
Disentangling Masked Autoencoders for Unsupervised Domain Generalization
par: Zhang, An, et autres
Publié: (2024)
par: Zhang, An, et autres
Publié: (2024)
Recurrent Video Masked Autoencoders
par: Zoran, Daniel, et autres
Publié: (2025)
par: Zoran, Daniel, et autres
Publié: (2025)
Masked Autoencoders are PDE Learners
par: Zhou, Anthony, et autres
Publié: (2024)
par: Zhou, Anthony, et autres
Publié: (2024)
Multi-scale Masked Autoencoder for Electrocardiogram Anomaly Detection
par: Zhou, Ya, et autres
Publié: (2025)
par: Zhou, Ya, et autres
Publié: (2025)
Contrastive Masked Autoencoders for Character-Level Open-Set Writer Identification
par: Jiang, Xiaowei, et autres
Publié: (2025)
par: Jiang, Xiaowei, et autres
Publié: (2025)
SARMAE: Masked Autoencoder for SAR Representation Learning
par: Liu, Danxu, et autres
Publié: (2025)
par: Liu, Danxu, et autres
Publié: (2025)
Mask and Restore: Blind Backdoor Defense at Test Time with Masked Autoencoder
par: Sun, Tao, et autres
Publié: (2023)
par: Sun, Tao, et autres
Publié: (2023)
The Dynamic Duo of Collaborative Masking and Target for Advanced Masked Autoencoder Learning
par: Mo, Shentong
Publié: (2024)
par: Mo, Shentong
Publié: (2024)
Resource-Efficient Multiview Perception: Integrating Semantic Masking with Masked Autoencoders
par: Dakic, Kosta, et autres
Publié: (2024)
par: Dakic, Kosta, et autres
Publié: (2024)
Masked Autoencoders Are Effective Tokenizers for Diffusion Models
par: Chen, Hao, et autres
Publié: (2025)
par: Chen, Hao, et autres
Publié: (2025)
Documents similaires
-
TapWeight: Reweighting Pretraining Objectives for Task-Adaptive Pretraining
par: Zhang, Ruiyi, et autres
Publié: (2024) -
AutoLoRA: Automatically Tuning Matrix Ranks in Low-Rank Adaptation Based on Meta Learning
par: Zhang, Ruiyi, et autres
Publié: (2024) -
DreamPRM: Domain-Reweighted Process Reward Model for Multimodal Reasoning
par: Cao, Qi, et autres
Publié: (2025) -
Improving the Language Understanding Capabilities of Large Language Models Using Reinforcement Learning
par: Hu, Bokai, et autres
Publié: (2024) -
Can Prompts Rewind Time for LLMs? Evaluating the Effectiveness of Prompted Knowledge Cutoffs
par: Gao, Xin, et autres
Publié: (2025)