Buchumschlag

PHI-S: Distribution Balancing for Label-Free Multi-Teacher Distillation

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Ranzinger, Mike, Barker, Jon, Heinrich, Greg, Molchanov, Pavlo, Catanzaro, Bryan, Tao, Andrew
Format:	Preprint
Veröffentlicht:	2024
Schlagworte:	Machine Learning Artificial Intelligence Computer Vision and Pattern Recognition
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

RADIOv2.5: Improved Baselines for Agglomerative Vision Foundation Models
von: Heinrich, Greg, et al.
Veröffentlicht: (2024)

FeatSharp: Your Vision Model Features, Sharper
von: Ranzinger, Mike, et al.
Veröffentlicht: (2025)

C-RADIOv4 (Tech Report)
von: Ranzinger, Mike, et al.
Veröffentlicht: (2026)

AM-RADIO: Agglomerative Vision Foundation Model -- Reduce All Domains Into One
von: Ranzinger, Mike, et al.
Veröffentlicht: (2023)

FasterViT: Fast Vision Transformers with Hierarchical Attention
von: Hatamizadeh, Ali, et al.
Veröffentlicht: (2023)

Incomplete Multi-View Multi-Label Classification via Shared Codebook and Fused-Teacher Self-Distillation
von: Yan, Xu, et al.
Veröffentlicht: (2026)

Stateful Token Reduction for Long-Video Hybrid VLMs
von: Jiang, Jindong, et al.
Veröffentlicht: (2026)

LITA: Language Instructed Temporal-Localization Assistant
von: Huang, De-An, et al.
Veröffentlicht: (2024)

Multi-Label Knowledge Distillation
von: Yang, Penghui, et al.
Veröffentlicht: (2023)

Drive-KD: Multi-Teacher Distillation for VLMs in Autonomous Driving
von: Lian, Weitong, et al.
Veröffentlicht: (2026)

Label-Augmented Dataset Distillation
von: Kang, Seoungyoon, et al.
Veröffentlicht: (2024)

Teacher as a Lenient Expert: Teacher-Agnostic Data-Free Knowledge Distillation
von: Shin, Hyunjune, et al.
Veröffentlicht: (2024)

COIN: Control-Inpainting Diffusion Prior for Human and Camera Motion Estimation
von: Li, Jiefeng, et al.
Veröffentlicht: (2024)

Enhancing Source-Free Domain Adaptive Object Detection with Low-confidence Pseudo Label Distillation
von: Yoon, Ilhoon, et al.
Veröffentlicht: (2024)

DMGD: Train-Free Dataset Distillation with Semantic-Distribution Matching in Diffusion Models
von: Wang, Qichao, et al.
Veröffentlicht: (2026)

Bridging Weakly-Supervised Learning and VLM Distillation: Noisy Partial Label Learning for Efficient Downstream Adaptation
von: Wang, Qian-Wei, et al.
Veröffentlicht: (2025)

Powerful Teachers Matter: Text-Guided Multi-view Knowledge Distillation with Visual Prior Enhancement
von: Zhang, Xin, et al.
Veröffentlicht: (2026)

Minifinetuning: Low-Data Generation Domain Adaptation through Corrective Self-Distillation
von: Belcak, Peter, et al.
Veröffentlicht: (2025)

Heuristic-Free Multi-Teacher Learning
von: Nguyen, Huy Thong, et al.
Veröffentlicht: (2024)

Towards Label-Free Single-Cell Phenotyping Using Multi-Task Learning
von: Nazir, Saqib, et al.
Veröffentlicht: (2026)

Towards Effective Data-Free Knowledge Distillation via Diverse Diffusion Augmentation
von: Li, Muquan, et al.
Veröffentlicht: (2024)

Improving Multi-Label Contrastive Learning by Leveraging Label Distribution
von: Chen, Ning, et al.
Veröffentlicht: (2025)

Continuous-Time Distribution Matching for Few-Step Diffusion Distillation
von: Liu, Tao, et al.
Veröffentlicht: (2026)

Robust Noisy Label Learning via Two-Stream Sample Distillation
von: Bai, Sihan, et al.
Veröffentlicht: (2024)

CoMAD: A Multiple-Teacher Self-Supervised Distillation Framework
von: Mandalika, Sriram, et al.
Veröffentlicht: (2025)

Free Performance Gain from Mixing Multiple Partially Labeled Samples in Multi-label Image Classification
von: Chong, Chak Fong, et al.
Veröffentlicht: (2024)

FreeA: Human-object Interaction Detection using Free Annotation Labels
von: Liu, Qi, et al.
Veröffentlicht: (2024)

Multi-Level Feature Distillation of Joint Teachers Trained on Distinct Image Datasets
von: Iordache, Adrian, et al.
Veröffentlicht: (2024)

Single-Teacher View Augmentation: Boosting Knowledge Distillation via Angular Diversity
von: Yu, Seonghoon, et al.
Veröffentlicht: (2025)

Teacher-Guided One-Shot Pruning via Context-Aware Knowledge Distillation
von: Alim, Md. Samiul, et al.
Veröffentlicht: (2025)

Hierarchical, Interpretable, Label-Free Concept Bottleneck Model
von: Xie, Haodong, et al.
Veröffentlicht: (2026)

JL1-CD: A New Benchmark for Remote Sensing Change Detection and a Robust Multi-Teacher Knowledge Distillation Framework
von: Liu, Ziyuan, et al.
Veröffentlicht: (2025)

The Role of Teacher Calibration in Knowledge Distillation
von: Kim, Suyoung, et al.
Veröffentlicht: (2025)

Training-Free Label Space Alignment for Universal Domain Adaptation
von: Lee, Dujin, et al.
Veröffentlicht: (2025)

ELFS: Label-Free Coreset Selection with Proxy Training Dynamics
von: Zheng, Haizhong, et al.
Veröffentlicht: (2024)

Multimodal Distribution Matching for Vision-Language Dataset Distillation
von: Jeong, Jongoh, et al.
Veröffentlicht: (2026)

Global Intervention and Distillation for Federated Out-of-Distribution Generalization
von: Qi, Zhuang, et al.
Veröffentlicht: (2025)

Label Sharing Incremental Learning Framework for Independent Multi-Label Segmentation Tasks
von: Anand, Deepa, et al.
Veröffentlicht: (2024)

NVLM: Open Frontier-Class Multimodal LLMs
von: Dai, Wenliang, et al.
Veröffentlicht: (2024)

When Data-Free Knowledge Distillation Meets Non-Transferable Teacher: Escaping Out-of-Distribution Trap is All You Need
von: Hong, Ziming, et al.
Veröffentlicht: (2025)