Efficient Few-Shot Learning for Edge AI via Knowledge Distillation on MobileViT
Fuente:
arXiv
Salvato in:
| Autori principali: | Tsuyuki, Shuhei, Bensaid, Reda, Morlier, Jérémy, Léonardon, Mathieu, Onizawa, Naoya, Gripon, Vincent, Hanyu, Takahiro |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2026
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Design Environment of Quantization-Aware Edge AI Hardware for Few-Shot Learning
di: Kanda, R., et al.
Pubblicazione: (2026)
di: Kanda, R., et al.
Pubblicazione: (2026)
Input Resolution Downsizing as a Compression Technique for Vision Deep Learning Systems
di: Morlier, Jeremy, et al.
Pubblicazione: (2025)
di: Morlier, Jeremy, et al.
Pubblicazione: (2025)
Bit-Width-Aware Design Environment for Few-Shot Learning on Edge AI Hardware
di: Kanda, R., et al.
Pubblicazione: (2026)
di: Kanda, R., et al.
Pubblicazione: (2026)
MONET: Modeling and Optimization of neural NEtwork Training from Edge to Data Centers
di: Morlier, Jérémy, et al.
Pubblicazione: (2026)
di: Morlier, Jérémy, et al.
Pubblicazione: (2026)
A Unified Performance-Cost Landscape of Parallel p-bit Ising Machines Based on Update Dynamics
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
High Convergence Rates of CMOS Invertible Logic Circuits Based on Many-Body Hamiltonians
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
GPU-accelerated simulated annealing based on p-bits with real-world device-variability modeling
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
Enhanced Convergence in p-bit Based Simulated Annealing with Partial Deactivation for Large-Scale Combinatorial Optimization Problems
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
SLAD : Shared LoRA Adapters for Task Specific Distillation
di: Bensaid, Reda, et al.
Pubblicazione: (2026)
di: Bensaid, Reda, et al.
Pubblicazione: (2026)
A Novel Benchmark for Few-Shot Semantic Segmentation in the Era of Foundation Models
di: Bensaid, Reda, et al.
Pubblicazione: (2024)
di: Bensaid, Reda, et al.
Pubblicazione: (2024)
Finite-Time Observability of Oscillatory Instabilities in Synchronous p-bit Dynamics
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
Energy-Efficient p-Bit-Based Fully-Connected Quantum-Inspired Simulated Annealer with Dual BRAM Architecture
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
Memory-Efficient FPGA Implementation of Stochastic Simulated Annealing
di: Shin, Duckgyu, et al.
Pubblicazione: (2026)
di: Shin, Duckgyu, et al.
Pubblicazione: (2026)
PEFSL: A deployment Pipeline for Embedded Few-Shot Learning on a FPGA SoC
di: Ribeiro, Lucas Grativol, et al.
Pubblicazione: (2024)
di: Ribeiro, Lucas Grativol, et al.
Pubblicazione: (2024)
Fast Solving Complete 2000-Node Optimization Using Stochastic-Computing Simulated Annealing
di: Katsuki, Kota, et al.
Pubblicazione: (2026)
di: Katsuki, Kota, et al.
Pubblicazione: (2026)
TensLoRA: Tensor Alternatives for Low-Rank Adaptation
di: Marmoret, Axel, et al.
Pubblicazione: (2025)
di: Marmoret, Axel, et al.
Pubblicazione: (2025)
Analog-to-Stochastic Converter Using Magnetic Tunnel Junction Devices for Vision Chips
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)
Navigating Efficiency in MobileViT through Gaussian Process on Global Architecture Factors
di: Meng, Ke, et al.
Pubblicazione: (2024)
di: Meng, Ke, et al.
Pubblicazione: (2024)
Anomalous Samples for Few-Shot Anomaly Detection
di: Abdali, Aymane, et al.
Pubblicazione: (2025)
di: Abdali, Aymane, et al.
Pubblicazione: (2025)
Detection of early bruises in apples using hyperspectral imaging and an improved MobileViT network
di: Mianqing Yang, et al.
Pubblicazione: (2024)
di: Mianqing Yang, et al.
Pubblicazione: (2024)
Object-Centric Cropping for Visual Few-Shot Classification
di: Abdali, Aymane, et al.
Pubblicazione: (2025)
di: Abdali, Aymane, et al.
Pubblicazione: (2025)
Efficient CMOS Invertible Logic Using Stochastic Computing
di: Smithson, Sean C., et al.
Pubblicazione: (2026)
di: Smithson, Sean C., et al.
Pubblicazione: (2026)
Energy-Efficient Plant Monitoring via Knowledge Distillation
di: Moummad, Ilyass, et al.
Pubblicazione: (2026)
di: Moummad, Ilyass, et al.
Pubblicazione: (2026)
Stochastic Simulated Quantum Annealing for Fast Solution of Combinatorial Optimization Problems
di: Onizawa, Naoya, et al.
Pubblicazione: (2023)
di: Onizawa, Naoya, et al.
Pubblicazione: (2023)
MUKA: Multi Kernel Audio Adaptation Of Audio-Language Models
di: Bensaid, Reda, et al.
Pubblicazione: (2026)
di: Bensaid, Reda, et al.
Pubblicazione: (2026)
ProKeR: A Kernel Perspective on Few-Shot Adaptation of Large Vision-Language Models
di: Bendou, Yassir, et al.
Pubblicazione: (2025)
di: Bendou, Yassir, et al.
Pubblicazione: (2025)
Automated Plant Disease and Pest Detection System Using Hybrid Lightweight CNN-MobileViT Models for Diagnosis of Indigenous Crops
di: Gebremedhin, Tekleab G., et al.
Pubblicazione: (2025)
di: Gebremedhin, Tekleab G., et al.
Pubblicazione: (2025)
Oops, I Sampled it Again: Reinterpreting Confidence Intervals in Few-Shot Learning
di: Lafargue, Raphael, et al.
Pubblicazione: (2024)
di: Lafargue, Raphael, et al.
Pubblicazione: (2024)
Towards Edge General Intelligence: Knowledge Distillation for Mobile Agentic AI
di: Wu, Yuxuan, et al.
Pubblicazione: (2025)
di: Wu, Yuxuan, et al.
Pubblicazione: (2025)
Few-Shot Knowledge Distillation of LLMs With Counterfactual Explanations
di: Hamman, Faisal, et al.
Pubblicazione: (2025)
di: Hamman, Faisal, et al.
Pubblicazione: (2025)
On Distilling the Displacement Knowledge for Few-Shot Class-Incremental Learning
di: Fang, Pengfei, et al.
Pubblicazione: (2024)
di: Fang, Pengfei, et al.
Pubblicazione: (2024)
In-Context Learning Distillation for Efficient Few-Shot Fine-Tuning
di: Duan, Yifei, et al.
Pubblicazione: (2024)
di: Duan, Yifei, et al.
Pubblicazione: (2024)
Few and Fewer: Learning Better from Few Examples Using Fewer Base Classes
di: Lafargue, Raphael, et al.
Pubblicazione: (2024)
di: Lafargue, Raphael, et al.
Pubblicazione: (2024)
EdgeCrafter: Compact ViTs for Edge Dense Prediction via Task-Specialized Distillation
di: Liu, Longfei, et al.
Pubblicazione: (2026)
di: Liu, Longfei, et al.
Pubblicazione: (2026)
DistillFSS: Synthesizing Few-Shot Knowledge into a Lightweight Segmentation Model
di: De Marinis, Pasquale, et al.
Pubblicazione: (2025)
di: De Marinis, Pasquale, et al.
Pubblicazione: (2025)
LLM Distillation for Efficient Few-Shot Multiple Choice Question Answering
di: Sutanto, Patrick, et al.
Pubblicazione: (2024)
di: Sutanto, Patrick, et al.
Pubblicazione: (2024)
On Transfer in Classification: How Well do Subsets of Classes Generalize?
di: Baena, Raphael, et al.
Pubblicazione: (2024)
di: Baena, Raphael, et al.
Pubblicazione: (2024)
Segmentation of the Homogeneity of a Signal Using a Piecewise Linear Recognition Tool
di: Morlier, Joseph
Pubblicazione: (2005)
di: Morlier, Joseph
Pubblicazione: (2005)
MindShot: A Few-Shot Brain Decoding Framework via Transferring Cross-Subject Prior and Distilling Frequency Domain Knowledge
di: Jiang, Shuai, et al.
Pubblicazione: (2024)
di: Jiang, Shuai, et al.
Pubblicazione: (2024)
Dual Distillation for Few-Shot Anomaly Detection
di: Dong, Le, et al.
Pubblicazione: (2026)
di: Dong, Le, et al.
Pubblicazione: (2026)
Documenti analoghi
-
Design Environment of Quantization-Aware Edge AI Hardware for Few-Shot Learning
di: Kanda, R., et al.
Pubblicazione: (2026) -
Input Resolution Downsizing as a Compression Technique for Vision Deep Learning Systems
di: Morlier, Jeremy, et al.
Pubblicazione: (2025) -
Bit-Width-Aware Design Environment for Few-Shot Learning on Edge AI Hardware
di: Kanda, R., et al.
Pubblicazione: (2026) -
MONET: Modeling and Optimization of neural NEtwork Training from Edge to Data Centers
di: Morlier, Jérémy, et al.
Pubblicazione: (2026) -
A Unified Performance-Cost Landscape of Parallel p-bit Ising Machines Based on Update Dynamics
di: Onizawa, Naoya, et al.
Pubblicazione: (2026)