Salvato in:
| Autori principali: | Sugiura, Keisuke, Matsutani, Hiroki |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | https://arxiv.org/abs/2501.04287 |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
InstantFT: An FPGA-Based Runtime Subsecond Fine-tuning of CNN Models
di: Sugiura, Keisuke, et al.
Pubblicazione: (2025)
di: Sugiura, Keisuke, et al.
Pubblicazione: (2025)
A Cost-Efficient FPGA Implementation of Tiny Transformer Model using Neural ODE
di: Okubo, Ikumi, et al.
Pubblicazione: (2024)
di: Okubo, Ikumi, et al.
Pubblicazione: (2024)
PointODE: Lightweight Point Cloud Learning with Neural Ordinary Differential Equations on Edge
di: Sugiura, Keisuke, et al.
Pubblicazione: (2025)
di: Sugiura, Keisuke, et al.
Pubblicazione: (2025)
An FPGA-Based Accelerator for Graph Embedding using Sequential Training Algorithm
di: Sunaga, Kazuki, et al.
Pubblicazione: (2023)
di: Sunaga, Kazuki, et al.
Pubblicazione: (2023)
Accelerating Local LLMs on Resource-Constrained Edge Devices via Distributed Prompt Caching
di: Matsutani, Hiroki, et al.
Pubblicazione: (2026)
di: Matsutani, Hiroki, et al.
Pubblicazione: (2026)
CurvZO: Adaptive Curvature-Guided Sparse Zeroth-Order Optimization for Efficient LLM Fine-Tuning
di: Wang, Shuo, et al.
Pubblicazione: (2026)
di: Wang, Shuo, et al.
Pubblicazione: (2026)
DistZO2: High-Throughput and Memory-Efficient Zeroth-Order Fine-tuning LLMs with Distributed Parallel Computing
di: Wang, Liangyu, et al.
Pubblicazione: (2025)
di: Wang, Liangyu, et al.
Pubblicazione: (2025)
FPGA-Accelerated Correspondence-free Point Cloud Registration with PointNet Features
di: Sugiura, Keisuke, et al.
Pubblicazione: (2024)
di: Sugiura, Keisuke, et al.
Pubblicazione: (2024)
TeZO: Empowering the Low-Rankness on the Temporal Dimension in the Zeroth-Order Optimization for Fine-tuning LLMs
di: Sun, Yan, et al.
Pubblicazione: (2025)
di: Sun, Yan, et al.
Pubblicazione: (2025)
ZO2: Scalable Zeroth-Order Fine-Tuning for Extremely Large Language Models with Limited GPU Memory
di: Wang, Liangyu, et al.
Pubblicazione: (2025)
di: Wang, Liangyu, et al.
Pubblicazione: (2025)
QuZO: Quantized Zeroth-Order Fine-Tuning for Large Language Models
di: Zhou, Jiajun, et al.
Pubblicazione: (2025)
di: Zhou, Jiajun, et al.
Pubblicazione: (2025)
MaZO: Masked Zeroth-Order Optimization for Multi-Task Fine-Tuning of Large Language Models
di: Zhang, Zhen, et al.
Pubblicazione: (2025)
di: Zhang, Zhen, et al.
Pubblicazione: (2025)
AdaMeZO: Adam-style Zeroth-Order Optimizer for LLM Fine-tuning Without Maintaining the Moments
di: Cai, Zhijie, et al.
Pubblicazione: (2026)
di: Cai, Zhijie, et al.
Pubblicazione: (2026)
When Foresight Pruning Meets Zeroth-Order Optimization: Efficient Federated Learning for Low-Memory Devices
di: Zhang, Pengyu, et al.
Pubblicazione: (2024)
di: Zhang, Pengyu, et al.
Pubblicazione: (2024)
Sparse MeZO: Less Parameters for Better Performance in Zeroth-Order LLM Fine-Tuning
di: Liu, Yong, et al.
Pubblicazione: (2024)
di: Liu, Yong, et al.
Pubblicazione: (2024)
ZO-DARTS++: An Efficient and Size-Variable Zeroth-Order Neural Architecture Search Algorithm
di: Xie, Lunchen, et al.
Pubblicazione: (2025)
di: Xie, Lunchen, et al.
Pubblicazione: (2025)
A Tiny Supervised ODL Core with Auto Data Pruning for Human Activity Recognition
di: Matsutani, Hiroki, et al.
Pubblicazione: (2024)
di: Matsutani, Hiroki, et al.
Pubblicazione: (2024)
Revisiting Zeroth-Order Optimization for Memory-Efficient LLM Fine-Tuning: A Benchmark
di: Zhang, Yihua, et al.
Pubblicazione: (2024)
di: Zhang, Yihua, et al.
Pubblicazione: (2024)
Skip2-LoRA: A Lightweight On-device DNN Fine-tuning Method for Low-cost Edge Devices
di: Matsutani, Hiroki, et al.
Pubblicazione: (2024)
di: Matsutani, Hiroki, et al.
Pubblicazione: (2024)
AR1-ZO: Topology-Aware Rank-1 Zeroth-Order Queries for High-Rank LoRA Fine-Tuning
di: Chen, Ziye, et al.
Pubblicazione: (2026)
di: Chen, Ziye, et al.
Pubblicazione: (2026)
On-Device Fine-Tuning via Backprop-Free Zeroth-Order Optimization
di: Katti, Prabodh, et al.
Pubblicazione: (2025)
di: Katti, Prabodh, et al.
Pubblicazione: (2025)
ZO-SAM: Zero-Order Sharpness-Aware Minimization for Efficient Sparse Training
di: Ji, Jie, et al.
Pubblicazione: (2026)
di: Ji, Jie, et al.
Pubblicazione: (2026)
Simultaneous Computation and Memory Efficient Zeroth-Order Optimizer for Fine-Tuning Large Language Models
di: Wang, Fei, et al.
Pubblicazione: (2024)
di: Wang, Fei, et al.
Pubblicazione: (2024)
Efficient Federated RLHF via Zeroth-Order Policy Optimization
di: Wang, Deyi, et al.
Pubblicazione: (2026)
di: Wang, Deyi, et al.
Pubblicazione: (2026)
On Adaptivity in Zeroth-Order Optimization
di: Dbouk, Hassan, et al.
Pubblicazione: (2026)
di: Dbouk, Hassan, et al.
Pubblicazione: (2026)
Learning Dynamics of Zeroth-Order Optimization: A Kernel Perspective
di: Li, Zhe, et al.
Pubblicazione: (2026)
di: Li, Zhe, et al.
Pubblicazione: (2026)
Prior-Informed Zeroth-Order Optimization with Adaptive Direction Alignment for Memory-Efficient LLM Fine-Tuning
di: Jin, Feihu, et al.
Pubblicazione: (2026)
di: Jin, Feihu, et al.
Pubblicazione: (2026)
More Than Memory Savings: Zeroth-Order Optimization Mitigates Forgetting in Continual Learning
di: Yu, Wanhao, et al.
Pubblicazione: (2025)
di: Yu, Wanhao, et al.
Pubblicazione: (2025)
Learning a Zeroth-Order Optimizer for Fine-Tuning LLMs
di: Zhang, Kairun, et al.
Pubblicazione: (2025)
di: Zhang, Kairun, et al.
Pubblicazione: (2025)
Position: Zeroth-Order Optimization in Deep Learning Is Underexplored, Not Underpowered
di: Liu, Sijia, et al.
Pubblicazione: (2026)
di: Liu, Sijia, et al.
Pubblicazione: (2026)
Private Zeroth-Order Optimization with Public Data
di: Gong, Xuchen, et al.
Pubblicazione: (2025)
di: Gong, Xuchen, et al.
Pubblicazione: (2025)
The Multi-Query Paradox in Zeroth-Order Optimization
di: Lin, Wei, et al.
Pubblicazione: (2025)
di: Lin, Wei, et al.
Pubblicazione: (2025)
Hybrid Decentralized Optimization: Leveraging Both First- and Zeroth-Order Optimizers for Faster Convergence
di: Ansaripour, Matin, et al.
Pubblicazione: (2022)
di: Ansaripour, Matin, et al.
Pubblicazione: (2022)
Stochastic Regret Guarantees for Online Zeroth- and First-Order Bilevel Optimization
di: Nazari, Parvin, et al.
Pubblicazione: (2025)
di: Nazari, Parvin, et al.
Pubblicazione: (2025)
Zeroth-Order Optimization at the Edge of Stability
di: Song, Minhak, et al.
Pubblicazione: (2026)
di: Song, Minhak, et al.
Pubblicazione: (2026)
Zeroth-Order Optimization is Secretly Single-Step Policy Optimization
di: Qiu, Junbin, et al.
Pubblicazione: (2025)
di: Qiu, Junbin, et al.
Pubblicazione: (2025)
Refining Adaptive Zeroth-Order Optimization at Ease
di: Shu, Yao, et al.
Pubblicazione: (2025)
di: Shu, Yao, et al.
Pubblicazione: (2025)
Ancestral Reinforcement Learning: Unifying Zeroth-Order Optimization and Genetic Algorithms for Reinforcement Learning
di: Nakashima, So, et al.
Pubblicazione: (2024)
di: Nakashima, So, et al.
Pubblicazione: (2024)
A Historical Trajectory Assisted Optimization Method for Zeroth-Order Federated Learning
di: Wu, Chenlin, et al.
Pubblicazione: (2024)
di: Wu, Chenlin, et al.
Pubblicazione: (2024)
Communication-Efficient and Differentially Private Vertical Federated Learning with Zeroth-Order Optimization
di: Zhang, Jianing, et al.
Pubblicazione: (2025)
di: Zhang, Jianing, et al.
Pubblicazione: (2025)
Documenti analoghi
-
InstantFT: An FPGA-Based Runtime Subsecond Fine-tuning of CNN Models
di: Sugiura, Keisuke, et al.
Pubblicazione: (2025) -
A Cost-Efficient FPGA Implementation of Tiny Transformer Model using Neural ODE
di: Okubo, Ikumi, et al.
Pubblicazione: (2024) -
PointODE: Lightweight Point Cloud Learning with Neural Ordinary Differential Equations on Edge
di: Sugiura, Keisuke, et al.
Pubblicazione: (2025) -
An FPGA-Based Accelerator for Graph Embedding using Sequential Training Algorithm
di: Sunaga, Kazuki, et al.
Pubblicazione: (2023) -
Accelerating Local LLMs on Resource-Constrained Edge Devices via Distributed Prompt Caching
di: Matsutani, Hiroki, et al.
Pubblicazione: (2026)