Hardware optimization on Android for inference of AI models
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Gherasim, Iulius, Sánchez, Carlos García |
|---|---|
| Format: | Preprint |
| Publié: |
2025
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
Hardware-efficient tractable probabilistic inference for TinyML Neurosymbolic AI applications
par: Leslin, Jelin, et autres
Publié: (2025)
par: Leslin, Jelin, et autres
Publié: (2025)
Heuristic-Based Merging of HPC Traces to Extend Hardware Counter Coverage
par: Aubach, Júlia Orteu, et autres
Publié: (2026)
par: Aubach, Júlia Orteu, et autres
Publié: (2026)
Accuracy and Consumption analysis from a compressed model by CompactifAI from Multiverse Computing
par: Fovet, Damien, et autres
Publié: (2025)
par: Fovet, Damien, et autres
Publié: (2025)
Toward A Formalized Approach for Spike Sorting Algorithms and Hardware Evaluation
par: Zhang, Tim, et autres
Publié: (2022)
par: Zhang, Tim, et autres
Publié: (2022)
AttentionEngine: A Versatile Framework for Efficient Attention Mechanisms on Diverse Hardware Platforms
par: Chen, Feiyang, et autres
Publié: (2025)
par: Chen, Feiyang, et autres
Publié: (2025)
KForge: Program Synthesis for Diverse AI Hardware Accelerators
par: Sereda, Taras, et autres
Publié: (2025)
par: Sereda, Taras, et autres
Publié: (2025)
EARL: Energy-Aware Optimization of Liquid State Machines for Pervasive AI
par: Iqbal, Zain, et autres
Publié: (2026)
par: Iqbal, Zain, et autres
Publié: (2026)
Enabling more efficient and cost-effective AI/ML systems with Collective Mind, virtualized MLOps, MLPerf, Collective Knowledge Playground and reproducible optimization tournaments
par: Fursin, Grigori
Publié: (2024)
par: Fursin, Grigori
Publié: (2024)
Forecasting LLM Inference Performance via Hardware-Agnostic Analytical Modeling
par: Patwari, Rajeev, et autres
Publié: (2025)
par: Patwari, Rajeev, et autres
Publié: (2025)
On the Sustainability of AI Inferences in the Edge
par: Sobhani, Ghazal, et autres
Publié: (2025)
par: Sobhani, Ghazal, et autres
Publié: (2025)
Realtime Facial Expression Recognition: Neuromorphic Hardware vs. Edge AI Accelerators
par: Smith, Heath, et autres
Publié: (2024)
par: Smith, Heath, et autres
Publié: (2024)
Parallel Implementations Assessment of a Spatial-Spectral Classifier for Hyperspectral Clinical Applications
par: Lazcano, Raquel, et autres
Publié: (2024)
par: Lazcano, Raquel, et autres
Publié: (2024)
The Race to Efficiency: A New Perspective on AI Scaling Laws
par: Lu, Chien-Ping
Publié: (2025)
par: Lu, Chien-Ping
Publié: (2025)
Pushing the Envelope of LLM Inference on AI-PC and Intel GPUs
par: Georganas, Evangelos, et autres
Publié: (2025)
par: Georganas, Evangelos, et autres
Publié: (2025)
Optimizing Methane Detection On Board Satellites: Speed, Accuracy, and Low-Power Solutions for Resource-Constrained Hardware
par: Herec, Jonáš, et autres
Publié: (2025)
par: Herec, Jonáš, et autres
Publié: (2025)
MoEITS: A Green AI approach for simplifying MoE-LLMs
par: Balderas, Luis, et autres
Publié: (2026)
par: Balderas, Luis, et autres
Publié: (2026)
Knowledge Grafting: A Mechanism for Optimizing AI Model Deployment in Resource-Constrained Environments
par: Almurshed, Osama, et autres
Publié: (2025)
par: Almurshed, Osama, et autres
Publié: (2025)
Energy per Successful Goal: Goal-Level Energy Accounting for Agentic AI Systems
par: Panigrahy, Deepak, et autres
Publié: (2026)
par: Panigrahy, Deepak, et autres
Publié: (2026)
Leveraging Speculative Sampling and KV-Cache Optimizations Together for Generative AI using OpenVINO
par: Barad, Haim, et autres
Publié: (2023)
par: Barad, Haim, et autres
Publié: (2023)
CPINN-ABPI: Physics-Informed Neural Networks for Accurate Power Estimation in MPSoCs
par: Elshamy, Mohamed R., et autres
Publié: (2025)
par: Elshamy, Mohamed R., et autres
Publié: (2025)
DistZO2: High-Throughput and Memory-Efficient Zeroth-Order Fine-tuning LLMs with Distributed Parallel Computing
par: Wang, Liangyu, et autres
Publié: (2025)
par: Wang, Liangyu, et autres
Publié: (2025)
PARD: Accelerating LLM Inference with Low-Cost PARallel Draft Model Adaptation
par: An, Zihao, et autres
Publié: (2025)
par: An, Zihao, et autres
Publié: (2025)
Flashlight: PyTorch Compiler Extensions to Accelerate Attention Variants
par: You, Bozhi, et autres
Publié: (2025)
par: You, Bozhi, et autres
Publié: (2025)
Enhancing Tropical Cyclone Path Forecasting with an Improved Transformer Network
par: Van Thanh, Nguyen, et autres
Publié: (2025)
par: Van Thanh, Nguyen, et autres
Publié: (2025)
lm-Meter: Unveiling Runtime Inference Latency for On-Device Language Models
par: Wang, Haoxin, et autres
Publié: (2025)
par: Wang, Haoxin, et autres
Publié: (2025)
WCDT: Systematic WCET Optimization for Decision Tree Implementations
par: Hölscher, Nils, et autres
Publié: (2025)
par: Hölscher, Nils, et autres
Publié: (2025)
MoE-Inference-Bench: Performance Evaluation of Mixture of Expert Large Language and Vision Models
par: Chitty-Venkata, Krishna Teja, et autres
Publié: (2025)
par: Chitty-Venkata, Krishna Teja, et autres
Publié: (2025)
MLPerf Automotive
par: Shojaei, Radoyeh, et autres
Publié: (2025)
par: Shojaei, Radoyeh, et autres
Publié: (2025)
Light Differentiable Logic Gate Networks
par: Rüttgers, Lukas, et autres
Publié: (2025)
par: Rüttgers, Lukas, et autres
Publié: (2025)
V-Seek: Accelerating LLM Reasoning on Open-hardware Server-class RISC-V Platforms
par: Rodrigo, Javier J. Poveda, et autres
Publié: (2025)
par: Rodrigo, Javier J. Poveda, et autres
Publié: (2025)
PrETi: Predicting Execution Time in Early Stage with LLVM and Machine Learning
par: Xu, Risheng, et autres
Publié: (2025)
par: Xu, Risheng, et autres
Publié: (2025)
ZO2: Scalable Zeroth-Order Fine-Tuning for Extremely Large Language Models with Limited GPU Memory
par: Wang, Liangyu, et autres
Publié: (2025)
par: Wang, Liangyu, et autres
Publié: (2025)
Cloud Computing Energy Consumption Prediction Based on Kernel Extreme Learning Machine Algorithm Improved by Vector Weighted Average Algorithm
par: Wang, Yuqing, et autres
Publié: (2025)
par: Wang, Yuqing, et autres
Publié: (2025)
Feature Optimization for Time Series Forecasting via Novel Randomized Uphill Climbing
par: Van Thanh, Nguyen
Publié: (2025)
par: Van Thanh, Nguyen
Publié: (2025)
Mind the Gap: Removing the Discretization Gap in Differentiable Logic Gate Networks
par: Yousefi, Shakir, et autres
Publié: (2025)
par: Yousefi, Shakir, et autres
Publié: (2025)
AutoSAGE: Input-Aware CUDA Scheduling for Sparse GNN Aggregation (SpMM/SDDMM) and CSR Attention
par: Stankovic, Aleksandar
Publié: (2025)
par: Stankovic, Aleksandar
Publié: (2025)
One Size Does Not Fit All: Architecture-Aware Adaptive Batch Scheduling with DEBA
par: Belias, François, et autres
Publié: (2025)
par: Belias, François, et autres
Publié: (2025)
Biases in Edge Language Models: Detection, Analysis, and Mitigation
par: Sharma, Vinamra, et autres
Publié: (2025)
par: Sharma, Vinamra, et autres
Publié: (2025)
Memory Analysis on the Training Course of DeepSeek Models
par: Zhang, Ping, et autres
Publié: (2025)
par: Zhang, Ping, et autres
Publié: (2025)
PixelBrax: Learning Continuous Control from Pixels End-to-End on the GPU
par: McInroe, Trevor, et autres
Publié: (2025)
par: McInroe, Trevor, et autres
Publié: (2025)
Documents similaires
-
Hardware-efficient tractable probabilistic inference for TinyML Neurosymbolic AI applications
par: Leslin, Jelin, et autres
Publié: (2025) -
Heuristic-Based Merging of HPC Traces to Extend Hardware Counter Coverage
par: Aubach, Júlia Orteu, et autres
Publié: (2026) -
Accuracy and Consumption analysis from a compressed model by CompactifAI from Multiverse Computing
par: Fovet, Damien, et autres
Publié: (2025) -
Toward A Formalized Approach for Spike Sorting Algorithms and Hardware Evaluation
par: Zhang, Tim, et autres
Publié: (2022) -
AttentionEngine: A Versatile Framework for Efficient Attention Mechanisms on Diverse Hardware Platforms
par: Chen, Feiyang, et autres
Publié: (2025)