A Spark Optimizer for Adaptive, Fine-Grained Parameter Tuning
Fuente:
arXiv
Salvato in:
| Autori principali: | Lyu, Chenghao, Fan, Qi, Guyard, Philippe, Diao, Yanlei |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Fine-Grained Modeling and Optimization for Intelligent Resource Management in Big Data Processing
di: Lyu, Chenghao, et al.
Pubblicazione: (2022)
di: Lyu, Chenghao, et al.
Pubblicazione: (2022)
Zero-Execution Retrieval-Augmented Configuration Tuning of Spark Applications
di: Suri, Raunaq, et al.
Pubblicazione: (2025)
di: Suri, Raunaq, et al.
Pubblicazione: (2025)
LoRA-C: Parameter-Efficient Fine-Tuning of Robust CNN for IoT Devices
di: Ding, Chuntao, et al.
Pubblicazione: (2024)
di: Ding, Chuntao, et al.
Pubblicazione: (2024)
MemAscend: System Memory Optimization for SSD-Offloaded LLM Fine-Tuning
di: Liaw, Yong-Cheng, et al.
Pubblicazione: (2025)
di: Liaw, Yong-Cheng, et al.
Pubblicazione: (2025)
Analysis and Optimized CXL-Attached Memory Allocation for Long-Context LLM Fine-Tuning
di: Liaw, Yong-Cheng, et al.
Pubblicazione: (2025)
di: Liaw, Yong-Cheng, et al.
Pubblicazione: (2025)
FedQuad: Adaptive Layer-wise LoRA Deployment and Activation Quantization for Federated Fine-Tuning
di: Li, Rukuo, et al.
Pubblicazione: (2025)
di: Li, Rukuo, et al.
Pubblicazione: (2025)
ExpertWeave: Efficiently Serving Expert-Specialized Fine-Tuned Adapters at Scale
di: Shi, Ge, et al.
Pubblicazione: (2025)
di: Shi, Ge, et al.
Pubblicazione: (2025)
LiveR: Fine-Grained Elasticity via Live Reconfiguration for Model Training
di: Liu, Haoyuan, et al.
Pubblicazione: (2026)
di: Liu, Haoyuan, et al.
Pubblicazione: (2026)
Performance comparison of Dask and Apache Spark on HPC systems for Neuroimaging
di: Dugré, Mathieu, et al.
Pubblicazione: (2024)
di: Dugré, Mathieu, et al.
Pubblicazione: (2024)
MemFine: Memory-Aware Fine-Grained Scheduling for MoE Training
di: Zhao, Lu, et al.
Pubblicazione: (2025)
di: Zhao, Lu, et al.
Pubblicazione: (2025)
A Framework for Fine-Grained Synchronization of Dependent GPU Kernels
di: Jangda, Abhinav, et al.
Pubblicazione: (2023)
di: Jangda, Abhinav, et al.
Pubblicazione: (2023)
FedFQ: Federated Learning with Fine-Grained Quantization
di: Li, Haowei, et al.
Pubblicazione: (2024)
di: Li, Haowei, et al.
Pubblicazione: (2024)
Towards Polyglot Data Processing in Social Networks using the Hadoop-Spark ecosystem
di: Seabra, Antony, et al.
Pubblicazione: (2025)
di: Seabra, Antony, et al.
Pubblicazione: (2025)
Split Fine-Tuning for Large Language Models in Wireless Networks
di: Zhang, Songge, et al.
Pubblicazione: (2025)
di: Zhang, Songge, et al.
Pubblicazione: (2025)
Heterogeneous Federated Fine-Tuning with Parallel One-Rank Adaptation
di: Zhang, Zikai, et al.
Pubblicazione: (2026)
di: Zhang, Zikai, et al.
Pubblicazione: (2026)
Towards Fine-Grained Scalability for Stateful Stream Processing Systems
di: Qing, Yunfan, et al.
Pubblicazione: (2025)
di: Qing, Yunfan, et al.
Pubblicazione: (2025)
Dynatune: Dynamic Tuning of Raft Election Parameters Using Network Measurement
di: Shiozaki, Kohya, et al.
Pubblicazione: (2025)
di: Shiozaki, Kohya, et al.
Pubblicazione: (2025)
Persistent HyTM via Fast Path Fine-Grained Locking
di: Coccimiglio, Gaetano, et al.
Pubblicazione: (2025)
di: Coccimiglio, Gaetano, et al.
Pubblicazione: (2025)
Efficient Parameter Tuning for a Structure-Based Virtual Screening HPC Application
di: Guindani, Bruno, et al.
Pubblicazione: (2024)
di: Guindani, Bruno, et al.
Pubblicazione: (2024)
Elastic Mixture of Rank-Wise Experts for Knowledge Reuse in Federated Fine-Tuning
di: Wu, Yebo, et al.
Pubblicazione: (2025)
di: Wu, Yebo, et al.
Pubblicazione: (2025)
HLoRA: Efficient Federated Learning System for LLM Heterogeneous Fine-Tuning
di: Liu, Qianli, et al.
Pubblicazione: (2025)
di: Liu, Qianli, et al.
Pubblicazione: (2025)
Robust Federated Fine-Tuning in Heterogeneous Networks with Unreliable Connections: An Aggregation View
di: Wang, Yanmeng, et al.
Pubblicazione: (2025)
di: Wang, Yanmeng, et al.
Pubblicazione: (2025)
MuxTune: Efficient Multi-Task LLM Fine-Tuning in Multi-Tenant Datacenters via Spatial-Temporal Backbone Multiplexing
di: Xue, Chunyu, et al.
Pubblicazione: (2026)
di: Xue, Chunyu, et al.
Pubblicazione: (2026)
Shared Memory-Aware Latency-Sensitive Message Aggregation for Fine-Grained Communication
di: Chandrasekar, Kavitha, et al.
Pubblicazione: (2024)
di: Chandrasekar, Kavitha, et al.
Pubblicazione: (2024)
Fine-Grained Vectorized Merge Sorting on RISC-V: From Register to Cache
di: Zhang, Jin, et al.
Pubblicazione: (2024)
di: Zhang, Jin, et al.
Pubblicazione: (2024)
FASER: Fine-Grained Phase Management for Speculative Decoding in Dynamic LLM Serving
di: Chen, Wenyan, et al.
Pubblicazione: (2026)
di: Chen, Wenyan, et al.
Pubblicazione: (2026)
Multithreaded Fine-Grained Asynchronous BSP for Integer Sorting with LCI and OpenMP
di: Cheng, Minyu, et al.
Pubblicazione: (2026)
di: Cheng, Minyu, et al.
Pubblicazione: (2026)
Mining Area Skyline Objects from Map-based Big Data using Apache Spark Framework
di: Li, Chen, et al.
Pubblicazione: (2024)
di: Li, Chen, et al.
Pubblicazione: (2024)
EcoLoRA: Communication-Efficient Federated Fine-Tuning of Large Language Models
di: Liu, Han, et al.
Pubblicazione: (2025)
di: Liu, Han, et al.
Pubblicazione: (2025)
Memory-Efficient Split Federated Learning for LLM Fine-Tuning on Heterogeneous Mobile Devices
di: Chen, Xiaopei, et al.
Pubblicazione: (2025)
di: Chen, Xiaopei, et al.
Pubblicazione: (2025)
Memory-Efficient Federated Fine-Tuning of Large Language Models via Layer Pruning
di: Wu, Yebo, et al.
Pubblicazione: (2025)
di: Wu, Yebo, et al.
Pubblicazione: (2025)
Low-Latency Federated Fine-Tuning for Large Language Models Over Wireless Networks
di: Pang, Zhiwen, et al.
Pubblicazione: (2026)
di: Pang, Zhiwen, et al.
Pubblicazione: (2026)
Linear Complexity $\mathcal{H}^2$ Direct Solver for Fine-Grained Parallel Architectures
di: Boukaram, Wajih, et al.
Pubblicazione: (2025)
di: Boukaram, Wajih, et al.
Pubblicazione: (2025)
Adaptive Parameter-Efficient Federated Fine-Tuning on Heterogeneous Devices
di: Liu, Jun, et al.
Pubblicazione: (2024)
di: Liu, Jun, et al.
Pubblicazione: (2024)
RingAda: Pipelining Large Model Fine-Tuning on Edge Devices with Scheduled Layer Unfreezing
di: Li, Liang, et al.
Pubblicazione: (2025)
di: Li, Liang, et al.
Pubblicazione: (2025)
SplitFT: An Adaptive Federated Split Learning System For LLMs Fine-Tuning
di: Shan, Yimeng, et al.
Pubblicazione: (2026)
di: Shan, Yimeng, et al.
Pubblicazione: (2026)
Mitigating Catastrophic Forgetting with Adaptive Transformer Block Expansion in Federated Fine-Tuning
di: Huo, Yujia, et al.
Pubblicazione: (2025)
di: Huo, Yujia, et al.
Pubblicazione: (2025)
CacheFL: Privacy-Preserving and Efficient Federated Cache Model Fine-Tuning for Vision-Language Models
di: Yi, Mengjun, et al.
Pubblicazione: (2025)
di: Yi, Mengjun, et al.
Pubblicazione: (2025)
Federated Learning of Large Language Models with Parameter-Efficient Prompt Tuning and Adaptive Optimization
di: Che, Tianshi, et al.
Pubblicazione: (2023)
di: Che, Tianshi, et al.
Pubblicazione: (2023)
LoHan: Low-Cost High-Performance Framework to Fine-Tune 100B Model on a Consumer GPU
di: Liao, Changyue, et al.
Pubblicazione: (2024)
di: Liao, Changyue, et al.
Pubblicazione: (2024)
Documenti analoghi
-
Fine-Grained Modeling and Optimization for Intelligent Resource Management in Big Data Processing
di: Lyu, Chenghao, et al.
Pubblicazione: (2022) -
Zero-Execution Retrieval-Augmented Configuration Tuning of Spark Applications
di: Suri, Raunaq, et al.
Pubblicazione: (2025) -
LoRA-C: Parameter-Efficient Fine-Tuning of Robust CNN for IoT Devices
di: Ding, Chuntao, et al.
Pubblicazione: (2024) -
MemAscend: System Memory Optimization for SSD-Offloaded LLM Fine-Tuning
di: Liaw, Yong-Cheng, et al.
Pubblicazione: (2025) -
Analysis and Optimized CXL-Attached Memory Allocation for Long-Context LLM Fine-Tuning
di: Liaw, Yong-Cheng, et al.
Pubblicazione: (2025)