Adaptive Parallel Downloader for Large Genomic Datasets
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Swargo, Rasman Mubtasim, Arslan, Engin, Arifuzzaman, Md |
|---|---|
| Format: | Preprint |
| Publié: |
2025
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
Modular Architecture for High-Performance and Low Overhead Data Transfers
par: Swargo, Rasman Mubtasim, et autres
Publié: (2025)
par: Swargo, Rasman Mubtasim, et autres
Publié: (2025)
Elastic Data Transfer Optimization with Hybrid Reinforcement Learning
par: Swargo, Rasman Mubtasim, et autres
Publié: (2025)
par: Swargo, Rasman Mubtasim, et autres
Publié: (2025)
Distributed Download from an External Data Source in Asynchronous Faulty Settings
par: Augustine, John, et autres
Publié: (2025)
par: Augustine, John, et autres
Publié: (2025)
Tasking framework for Adaptive Speculative Parallel Mesh Generation
par: Tsolakis, Christos, et autres
Publié: (2024)
par: Tsolakis, Christos, et autres
Publié: (2024)
EvoSort: A Genetic-Algorithm-Based Adaptive Parallel Sorting Framework for Large-Scale High Performance Computing
par: Raj, Shashank, et autres
Publié: (2025)
par: Raj, Shashank, et autres
Publié: (2025)
CARAT: Client-Side Adaptive RPC and Cache Co-Tuning for Parallel File Systems
par: Rashid, Md Hasanur, et autres
Publié: (2026)
par: Rashid, Md Hasanur, et autres
Publié: (2026)
HAP: Hybrid Adaptive Parallelism for Efficient Mixture-of-Experts Inference
par: Lin, Haoran, et autres
Publié: (2025)
par: Lin, Haoran, et autres
Publié: (2025)
Nitsum: Serving Tiered LLM Requests with Adaptive Tensor Parallelism
par: Srivatsa, Vikranth, et autres
Publié: (2026)
par: Srivatsa, Vikranth, et autres
Publié: (2026)
Dual-Lagrange Encoding for Storage and Download in Elastic Computing for Resilience
par: Zhong, Xi, et autres
Publié: (2025)
par: Zhong, Xi, et autres
Publié: (2025)
Uncoded Download in Lagrange-Coded Elastic Computing with Straggler Tolerance
par: Zhong, Xi, et autres
Publié: (2025)
par: Zhong, Xi, et autres
Publié: (2025)
Malleus: Straggler-Resilient Hybrid Parallel Training of Large-scale Models via Malleable Data and Model Parallelization
par: Li, Haoyang, et autres
Publié: (2024)
par: Li, Haoyang, et autres
Publié: (2024)
Efficient Parallel Compilation and Profiling of Quantum Circuits at Large Scales
par: Moore, Jane, et autres
Publié: (2026)
par: Moore, Jane, et autres
Publié: (2026)
Genomic data processing with GenomeFlow
par: Park, Junseok, et autres
Publié: (2025)
par: Park, Junseok, et autres
Publié: (2025)
Parallel Collaborative ADMM Privacy Computing and Adaptive GPU Acceleration for Distributed Edge Networks
par: Xia, Mengchun, et autres
Publié: (2026)
par: Xia, Mengchun, et autres
Publié: (2026)
Balancing Pipeline Parallelism with Vocabulary Parallelism
par: Yeung, Man Tsung, et autres
Publié: (2024)
par: Yeung, Man Tsung, et autres
Publié: (2024)
A Parallel and Distributed Rust Library for Core Decomposition on Large Graphs
par: Rucci, Davide, et autres
Publié: (2025)
par: Rucci, Davide, et autres
Publié: (2025)
FLYING SERVING: On-the-Fly Parallelism Switching for Large Language Model Serving
par: Gao, Shouwei, et autres
Publié: (2026)
par: Gao, Shouwei, et autres
Publié: (2026)
SPPO:Efficient Long-sequence LLM Training via Adaptive Sequence Pipeline Parallel Offloading
par: Chen, Qiaoling, et autres
Publié: (2025)
par: Chen, Qiaoling, et autres
Publié: (2025)
Distributed-Memory Parallel Algorithms for Sparse Matrix and Sparse Tall-and-Skinny Matrix Multiplication
par: Ranawaka, Isuru, et autres
Publié: (2024)
par: Ranawaka, Isuru, et autres
Publié: (2024)
Zeppelin: Balancing Variable-length Workloads in Data Parallel Large Model Training
par: Chen, Chang, et autres
Publié: (2025)
par: Chen, Chang, et autres
Publié: (2025)
CFP: Efficient Optimization of Intra-Operator Parallelism Plans for Large Model Training
par: Hu, Weifang, et autres
Publié: (2025)
par: Hu, Weifang, et autres
Publié: (2025)
MPipeMoE: Memory Efficient MoE for Pre-trained Models with Adaptive Pipeline Parallelism
par: Zhang, Zheng, et autres
Publié: (2025)
par: Zhang, Zheng, et autres
Publié: (2025)
A New Execution Model and Executor for Adaptively Optimizing the Performance of Parallel Algorithms Using HPX Runtime System
par: Mohammadiporshokooh, Karame, et autres
Publié: (2025)
par: Mohammadiporshokooh, Karame, et autres
Publié: (2025)
COPUS: Co-adaptive Parallelism and Batch Size Selection in Large Language Model Training
par: Sakip, Akhmed, et autres
Publié: (2026)
par: Sakip, Akhmed, et autres
Publié: (2026)
SkyHOST: A Unified Architecture for Cross-Cloud Hybrid Object and Stream Transfer
par: Tariq, Muhammad Arslan, et autres
Publié: (2026)
par: Tariq, Muhammad Arslan, et autres
Publié: (2026)
MoEntwine: Unleashing the Potential of Wafer-scale Chips for Large-scale Expert Parallel Inference
par: Tang, Xinru, et autres
Publié: (2025)
par: Tang, Xinru, et autres
Publié: (2025)
Enhancing Memory Efficiency in Large Language Model Training Through Chronos-aware Pipeline Parallelism
par: Lin, Xinyuan, et autres
Publié: (2025)
par: Lin, Xinyuan, et autres
Publié: (2025)
Large Scale Multi-GPU Based Parallel Traffic Simulation for Accelerated Traffic Assignment and Propagation
par: Jiang, Xuan, et autres
Publié: (2024)
par: Jiang, Xuan, et autres
Publié: (2024)
Cooling Matters: Benchmarking Large Language Models and Vision-Language Models on Liquid-Cooled Versus Air-Cooled H100 GPU Systems
par: Latif, Imran, et autres
Publié: (2025)
par: Latif, Imran, et autres
Publié: (2025)
The Entropy of Parallel Systems
par: Adefemi, Temitayo
Publié: (2025)
par: Adefemi, Temitayo
Publié: (2025)
Lectures on Parallel Computing
par: Träff, Jesper Larsson
Publié: (2024)
par: Träff, Jesper Larsson
Publié: (2024)
NanoCP: Request-Level Dynamic Context Parallelism for Data-Expert Parallel Decoding
par: Chen, Jiefei, et autres
Publié: (2026)
par: Chen, Jiefei, et autres
Publié: (2026)
ZeroPP: Unleashing Exceptional Parallelism Efficiency through Tensor-Parallelism-Free Methodology
par: Tang, Ding, et autres
Publié: (2024)
par: Tang, Ding, et autres
Publié: (2024)
Learning from the Past: Adaptive Parallelism Tuning for Stream Processing Systems
par: Han, Yuxing, et autres
Publié: (2025)
par: Han, Yuxing, et autres
Publié: (2025)
Synergistic Tensor and Pipeline Parallelism
par: Qi, Mengshi, et autres
Publié: (2025)
par: Qi, Mengshi, et autres
Publié: (2025)
InternEvo: Efficient Long-sequence Large Language Model Training via Hybrid Parallelism and Redundant Sharding
par: Chen, Qiaoling, et autres
Publié: (2024)
par: Chen, Qiaoling, et autres
Publié: (2024)
Oases: Efficient Large-Scale Model Training on Commodity Servers via Overlapped and Automated Tensor Model Parallelism
par: Li, Shengwei, et autres
Publié: (2023)
par: Li, Shengwei, et autres
Publié: (2023)
Seq1F1B: Efficient Sequence-Level Pipeline Parallelism for Large Language Model Training
par: Sun, Ao, et autres
Publié: (2024)
par: Sun, Ao, et autres
Publié: (2024)
Pro-Prophet: A Systematic Load Balancing Method for Efficient Parallel Training of Large-scale MoE Models
par: Wang, Wei, et autres
Publié: (2024)
par: Wang, Wei, et autres
Publié: (2024)
FastSet: Parallel Claim Settlement
par: Chen, Xiaohong, et autres
Publié: (2025)
par: Chen, Xiaohong, et autres
Publié: (2025)
Documents similaires
-
Modular Architecture for High-Performance and Low Overhead Data Transfers
par: Swargo, Rasman Mubtasim, et autres
Publié: (2025) -
Elastic Data Transfer Optimization with Hybrid Reinforcement Learning
par: Swargo, Rasman Mubtasim, et autres
Publié: (2025) -
Distributed Download from an External Data Source in Asynchronous Faulty Settings
par: Augustine, John, et autres
Publié: (2025) -
Tasking framework for Adaptive Speculative Parallel Mesh Generation
par: Tsolakis, Christos, et autres
Publié: (2024) -
EvoSort: A Genetic-Algorithm-Based Adaptive Parallel Sorting Framework for Large-Scale High Performance Computing
par: Raj, Shashank, et autres
Publié: (2025)