Demeter: Resource-Efficient Distributed Stream Processing under Dynamic Loads with Multi-Configuration Optimization
Fuente:
arXiv
Salvato in:
| Autori principali: | Geldenhuys, Morgan, Scheinert, Dominik, Kao, Odej, Thamsen, Lauritz |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Daedalus: Self-Adaptive Horizontal Autoscaling for Resource Efficiency of Distributed Stream Processing Systems
di: Pfister, Benjamin J. J., et al.
Pubblicazione: (2024)
di: Pfister, Benjamin J. J., et al.
Pubblicazione: (2024)
Flora: Efficient Cloud Resource Selection for Big Data Processing via Job Classification
di: Will, Jonathan, et al.
Pubblicazione: (2025)
di: Will, Jonathan, et al.
Pubblicazione: (2025)
Sizey: Memory-Efficient Execution of Scientific Workflow Tasks
di: Bader, Jonathan, et al.
Pubblicazione: (2024)
di: Bader, Jonathan, et al.
Pubblicazione: (2024)
Towards a Peer-to-Peer Data Distribution Layer for Efficient and Collaborative Resource Optimization of Distributed Dataflow Applications
di: Scheinert, Dominik, et al.
Pubblicazione: (2023)
di: Scheinert, Dominik, et al.
Pubblicazione: (2023)
Predicting Dynamic Memory Requirements for Scientific Workflow Tasks
di: Bader, Jonathan, et al.
Pubblicazione: (2023)
di: Bader, Jonathan, et al.
Pubblicazione: (2023)
KS+: Predicting Workflow Task Memory Usage Over Time
di: Bader, Jonathan, et al.
Pubblicazione: (2024)
di: Bader, Jonathan, et al.
Pubblicazione: (2024)
Predicting the Performance of Scientific Workflow Tasks for Cluster Resource Management: An Overview of the State of the Art
di: Bader, Jonathan, et al.
Pubblicazione: (2025)
di: Bader, Jonathan, et al.
Pubblicazione: (2025)
Experimentally Evaluating the Resource Efficiency of Big Data Autoscaling
di: Will, Jonathan, et al.
Pubblicazione: (2025)
di: Will, Jonathan, et al.
Pubblicazione: (2025)
Privacy-Preserving Sharing of Data Analytics Runtime Metrics for Performance Modeling
di: Will, Jonathan, et al.
Pubblicazione: (2024)
di: Will, Jonathan, et al.
Pubblicazione: (2024)
FedZero: Leveraging Renewable Excess Energy in Federated Learning
di: Wiesner, Philipp, et al.
Pubblicazione: (2023)
di: Wiesner, Philipp, et al.
Pubblicazione: (2023)
Distributed Low-Communication Training with Decoupled Momentum Optimization
di: Nedelkoski, Sasho, et al.
Pubblicazione: (2025)
di: Nedelkoski, Sasho, et al.
Pubblicazione: (2025)
Distributed LLM Pretraining During Renewable Curtailment Windows: A Feasibility Study
di: Wiesner, Philipp, et al.
Pubblicazione: (2026)
di: Wiesner, Philipp, et al.
Pubblicazione: (2026)
HyProv: Hybrid Provenance Management for Scientific Workflows
di: Bountris, Vasilis, et al.
Pubblicazione: (2025)
di: Bountris, Vasilis, et al.
Pubblicazione: (2025)
Proceedings of the 1st International Workshop on Low Carbon Computing (LOCO 2024)
di: Vanderbauwhede, Wim, et al.
Pubblicazione: (2026)
di: Vanderbauwhede, Wim, et al.
Pubblicazione: (2026)
Ichnos: A Carbon Footprint Estimator for Scientific Workflows
di: West, Kathleen, et al.
Pubblicazione: (2024)
di: West, Kathleen, et al.
Pubblicazione: (2024)
Spatio-Temporal Shifting to Reduce Carbon, Water, and Land-Use Footprints of Cloud Workloads
di: Attenni, Giulio, et al.
Pubblicazione: (2025)
di: Attenni, Giulio, et al.
Pubblicazione: (2025)
Beyond Microservices: Testing Web-Scale RCA Methods on GPU-Driven LLM Workloads
di: Scheinert, Dominik, et al.
Pubblicazione: (2026)
di: Scheinert, Dominik, et al.
Pubblicazione: (2026)
Choosing the Right Battery Model for Data Center Simulations
di: Kilian, Paul, et al.
Pubblicazione: (2025)
di: Kilian, Paul, et al.
Pubblicazione: (2025)
QONNECT: A QoS-Aware Orchestration System for Distributed Kubernetes Clusters
di: Aslan, Haci Ismail, et al.
Pubblicazione: (2025)
di: Aslan, Haci Ismail, et al.
Pubblicazione: (2025)
Optimizing Memory Allocation in Distributed Clusters with Predictive Modeling
di: Bader, Jonathan, et al.
Pubblicazione: (2026)
di: Bader, Jonathan, et al.
Pubblicazione: (2026)
Augur: Pre-Execution Energy Prediction for Workflow Tasks in Heterogeneous Clusters
di: West, Kathleen, et al.
Pubblicazione: (2026)
di: West, Kathleen, et al.
Pubblicazione: (2026)
Exploring the Potential of Carbon-Aware Execution for Scientific Workflows
di: West, Kathleen, et al.
Pubblicazione: (2025)
di: West, Kathleen, et al.
Pubblicazione: (2025)
What happens when nanochat meets DiLoCo?
di: Acker, Alexander, et al.
Pubblicazione: (2025)
di: Acker, Alexander, et al.
Pubblicazione: (2025)
On Software Ageing Indicators in OpenStack
di: Yazvinskyi, Yevhen, et al.
Pubblicazione: (2024)
di: Yazvinskyi, Yevhen, et al.
Pubblicazione: (2024)
Quantifying the Energy Consumption and Carbon Emissions of LLM Inference via Simulations
di: Özcan, Miray, et al.
Pubblicazione: (2025)
di: Özcan, Miray, et al.
Pubblicazione: (2025)
Energy-Aware Workflow Execution: An Overview of Techniques for Saving Energy and Emissions in Scientific Compute Clusters
di: Thamsen, Lauritz, et al.
Pubblicazione: (2025)
di: Thamsen, Lauritz, et al.
Pubblicazione: (2025)
A Systematic Evaluation of the Potential of Carbon-Aware Execution for Scientific Workflows
di: West, Kathleen, et al.
Pubblicazione: (2025)
di: West, Kathleen, et al.
Pubblicazione: (2025)
Optimizing Microgrid Composition for Sustainable Data Centers
di: Irion, Julius, et al.
Pubblicazione: (2025)
di: Irion, Julius, et al.
Pubblicazione: (2025)
Learning Process Energy Profiles from Node-Level Power Data
di: Bader, Jonathan, et al.
Pubblicazione: (2025)
di: Bader, Jonathan, et al.
Pubblicazione: (2025)
WOW: Workflow-Aware Data Movement and Task Scheduling for Dynamic Scientific Workflows
di: Lehmann, Fabian, et al.
Pubblicazione: (2025)
di: Lehmann, Fabian, et al.
Pubblicazione: (2025)
Performance Optimization in Stream Processing Systems: Experiment-Driven Configuration Tuning for Kafka Streams
di: Chen, David, et al.
Pubblicazione: (2026)
di: Chen, David, et al.
Pubblicazione: (2026)
Ponder: Online Prediction of Task Memory Requirements for Scientific Workflows
di: Lehmann, Fabian, et al.
Pubblicazione: (2024)
di: Lehmann, Fabian, et al.
Pubblicazione: (2024)
Resource Optimization with MPI Process Malleability for Dynamic Workloads in HPC Clusters
di: Iserte, Sergio, et al.
Pubblicazione: (2025)
di: Iserte, Sergio, et al.
Pubblicazione: (2025)
Vessim: A Testbed for Carbon-Aware Applications and Systems
di: Wiesner, Philipp, et al.
Pubblicazione: (2023)
di: Wiesner, Philipp, et al.
Pubblicazione: (2023)
Justin: Hybrid CPU/Memory Elastic Scaling for Distributed Stream Processing
di: Schmitz, Donatien, et al.
Pubblicazione: (2025)
di: Schmitz, Donatien, et al.
Pubblicazione: (2025)
Diagonal Scaling: A Multi-Dimensional Resource Model and Optimization Framework for Distributed Databases
di: Abdullah, Shahir, et al.
Pubblicazione: (2025)
di: Abdullah, Shahir, et al.
Pubblicazione: (2025)
TD-Orch: Scalable Load-Balancing for Distributed Systems with Applications to Graph Processing
di: Zhao, Yiwei, et al.
Pubblicazione: (2025)
di: Zhao, Yiwei, et al.
Pubblicazione: (2025)
On Optimizing Resource Utilization in Distributed Connected Components
di: Esfahani, Mohsen Koohi
Pubblicazione: (2025)
di: Esfahani, Mohsen Koohi
Pubblicazione: (2025)
Performance Cost Tradeoffs in Intelligent Load Balancing for Multi Data Center Cloud Systems: From Static Policies to Adaptive Resource Distribution
di: Najafabadi, Saeid Aghasoleymani, et al.
Pubblicazione: (2025)
di: Najafabadi, Saeid Aghasoleymani, et al.
Pubblicazione: (2025)
Distributed Load Orchestration for Vision Computing in Multi-Access Edge Computing
di: Boing, Ricardo N., et al.
Pubblicazione: (2022)
di: Boing, Ricardo N., et al.
Pubblicazione: (2022)
Documenti analoghi
-
Daedalus: Self-Adaptive Horizontal Autoscaling for Resource Efficiency of Distributed Stream Processing Systems
di: Pfister, Benjamin J. J., et al.
Pubblicazione: (2024) -
Flora: Efficient Cloud Resource Selection for Big Data Processing via Job Classification
di: Will, Jonathan, et al.
Pubblicazione: (2025) -
Sizey: Memory-Efficient Execution of Scientific Workflow Tasks
di: Bader, Jonathan, et al.
Pubblicazione: (2024) -
Towards a Peer-to-Peer Data Distribution Layer for Efficient and Collaborative Resource Optimization of Distributed Dataflow Applications
di: Scheinert, Dominik, et al.
Pubblicazione: (2023) -
Predicting Dynamic Memory Requirements for Scientific Workflow Tasks
di: Bader, Jonathan, et al.
Pubblicazione: (2023)