Buchumschlag

Scalable Precise Computation of Shannon Entropy

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Lai, Yong, Tong, Haolong, Xu, Zhenghang, Yin, Minghao
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Artificial Intelligence Information Theory
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Limit of the Maximum Random Permutation Set Entropy
von: Zhou, Jiefeng, et al.
Veröffentlicht: (2024)

LLMs as Noisy Channels: A Shannon Perspective on Model Capacity and Scaling Laws
von: Ouyang, Xu, et al.
Veröffentlicht: (2026)

Spatial Computing Communications for Multi-User Virtual Reality in Distributed Mobile Edge Computing Network
von: Xu, Caolu, et al.
Veröffentlicht: (2025)

Diffusion Model-Based Data Synthesis Aided Federated Semi-Supervised Learning
von: Wang, Zhongwei, et al.
Veröffentlicht: (2025)

Two Birds with One Stone: Multi-Task Semantic Communications Systems over Relay Channel
von: Cao, Yujie, et al.
Veröffentlicht: (2024)

Computation Rate Maximization for Wireless Powered Edge Computing With Multi-User Cooperation
von: Li, Yang, et al.
Veröffentlicht: (2024)

Channel Knowledge Map Construction via Guided Flow Matching
von: Huang, Ziyu, et al.
Veröffentlicht: (2026)

Deep DNA Storage: Scalable and Robust DNA Storage via Coding Theory and Deep Learning
von: Bar-Lev, Daniella, et al.
Veröffentlicht: (2021)

Integrated Sensing-Communication-Computation for Edge Artificial Intelligence
von: Wen, Dingzhu, et al.
Veröffentlicht: (2023)

Information Physics of Intelligence: Unifying Logical Depth and Entropy under Thermodynamic Constraints
von: Xu, Jianfeng, et al.
Veröffentlicht: (2025)

Persistent Entropy as a Detector of Phase Transitions
von: Rucco, Matteo
Veröffentlicht: (2026)

Fed-PELAD: Communication-Efficient Federated Learning for Massive MIMO CSI Feedback with Personalized Encoders and a LoRA-Adapted Shared Decoder
von: Zhou, Yixiang, et al.
Veröffentlicht: (2025)

Successive Refinement in Large-Scale Computation: Advancing Model Inference Applications
von: Esfahanizadeh, Homa, et al.
Veröffentlicht: (2024)

Random Walk in Random Permutation Set Theory
von: Zhou, Jiefeng, et al.
Veröffentlicht: (2024)

On the Rate-Distortion-Complexity Tradeoff for Semantic Communication
von: Chai, Jingxuan, et al.
Veröffentlicht: (2026)

Entropy-informed Decoding: Adaptive Information-Driven Branching
von: Evans, Benjamin Patrick, et al.
Veröffentlicht: (2026)

Learning in Convolutional Neural Networks Accelerated by Transfer Entropy
von: Moldovan, Adrian, et al.
Veröffentlicht: (2024)

Multi-User Semantic Fusion for Semantic Communications over Degraded Broadcast Channels
von: Wu, Tong, et al.
Veröffentlicht: (2024)

Scalable Hierarchical Over-the-Air Federated Learning
von: Azimi-Abarghouyi, Seyed Mohammad, et al.
Veröffentlicht: (2022)

Optimizing Learned Image Compression on Scalar and Entropy-Constraint Quantization
von: Borzechowski, Florian, et al.
Veröffentlicht: (2025)

A Distance Measure for Random Permutation Set: From the Layer-2 Belief Structure Perspective
von: Cheng, Ruolan, et al.
Veröffentlicht: (2025)

MESSY Estimation: Maximum-Entropy based Stochastic and Symbolic densitY Estimation
von: Tohme, Tony, et al.
Veröffentlicht: (2023)

Scalable Exploration via Ensemble++
von: Li, Yingru, et al.
Veröffentlicht: (2024)

Informational Embodiment: Computational role of information structure in codes and robots
von: Pitti, Alexandre, et al.
Veröffentlicht: (2024)

LLM Agent for Hyper-Parameter Optimization
von: Wang, Wanzhe, et al.
Veröffentlicht: (2025)

Resource Management for Low-latency Cooperative Fine-tuning of Foundation Models at the Network Edge
von: Wu, Hai, et al.
Veröffentlicht: (2024)

A Survey on Integrated Sensing, Communication, and Computation
von: Wen, Dingzhu, et al.
Veröffentlicht: (2024)

Faithful and Accurate Self-Attention Attribution for Message Passing Neural Networks via the Computation Tree Viewpoint
von: Shin, Yong-Min, et al.
Veröffentlicht: (2024)

A Novel Double Pruning method for Imbalanced Data using Information Entropy and Roulette Wheel Selection for Breast Cancer Diagnosis
von: Bacha, Soufiane, et al.
Veröffentlicht: (2025)

Trust Region Masking for Long-Horizon LLM Reinforcement Learning
von: Li, Yingru, et al.
Veröffentlicht: (2025)

MambaJSCC: Adaptive Deep Joint Source-Channel Coding with Generalized State Space Model
von: Wu, Tong, et al.
Veröffentlicht: (2024)

Way to Build Native AI-driven 6G Air Interface: Principles, Roadmap, and Outlook
von: Zhang, Ping, et al.
Veröffentlicht: (2025)

The Epistemic Support-Point Filter: Jaynesian Maximum Entropy Meets Popperian Falsification
von: Jah, Moriba Kemessia
Veröffentlicht: (2026)

Shannon invariants: A scalable approach to information decomposition
von: Gutknecht, Aaron J., et al.
Veröffentlicht: (2025)

Digital Twin Channel-Enabled Online Resource Allocation for 6G: Principle, Architecture and Application
von: Li, Tongjie, et al.
Veröffentlicht: (2025)

Entropy, concentration, and learning: a statistical mechanics primer
von: Balsubramani, Akshay
Veröffentlicht: (2024)

Know Your Limits: Entropy Estimation Modeling for Compression and Generalization
von: Badger, Benjamin L., et al.
Veröffentlicht: (2025)

Turbo-CF: Matrix Decomposition-Free Graph Filtering for Fast Recommendation
von: Park, Jin-Duk, et al.
Veröffentlicht: (2024)

Semantic Rate Distortion and Posterior Design: Compute Constraints, Multimodality, and Strategic Inference
von: Akyol, Emrah
Veröffentlicht: (2026)

Compute-Update Federated Learning: A Lattice Coding Approach Over-the-Air
von: Azimi-Abarghouyi, Seyed Mohammad, et al.
Veröffentlicht: (2024)