Beyond Uniform Scaling: Exploring Depth Heterogeneity in Neural Architectures
Fuente:
arXiv
Gespeichert in:
| Hauptverfasser: | T, Akash Guna R., Chavan, Arnav, Gupta, Deepak |
|---|---|
| Format: | Preprint |
| Veröffentlicht: |
2024
|
| Schlagworte: | |
| Online-Zugang: | |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Ähnliche Einträge
Perception-Informed Neural Networks: Beyond Physics-Informed Neural Networks
von: Mazandarani, Mehran, et al.
Veröffentlicht: (2025)
von: Mazandarani, Mehran, et al.
Veröffentlicht: (2025)
Knowledge-aware Evolutionary Graph Neural Architecture Search
von: Wang, Chao, et al.
Veröffentlicht: (2024)
von: Wang, Chao, et al.
Veröffentlicht: (2024)
Evolution Meets Diffusion: Efficient Neural Architecture Generation
von: Zhou, Bingye, et al.
Veröffentlicht: (2025)
von: Zhou, Bingye, et al.
Veröffentlicht: (2025)
DGPO: RL-Steered Graph Diffusion for Neural Architecture Generation
von: Liuliakov, Aleksei, et al.
Veröffentlicht: (2026)
von: Liuliakov, Aleksei, et al.
Veröffentlicht: (2026)
A Learning-Based Cooperative Coevolution Framework for Heterogeneous Large-Scale Global Optimization
von: Qiu, Wenjie, et al.
Veröffentlicht: (2026)
von: Qiu, Wenjie, et al.
Veröffentlicht: (2026)
Evolution Strategies at Scale: LLM Fine-Tuning Beyond Reinforcement Learning
von: Qiu, Xin, et al.
Veröffentlicht: (2025)
von: Qiu, Xin, et al.
Veröffentlicht: (2025)
Neural Architecture Search using Particle Swarm and Ant Colony Optimization
von: Lankford, Séamus, et al.
Veröffentlicht: (2024)
von: Lankford, Séamus, et al.
Veröffentlicht: (2024)
SEval-NAS: A Search-Agnostic Evaluation for Neural Architecture Search
von: Mih, Atah Nuh, et al.
Veröffentlicht: (2026)
von: Mih, Atah Nuh, et al.
Veröffentlicht: (2026)
A Resource Model For Neural Scaling Law
von: Song, Jinyeop, et al.
Veröffentlicht: (2024)
von: Song, Jinyeop, et al.
Veröffentlicht: (2024)
SpikeNAS: A Fast Memory-Aware Neural Architecture Search Framework for Spiking Neural Network-based Embedded AI Systems
von: Putra, Rachmad Vidya Wicaksana, et al.
Veröffentlicht: (2024)
von: Putra, Rachmad Vidya Wicaksana, et al.
Veröffentlicht: (2024)
Hierarchical Self-Attention: Generalizing Neural Attention Mechanics to Multi-Scale Problems
von: Amizadeh, Saeed, et al.
Veröffentlicht: (2025)
von: Amizadeh, Saeed, et al.
Veröffentlicht: (2025)
Do Language Models Use Their Depth Efficiently?
von: Csordás, Róbert, et al.
Veröffentlicht: (2025)
von: Csordás, Róbert, et al.
Veröffentlicht: (2025)
STAR: Synthesis of Tailored Architectures
von: Thomas, Armin W., et al.
Veröffentlicht: (2024)
von: Thomas, Armin W., et al.
Veröffentlicht: (2024)
Understanding Transformer Optimization via Gradient Heterogeneity
von: Tomihari, Akiyoshi, et al.
Veröffentlicht: (2025)
von: Tomihari, Akiyoshi, et al.
Veröffentlicht: (2025)
A Transformer-based Neural Architecture Search Method
von: Wang, Shang, et al.
Veröffentlicht: (2025)
von: Wang, Shang, et al.
Veröffentlicht: (2025)
Memory Networks: Towards Fully Biologically Plausible Learning
von: Ruiz, Jacobo, et al.
Veröffentlicht: (2024)
von: Ruiz, Jacobo, et al.
Veröffentlicht: (2024)
MIDAS: Mosaic Input-Specific Differentiable Architecture Search
von: Subbotko, Konstanty
Veröffentlicht: (2026)
von: Subbotko, Konstanty
Veröffentlicht: (2026)
Fast PINN Eigensolvers via Biconvex Reformulation
von: Banderwaar, Akshay Sai, et al.
Veröffentlicht: (2025)
von: Banderwaar, Akshay Sai, et al.
Veröffentlicht: (2025)
Evolutionary Architecture Search through Grammar-Based Sequence Alignment
von: Martín, Adri Gómez, et al.
Veröffentlicht: (2025)
von: Martín, Adri Gómez, et al.
Veröffentlicht: (2025)
Neural Architecture Search for Quantum Autoencoders
von: Agha, Hibah, et al.
Veröffentlicht: (2025)
von: Agha, Hibah, et al.
Veröffentlicht: (2025)
Beyond Attention: Toward Machines with Intrinsic Higher Mental States
von: Adeel, Ahsan
Veröffentlicht: (2025)
von: Adeel, Ahsan
Veröffentlicht: (2025)
Sparsity Moves Computation: How FFN Architecture Reshapes Attention in Small Transformers
von: Smithline, Gabriel, et al.
Veröffentlicht: (2026)
von: Smithline, Gabriel, et al.
Veröffentlicht: (2026)
Memoria: Resolving Fateful Forgetting Problem through Human-Inspired Memory Architecture
von: Park, Sangjun, et al.
Veröffentlicht: (2023)
von: Park, Sangjun, et al.
Veröffentlicht: (2023)
Meta-Evolve: Continuous Robot Evolution for One-to-many Policy Transfer
von: Liu, Xingyu, et al.
Veröffentlicht: (2024)
von: Liu, Xingyu, et al.
Veröffentlicht: (2024)
Beyond Single-Model Optimization: Preserving Plasticity in Continual Reinforcement Learning
von: Lillo, Lute, et al.
Veröffentlicht: (2026)
von: Lillo, Lute, et al.
Veröffentlicht: (2026)
Probabilistic Neural Circuits
von: Martires, Pedro Zuidberg Dos
Veröffentlicht: (2024)
von: Martires, Pedro Zuidberg Dos
Veröffentlicht: (2024)
Neural Interpretable Reasoning
von: Barbiero, Pietro, et al.
Veröffentlicht: (2025)
von: Barbiero, Pietro, et al.
Veröffentlicht: (2025)
Exploring Layerwise Adversarial Robustness Through the Lens of t-SNE
von: Valentim, Inês, et al.
Veröffentlicht: (2024)
von: Valentim, Inês, et al.
Veröffentlicht: (2024)
Space-Time Continuous PDE Forecasting using Equivariant Neural Fields
von: Knigge, David M., et al.
Veröffentlicht: (2024)
von: Knigge, David M., et al.
Veröffentlicht: (2024)
LLS: Local Learning Rule for Deep Neural Networks Inspired by Neural Activity Synchronization
von: Apolinario, Marco Paul E., et al.
Veröffentlicht: (2024)
von: Apolinario, Marco Paul E., et al.
Veröffentlicht: (2024)
Restricted Bayesian Neural Network
von: Ganguly, Sourav, et al.
Veröffentlicht: (2024)
von: Ganguly, Sourav, et al.
Veröffentlicht: (2024)
Deep Oscillatory Neural Network
von: Rohan, Nurani Rajagopal, et al.
Veröffentlicht: (2024)
von: Rohan, Nurani Rajagopal, et al.
Veröffentlicht: (2024)
Time Elastic Neural Networks
von: Marteau, Pierre-François
Veröffentlicht: (2024)
von: Marteau, Pierre-François
Veröffentlicht: (2024)
Causal Learning with Neural Assemblies
von: Kopadi, Evangelia, et al.
Veröffentlicht: (2026)
von: Kopadi, Evangelia, et al.
Veröffentlicht: (2026)
Polysemanticity and Capacity in Neural Networks
von: Scherlis, Adam, et al.
Veröffentlicht: (2022)
von: Scherlis, Adam, et al.
Veröffentlicht: (2022)
Deep Neural Regression Collapse
von: Rangamani, Akshay, et al.
Veröffentlicht: (2026)
von: Rangamani, Akshay, et al.
Veröffentlicht: (2026)
Experimental Evaluation of Machine Learning Models for Goal-oriented Customer Service Chatbot with Pipeline Architecture
von: Isa, Nurul Ain Nabilah Mohd, et al.
Veröffentlicht: (2024)
von: Isa, Nurul Ain Nabilah Mohd, et al.
Veröffentlicht: (2024)
High Performance Im2win and Direct Convolutions using Three Tensor Layouts on SIMD Architectures
von: Fu, Xiang, et al.
Veröffentlicht: (2024)
von: Fu, Xiang, et al.
Veröffentlicht: (2024)
Continuous Spiking Graph Neural Networks
von: Yin, Nan, et al.
Veröffentlicht: (2024)
von: Yin, Nan, et al.
Veröffentlicht: (2024)
Feedback Favors the Generalization of Neural ODEs
von: Jia, Jindou, et al.
Veröffentlicht: (2024)
von: Jia, Jindou, et al.
Veröffentlicht: (2024)
Ähnliche Einträge
-
Perception-Informed Neural Networks: Beyond Physics-Informed Neural Networks
von: Mazandarani, Mehran, et al.
Veröffentlicht: (2025) -
Knowledge-aware Evolutionary Graph Neural Architecture Search
von: Wang, Chao, et al.
Veröffentlicht: (2024) -
Evolution Meets Diffusion: Efficient Neural Architecture Generation
von: Zhou, Bingye, et al.
Veröffentlicht: (2025) -
DGPO: RL-Steered Graph Diffusion for Neural Architecture Generation
von: Liuliakov, Aleksei, et al.
Veröffentlicht: (2026) -
A Learning-Based Cooperative Coevolution Framework for Heterogeneous Large-Scale Global Optimization
von: Qiu, Wenjie, et al.
Veröffentlicht: (2026)