Range-aware Positional Encoding via High-order Pretraining: Theory and Practice
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Nguyen, Viet Anh, Ngo, Nhat Khang, Hy, Truong Son |
|---|---|
| Format: | Preprint |
| Publié: |
2024
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
GROOT: Effective Design of Biological Sequences with Limited Experimental Data
par: Tran, Thanh V. T., et autres
Publié: (2024)
par: Tran, Thanh V. T., et autres
Publié: (2024)
A Wearable Device Dataset for Mental Health Assessment Using Laser Doppler Flowmetry and Fluorescence Spectroscopy Sensors
par: Nguyen, Minh Ngoc, et autres
Publié: (2025)
par: Nguyen, Minh Ngoc, et autres
Publié: (2025)
How Homogenizing the Channel-wise Magnitude Can Enhance EEG Classification Model?
par: Ngo, Huyen, et autres
Publié: (2024)
par: Ngo, Huyen, et autres
Publié: (2024)
Alpha-RF: Automated RF-Filter-Circuit Design with Neural Simulator and Reinforcement Learning
par: Tran, Nhat, et autres
Publié: (2026)
par: Tran, Nhat, et autres
Publié: (2026)
Revisiting the Disequilibrium Issues in Tackling Heart Disease Classification Tasks
par: Hoang, Thao, et autres
Publié: (2024)
par: Hoang, Thao, et autres
Publié: (2024)
Learning Graph from Smooth Signals under Partial Observation: A Robustness Analysis
par: Nguyen, Hoang-Son, et autres
Publié: (2025)
par: Nguyen, Hoang-Son, et autres
Publié: (2025)
Herglotz-NET: Implicit Neural Representation of Spherical Data with Harmonic Positional Encoding
par: Hanon, Théo, et autres
Publié: (2025)
par: Hanon, Théo, et autres
Publié: (2025)
UWB TDoA Error Correction using Transformers: Patching and Positional Encoding Strategies
par: Coppens, Dieter, et autres
Publié: (2025)
par: Coppens, Dieter, et autres
Publié: (2025)
SoK: Behind the Accuracy of Complex Human Activity Recognition Using Deep Learning
par: Nguyen, Duc-Anh, et autres
Publié: (2024)
par: Nguyen, Duc-Anh, et autres
Publié: (2024)
Beyond Sinusoids: A Morlet Wavelet Framework for Transformer Positional Encoding
par: Zeris, Athanasios
Publié: (2026)
par: Zeris, Athanasios
Publié: (2026)
Data Normalization Strategies for EEG Deep Learning
par: Truong, Dung, et autres
Publié: (2025)
par: Truong, Dung, et autres
Publié: (2025)
Token Encoding for Semantic Recovery
par: Hu, Jingzhi, et autres
Publié: (2026)
par: Hu, Jingzhi, et autres
Publié: (2026)
Highly Efficient Direct Analytics on Semantic-aware Time Series Data Compression
par: Sun, Guoyou, et autres
Publié: (2025)
par: Sun, Guoyou, et autres
Publié: (2025)
Energy-Gated Attention and Wavelet Positional Encoding: Complementary Inductive Biases for Transformer Attention
par: Zeris, Athanasios
Publié: (2026)
par: Zeris, Athanasios
Publié: (2026)
Simplicity is Key: An Unsupervised Pretraining Approach for Sparse Radio Channels
par: Ott, Jonathan, et autres
Publié: (2025)
par: Ott, Jonathan, et autres
Publié: (2025)
FaultFormer: Pretraining Transformers for Adaptable Bearing Fault Classification
par: Zhou, Anthony, et autres
Publié: (2023)
par: Zhou, Anthony, et autres
Publié: (2023)
EEG-Language Pretraining for Highly Label-Efficient Clinical Phenotyping
par: Gijsen, Sam, et autres
Publié: (2024)
par: Gijsen, Sam, et autres
Publié: (2024)
Advances in Protein Representation Learning: Methods, Applications, and Future Directions
par: Nguyen, Viet Thanh Duy, et autres
Publié: (2025)
par: Nguyen, Viet Thanh Duy, et autres
Publié: (2025)
Comparison of Autoencoder Encodings for ECG Representation in Downstream Prediction Tasks
par: Harvey, Christopher J., et autres
Publié: (2024)
par: Harvey, Christopher J., et autres
Publié: (2024)
Continual Quantum Architecture Search with Tensor-Train Encoding: Theory and Applications to Signal Processing
par: Qi, Jun, et autres
Publié: (2026)
par: Qi, Jun, et autres
Publié: (2026)
Multilinear Kernel Regression and Imputation via Manifold Learning
par: Nguyen, Duc Thien, et autres
Publié: (2024)
par: Nguyen, Duc Thien, et autres
Publié: (2024)
An Unobtrusive and Lightweight Ear-worn System for Continuous Epileptic Seizure Detection
par: Aziz, Abdul, et autres
Publié: (2024)
par: Aziz, Abdul, et autres
Publié: (2024)
E(3)-Equivariant Mesh Neural Networks
par: Trang, Thuan, et autres
Publié: (2024)
par: Trang, Thuan, et autres
Publié: (2024)
Learning Regionalization using Accurate Spatial Cost Gradients within a Differentiable High-Resolution Hydrological Model: Application to the French Mediterranean Region
par: Huynh, Ngo Nghi Truyen, et autres
Publié: (2023)
par: Huynh, Ngo Nghi Truyen, et autres
Publié: (2023)
Graph Transfer Learning via Shared Latent Geometry: Theory and Applications
par: Wu, Tong, et autres
Publié: (2026)
par: Wu, Tong, et autres
Publié: (2026)
Towards On-Device Learning and Reconfigurable Hardware Implementation for Encoded Single-Photon Signal Processing
par: Zang, Zhenya, et autres
Publié: (2025)
par: Zang, Zhenya, et autres
Publié: (2025)
Latency-aware Human-in-the-Loop Reinforcement Learning for Semantic Communications
par: Li, Peizheng, et autres
Publié: (2026)
par: Li, Peizheng, et autres
Publié: (2026)
Cross-platform Smartphone Positioning at Museums
par: Ferrato, Alessio, et autres
Publié: (2025)
par: Ferrato, Alessio, et autres
Publié: (2025)
Online Graph Topology Learning via Time-Vertex Adaptive Filters: From Theory to Cardiac Fibrillation
par: Jenkins, Alexander, et autres
Publié: (2024)
par: Jenkins, Alexander, et autres
Publié: (2024)
Kernel Regression of Multi-Way Data via Tensor Trains with Hadamard Overparametrization: The Dynamic Graph Flow Case
par: Nguyen, Duc Thien, et autres
Publié: (2025)
par: Nguyen, Duc Thien, et autres
Publié: (2025)
TSRNet: Simple Framework for Real-time ECG Anomaly Detection with Multimodal Time and Spectrogram Restoration Network
par: Bui, Nhat-Tan, et autres
Publié: (2023)
par: Bui, Nhat-Tan, et autres
Publié: (2023)
Chemistry-aware battery degradation prediction under simulated real-world cyclic protocols
par: Li, Yuqi, et autres
Publié: (2025)
par: Li, Yuqi, et autres
Publié: (2025)
Boundary-aware Prototype-driven Adversarial Alignment for Cross-Corpus EEG Emotion Recognition
par: Li, Guangli, et autres
Publié: (2026)
par: Li, Guangli, et autres
Publié: (2026)
ISDNN: A Deep Neural Network for Channel Estimation in Massive MIMO systems
par: Son, Do Hai, et autres
Publié: (2024)
par: Son, Do Hai, et autres
Publié: (2024)
High-Resolution Range Profile Classifiers Require Aspect-Angle Awareness
par: Brient, Edwyn, et autres
Publié: (2026)
par: Brient, Edwyn, et autres
Publié: (2026)
On the Application of Deep Learning for Precise Indoor Positioning in 6G
par: Kotturi, Sai Prasanth, et autres
Publié: (2024)
par: Kotturi, Sai Prasanth, et autres
Publié: (2024)
Adaptive Learning Strategies for AoA-Based Outdoor Localization: A Comprehensive Framework
par: Trinh-Nguyen, Bac, et autres
Publié: (2026)
par: Trinh-Nguyen, Bac, et autres
Publié: (2026)
Multi-modal Data based Semi-Supervised Learning for Vehicle Positioning
par: Huan, Ouwen, et autres
Publié: (2024)
par: Huan, Ouwen, et autres
Publié: (2024)
Enhancing Contrastive Learning-based Electrocardiogram Pretrained Model with Patient Memory Queue
par: Sun, Xiaoyu, et autres
Publié: (2025)
par: Sun, Xiaoyu, et autres
Publié: (2025)
Autoencoder for Position-Assisted Beam Prediction in mmWave ISAC Systems
par: El-Banna, Ahmad A. Aziz, et autres
Publié: (2025)
par: El-Banna, Ahmad A. Aziz, et autres
Publié: (2025)
Documents similaires
-
GROOT: Effective Design of Biological Sequences with Limited Experimental Data
par: Tran, Thanh V. T., et autres
Publié: (2024) -
A Wearable Device Dataset for Mental Health Assessment Using Laser Doppler Flowmetry and Fluorescence Spectroscopy Sensors
par: Nguyen, Minh Ngoc, et autres
Publié: (2025) -
How Homogenizing the Channel-wise Magnitude Can Enhance EEG Classification Model?
par: Ngo, Huyen, et autres
Publié: (2024) -
Alpha-RF: Automated RF-Filter-Circuit Design with Neural Simulator and Reinforcement Learning
par: Tran, Nhat, et autres
Publié: (2026) -
Revisiting the Disequilibrium Issues in Tackling Heart Disease Classification Tasks
par: Hoang, Thao, et autres
Publié: (2024)