RoTHP: Rotary Position Embedding-based Transformer Hawkes Process
Fuente:
arXiv
Salvato in:
| Autori principali: | Gao, Anningzhe, Dai, Shan |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Mamba Hawkes Process
di: Gao, Anningzhe, et al.
Pubblicazione: (2024)
di: Gao, Anningzhe, et al.
Pubblicazione: (2024)
Rotary Position Embedding for Vision Transformer
di: Heo, Byeongho, et al.
Pubblicazione: (2024)
di: Heo, Byeongho, et al.
Pubblicazione: (2024)
Rotary Positional Embeddings as Phase Modulation: Theoretical Bounds on the RoPE Base for Long-Context Transformers
di: Liu, Feilong
Pubblicazione: (2026)
di: Liu, Feilong
Pubblicazione: (2026)
Selective Rotary Position Embedding
di: Movahedi, Sajad, et al.
Pubblicazione: (2025)
di: Movahedi, Sajad, et al.
Pubblicazione: (2025)
CRoPE: Efficient Parametrization of Rotary Positional Embedding
di: Lou, Beicheng, et al.
Pubblicazione: (2026)
di: Lou, Beicheng, et al.
Pubblicazione: (2026)
Efficient Matrix Implementation for Rotary Position Embedding
di: Minqi, Chen, et al.
Pubblicazione: (2026)
di: Minqi, Chen, et al.
Pubblicazione: (2026)
WaveRoRA: Wavelet Rotary Route Attention for Multivariate Time Series Forecasting
di: Liang, Aobo, et al.
Pubblicazione: (2024)
di: Liang, Aobo, et al.
Pubblicazione: (2024)
Rotary Position Encodings for Graphs
di: Reid, Isaac, et al.
Pubblicazione: (2025)
di: Reid, Isaac, et al.
Pubblicazione: (2025)
The Rotary Position Embedding May Cause Dimension Inefficiency in Attention Heads for Long-Distance Retrieval
di: Chiang, Ting-Rui, et al.
Pubblicazione: (2025)
di: Chiang, Ting-Rui, et al.
Pubblicazione: (2025)
Rethinking RoPE: A Mathematical Blueprint for N-dimensional Positional Embedding
di: Liu, Haiping, et al.
Pubblicazione: (2025)
di: Liu, Haiping, et al.
Pubblicazione: (2025)
MrRoPE: Mixed-radix Rotary Position Embedding
di: Tian, Qingyuan, et al.
Pubblicazione: (2026)
di: Tian, Qingyuan, et al.
Pubblicazione: (2026)
Balancing Interpretability and Flexibility in Modeling Diagnostic Trajectories with an Embedded Neural Hawkes Process Model
di: Zhao, Yuankang, et al.
Pubblicazione: (2025)
di: Zhao, Yuankang, et al.
Pubblicazione: (2025)
Round and Round We Go! What makes Rotary Positional Encodings useful?
di: Barbero, Federico, et al.
Pubblicazione: (2024)
di: Barbero, Federico, et al.
Pubblicazione: (2024)
Diffusion MRI Transformer with a Diffusion Space Rotary Positional Embedding (D-RoPE)
di: Kung, Gustavo Chau Loo, et al.
Pubblicazione: (2026)
di: Kung, Gustavo Chau Loo, et al.
Pubblicazione: (2026)
Massively Parallel Exact Inference for Hawkes Processes
di: Raza, Ahmer, et al.
Pubblicazione: (2026)
di: Raza, Ahmer, et al.
Pubblicazione: (2026)
Modeling Patient Care Trajectories with Transformer Hawkes Processes
di: Pandey, Saumya, et al.
Pubblicazione: (2026)
di: Pandey, Saumya, et al.
Pubblicazione: (2026)
Rotary Masked Autoencoders are Versatile Learners
di: Zivanovic, Uros, et al.
Pubblicazione: (2025)
di: Zivanovic, Uros, et al.
Pubblicazione: (2025)
Hyper Hawkes Processes: Interpretable Models of Marked Temporal Point Processes
di: Boyd, Alex, et al.
Pubblicazione: (2025)
di: Boyd, Alex, et al.
Pubblicazione: (2025)
SPECTRE: Spectral Pre-training Embeddings with Cylindrical Temporal Rotary Position Encoding for Fine-Grained sEMG-Based Movement Decoding
di: Weng, Zihan, et al.
Pubblicazione: (2025)
di: Weng, Zihan, et al.
Pubblicazione: (2025)
Flexible Parametric Inference for Space-Time Hawkes Processes
di: Siviero, Emilia, et al.
Pubblicazione: (2024)
di: Siviero, Emilia, et al.
Pubblicazione: (2024)
VideoRoPE: What Makes for Good Video Rotary Position Embedding?
di: Wei, Xilin, et al.
Pubblicazione: (2025)
di: Wei, Xilin, et al.
Pubblicazione: (2025)
FishRoPE: Projective Rotary Position Embeddings for Omnidirectional Visual Perception
di: Ahuja, Rahul, et al.
Pubblicazione: (2026)
di: Ahuja, Rahul, et al.
Pubblicazione: (2026)
Circuit Complexity Bounds for RoPE-based Transformer Architecture
di: Chen, Bo, et al.
Pubblicazione: (2024)
di: Chen, Bo, et al.
Pubblicazione: (2024)
Position Information Emerges in Causal Transformers Without Positional Encodings via Similarity of Nearby Embeddings
di: Zuo, Chunsheng, et al.
Pubblicazione: (2024)
di: Zuo, Chunsheng, et al.
Pubblicazione: (2024)
Seamlessly Integrating Tree-Based Positional Embeddings into Transformer Models for Source Code Representation
di: Bartkowiak, Patryk, et al.
Pubblicazione: (2025)
di: Bartkowiak, Patryk, et al.
Pubblicazione: (2025)
Conjugate Bayesian Two-step Change Point Detection for Hawkes Process
di: Zhang, Zeyue, et al.
Pubblicazione: (2024)
di: Zhang, Zeyue, et al.
Pubblicazione: (2024)
APLOT: Robust Reward Modeling via Adaptive Preference Learning with Optimal Transport
di: Li, Zhuo, et al.
Pubblicazione: (2025)
di: Li, Zhuo, et al.
Pubblicazione: (2025)
Causal Structure Learning in Hawkes Processes with Complex Latent Confounder Networks
di: Jin, Songyao, et al.
Pubblicazione: (2025)
di: Jin, Songyao, et al.
Pubblicazione: (2025)
Granger Causal Inference in Multivariate Hawkes Processes by Minimum Message Length
di: Hlavackova-Schindler, Katerina, et al.
Pubblicazione: (2023)
di: Hlavackova-Schindler, Katerina, et al.
Pubblicazione: (2023)
RETO: A Rotary-Enhanced Transformer Operator for High-Fidelity Prediction of Automotive Aerodynamics
di: Zhang, Bojun, et al.
Pubblicazione: (2026)
di: Zhang, Bojun, et al.
Pubblicazione: (2026)
Modeling Discrete Coating Degradation Events via Hawkes Processes
di: Repasky, Matthew, et al.
Pubblicazione: (2025)
di: Repasky, Matthew, et al.
Pubblicazione: (2025)
RoBERTurk: Adjusting RoBERTa for Turkish
di: Tas, Nuri
Pubblicazione: (2024)
di: Tas, Nuri
Pubblicazione: (2024)
Spiral RoPE: Rotate Your Rotary Positional Embeddings in the 2D Plane
di: Liu, Haoyu, et al.
Pubblicazione: (2026)
di: Liu, Haoyu, et al.
Pubblicazione: (2026)
Learning Granger Causality from Instance-wise Self-attentive Hawkes Processes
di: Wu, Dongxia, et al.
Pubblicazione: (2024)
di: Wu, Dongxia, et al.
Pubblicazione: (2024)
A Representer Theorem for Hawkes Processes via Penalized Least Squares Minimization
di: Kim, Hideaki, et al.
Pubblicazione: (2025)
di: Kim, Hideaki, et al.
Pubblicazione: (2025)
SimHawNet: A Modified Hawkes Process for Temporal Network Simulation
di: Perez, Mathilde, et al.
Pubblicazione: (2022)
di: Perez, Mathilde, et al.
Pubblicazione: (2022)
A Nonparametric Discrete Hawkes Model with a Collapsed Gaussian-Process Prior
di: Brisley, Trinnhallen, et al.
Pubblicazione: (2025)
di: Brisley, Trinnhallen, et al.
Pubblicazione: (2025)
Rotary Offset Features in Large Language Models
di: Jonasson, André
Pubblicazione: (2025)
di: Jonasson, André
Pubblicazione: (2025)
Maximizing the Position Embedding for Vision Transformers with Global Average Pooling
di: Lee, Wonjun, et al.
Pubblicazione: (2025)
di: Lee, Wonjun, et al.
Pubblicazione: (2025)
Positional versus Symbolic Attention Heads: Learning Dynamics, RoPE Geometry, and Length Generalization
di: Urrutia, Felipe, et al.
Pubblicazione: (2026)
di: Urrutia, Felipe, et al.
Pubblicazione: (2026)
Documenti analoghi
-
Mamba Hawkes Process
di: Gao, Anningzhe, et al.
Pubblicazione: (2024) -
Rotary Position Embedding for Vision Transformer
di: Heo, Byeongho, et al.
Pubblicazione: (2024) -
Rotary Positional Embeddings as Phase Modulation: Theoretical Bounds on the RoPE Base for Long-Context Transformers
di: Liu, Feilong
Pubblicazione: (2026) -
Selective Rotary Position Embedding
di: Movahedi, Sajad, et al.
Pubblicazione: (2025) -
CRoPE: Efficient Parametrization of Rotary Positional Embedding
di: Lou, Beicheng, et al.
Pubblicazione: (2026)