HAD: Hybrid Architecture Distillation Outperforms Teacher in Genomic Sequence Modeling
Fuente:
arXiv
Salvato in:
| Autori principali: | Yang, Hexiong, Chen, Mingrui, Huang, Huaibo, Duan, Junxian, Cao, Jie, Zhou, Zhen, He, Ran |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Lyra: An Efficient and Expressive Subquadratic Architecture for Modeling Biological Sequences
di: Ramesh, Krithik, et al.
Pubblicazione: (2025)
di: Ramesh, Krithik, et al.
Pubblicazione: (2025)
Contrastive Deep Learning for Variant Detection in Wastewater Genomic Sequencing
di: Chinda, Adele, et al.
Pubblicazione: (2025)
di: Chinda, Adele, et al.
Pubblicazione: (2025)
Extending Sequence Length is Not All You Need: Effective Integration of Multimodal Signals for Gene Expression Prediction
di: Yang, Zhao, et al.
Pubblicazione: (2026)
di: Yang, Zhao, et al.
Pubblicazione: (2026)
Enhancing Downstream Analysis in Genome Sequencing: Species Classification While Basecalling
di: Kodra, Riselda, et al.
Pubblicazione: (2025)
di: Kodra, Riselda, et al.
Pubblicazione: (2025)
Genome-Factory: A Library for Tuning, Deploying, and Interpreting Genomic Foundation Models
di: Wu, Weimin, et al.
Pubblicazione: (2025)
di: Wu, Weimin, et al.
Pubblicazione: (2025)
JanusDNA: A Powerful Bi-directional Hybrid DNA Foundation Model
di: Duan, Qihao, et al.
Pubblicazione: (2025)
di: Duan, Qihao, et al.
Pubblicazione: (2025)
Absorb & Escape: Overcoming Single Model Limitations in Generating Genomic Sequences
di: Li, Zehui, et al.
Pubblicazione: (2024)
di: Li, Zehui, et al.
Pubblicazione: (2024)
DNAMotifTokenizer: Towards Biologically Informed Tokenization of Genomic Sequences
di: Zhou, Xiaoxiao, et al.
Pubblicazione: (2025)
di: Zhou, Xiaoxiao, et al.
Pubblicazione: (2025)
How Private Are DNA Embeddings? Inverting Foundation Model Representations of Genomic Sequences
di: Ouaari, Sofiane, et al.
Pubblicazione: (2026)
di: Ouaari, Sofiane, et al.
Pubblicazione: (2026)
Cancer-inspired Genomics Mapper Model for the Generation of Synthetic DNA Sequences with Desired Genomics Signatures
di: Lazebnik, Teddy, et al.
Pubblicazione: (2023)
di: Lazebnik, Teddy, et al.
Pubblicazione: (2023)
SPACE: Your Genomic Profile Predictor is a Powerful DNA Foundation Model
di: Yang, Zhao, et al.
Pubblicazione: (2025)
di: Yang, Zhao, et al.
Pubblicazione: (2025)
Robust Machine Learning for Regulatory Sequence Modeling under Biological and Technical Distribution Shifts
di: Yang, Yiyao
Pubblicazione: (2026)
di: Yang, Yiyao
Pubblicazione: (2026)
GenBench: A Benchmarking Suite for Systematic Evaluation of Genomic Foundation Models
di: Liu, Zicheng, et al.
Pubblicazione: (2024)
di: Liu, Zicheng, et al.
Pubblicazione: (2024)
A Phylogenetic Approach to Genomic Language Modeling
di: Albors, Carlos, et al.
Pubblicazione: (2025)
di: Albors, Carlos, et al.
Pubblicazione: (2025)
A Misclassification Network-Based Method for Comparative Genomic Analysis
di: He, Wan, et al.
Pubblicazione: (2024)
di: He, Wan, et al.
Pubblicazione: (2024)
GenomeQA: Benchmarking General Large Language Models for Genome Sequence Understanding
di: Long, Weicai, et al.
Pubblicazione: (2026)
di: Long, Weicai, et al.
Pubblicazione: (2026)
Whole-Genome Phenotype Prediction with Machine Learning: Open Problems in Bacterial Genomics
di: James, Tamsin, et al.
Pubblicazione: (2025)
di: James, Tamsin, et al.
Pubblicazione: (2025)
Enhanced Gene Selection in Single-Cell Genomics: Pre-Filtering Synergy and Reinforced Optimization
di: Zhang, Weiliang, et al.
Pubblicazione: (2024)
di: Zhang, Weiliang, et al.
Pubblicazione: (2024)
Caduceus: Bi-Directional Equivariant Long-Range DNA Sequence Modeling
di: Schiff, Yair, et al.
Pubblicazione: (2024)
di: Schiff, Yair, et al.
Pubblicazione: (2024)
Statistical Linear Models in Virus Genomic Alignment-free Classification: Application to Hepatitis C Viruses
di: Remita, Amine M., et al.
Pubblicazione: (2019)
di: Remita, Amine M., et al.
Pubblicazione: (2019)
Model Decides How to Tokenize: Adaptive DNA Sequence Tokenization with MxDNA
di: Qiao, Lifeng, et al.
Pubblicazione: (2024)
di: Qiao, Lifeng, et al.
Pubblicazione: (2024)
Machine Learning-Based Genomic Linguistic Analysis (Gene Sequence Feature Learning): A Case Study on Predicting Heavy Metal Response Genes in Rice
di: Yang, Ruiqi, et al.
Pubblicazione: (2025)
di: Yang, Ruiqi, et al.
Pubblicazione: (2025)
PlantBiMoE: A Bidirectional Foundation Model with SparseMoE for Plant Genomes
di: Lin, Kepeng, et al.
Pubblicazione: (2025)
di: Lin, Kepeng, et al.
Pubblicazione: (2025)
DNA Sequence Classification with Compressors
di: Ozan, Şükrü
Pubblicazione: (2024)
di: Ozan, Şükrü
Pubblicazione: (2024)
MergeDNA: Context-aware Genome Modeling with Dynamic Tokenization through Token Merging
di: Li, Siyuan, et al.
Pubblicazione: (2025)
di: Li, Siyuan, et al.
Pubblicazione: (2025)
Multimodal 3D Genome Pre-training
di: Yang, Minghao, et al.
Pubblicazione: (2025)
di: Yang, Minghao, et al.
Pubblicazione: (2025)
Celler:A Genomic Language Model for Long-Tailed Single-Cell Annotation
di: Zhao, Huan, et al.
Pubblicazione: (2025)
di: Zhao, Huan, et al.
Pubblicazione: (2025)
D3LM: A Discrete DNA Diffusion Language Model for Bidirectional DNA Understanding and Generation
di: Yang, Zhao, et al.
Pubblicazione: (2026)
di: Yang, Zhao, et al.
Pubblicazione: (2026)
A SARS-CoV-2 Interaction Dataset and VHH Sequence Corpus for Antibody Language Models
di: Tsuruta, Hirofumi, et al.
Pubblicazione: (2024)
di: Tsuruta, Hirofumi, et al.
Pubblicazione: (2024)
scMamba: A Pre-Trained Model for Single-Nucleus RNA Sequencing Analysis in Neurodegenerative Disorders
di: Oh, Gyutaek, et al.
Pubblicazione: (2025)
di: Oh, Gyutaek, et al.
Pubblicazione: (2025)
Whole Genome Transformer for Gene Interaction Effects in Microbiome Habitat Specificity
di: Li, Zhufeng, et al.
Pubblicazione: (2024)
di: Li, Zhufeng, et al.
Pubblicazione: (2024)
VQDNA: Unleashing the Power of Vector Quantization for Multi-Species Genomic Sequence Modeling
di: Li, Siyuan, et al.
Pubblicazione: (2024)
di: Li, Siyuan, et al.
Pubblicazione: (2024)
EvoLen: Evolution-Guided Tokenization for DNA Language Model
di: Huang, Nan, et al.
Pubblicazione: (2026)
di: Huang, Nan, et al.
Pubblicazione: (2026)
Entropy, Disagreement, and the Limits of Foundation Models in Genomics
di: Rochkoulets, Maxime, et al.
Pubblicazione: (2026)
di: Rochkoulets, Maxime, et al.
Pubblicazione: (2026)
DuAL-Net: A Hybrid Framework for Alzheimer's Disease Prediction from Whole-Genome Sequencing via Local SNP Windows and Global Annotations
di: Lee, Eun Hye, et al.
Pubblicazione: (2025)
di: Lee, Eun Hye, et al.
Pubblicazione: (2025)
Explainable AI in Genomics: Transcription Factor Binding Site Prediction with Mixture of Experts
di: Tripathi, Aakash, et al.
Pubblicazione: (2025)
di: Tripathi, Aakash, et al.
Pubblicazione: (2025)
A Chromosome-level Assembly and Functional Genomic Resources for the Model Annelid Capitella teleta.
di: Davies, Billie E, et al.
Pubblicazione: (2026)
di: Davies, Billie E, et al.
Pubblicazione: (2026)
Quantifying Memorization and Privacy Risks in Genomic Language Models
di: Nemecek, Alexander, et al.
Pubblicazione: (2026)
di: Nemecek, Alexander, et al.
Pubblicazione: (2026)
Unlocking the Power of Multi-institutional Data: Integrating and Harmonizing Genomic Data Across Institutions
di: Chen, Yuan, et al.
Pubblicazione: (2024)
di: Chen, Yuan, et al.
Pubblicazione: (2024)
Embedding Is (Almost) All You Need: Retrieval-Augmented Inference for Generalizable Genomic Prediction Tasks
di: Datta, Nirjhor, et al.
Pubblicazione: (2025)
di: Datta, Nirjhor, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Lyra: An Efficient and Expressive Subquadratic Architecture for Modeling Biological Sequences
di: Ramesh, Krithik, et al.
Pubblicazione: (2025) -
Contrastive Deep Learning for Variant Detection in Wastewater Genomic Sequencing
di: Chinda, Adele, et al.
Pubblicazione: (2025) -
Extending Sequence Length is Not All You Need: Effective Integration of Multimodal Signals for Gene Expression Prediction
di: Yang, Zhao, et al.
Pubblicazione: (2026) -
Enhancing Downstream Analysis in Genome Sequencing: Species Classification While Basecalling
di: Kodra, Riselda, et al.
Pubblicazione: (2025) -
Genome-Factory: A Library for Tuning, Deploying, and Interpreting Genomic Foundation Models
di: Wu, Weimin, et al.
Pubblicazione: (2025)