Buchumschlag

DE$^3$-BERT: Distance-Enhanced Early Exiting for BERT based on Prototypical Networks

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	He, Jianing, Zhang, Qi, Ding, Weiping, Miao, Duoqian, Zhao, Jun, Hu, Liang, Cao, Longbing
Format:	Preprint
Veröffentlicht:	2024
Schlagworte:	Machine Learning Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

HuBERT-EE: Early Exiting HuBERT for Efficient Speech Recognition
von: Yoon, Ji Won, et al.
Veröffentlicht: (2022)

COSEE: Consistency-Oriented Signal-Based Early Exiting via Calibrated Sample Weighting Mechanism
von: He, Jianing, et al.
Veröffentlicht: (2024)

Improving Prediction Certainty Estimation for Reliable Early Exiting via Null Space Projection
von: He, Jianing, et al.
Veröffentlicht: (2025)

MaxPoolBERT: Enhancing BERT Classification via Layer- and Token-Wise Aggregation
von: Behrendt, Maike, et al.
Veröffentlicht: (2025)

CEEBERT: Cross-Domain Inference in Early Exit BERT
von: Bajpai, Divya Jyoti, et al.
Veröffentlicht: (2024)

Granular-Balls based Fuzzy Twin Support Vector Machine for Classification
von: Zhao, Lixi, et al.
Veröffentlicht: (2024)

A Comprehensive Approach to Misspelling Correction with BERT and Levenshtein Distance
von: Naziri, Amirreza, et al.
Veröffentlicht: (2024)

An investigation of structures responsible for gender bias in BERT and DistilBERT
von: Leteno, Thibaud, et al.
Veröffentlicht: (2024)

Enhancing TinyBERT for Financial Sentiment Analysis Using GPT-Augmented FinBERT Distillation
von: Thomas, Graison Jos
Veröffentlicht: (2024)

MedicalBERT: enhancing biomedical natural language processing using pretrained BERT-based model
von: Reddy, K. Sahit, et al.
Veröffentlicht: (2025)

ColBERT: Using BERT Sentence Embedding in Parallel Neural Networks for Computational Humor
von: Annamoradnejad, Issa, et al.
Veröffentlicht: (2020)

Research on the Application of Deep Learning-based BERT Model in Sentiment Analysis
von: Wu, Yichao, et al.
Veröffentlicht: (2024)

MenakBERT -- Hebrew Diacriticizer
von: Cohen, Ido, et al.
Veröffentlicht: (2024)

Empowering Interdisciplinary Research with BERT-Based Models: An Approach Through SciBERT-CNN with Topic Modeling
von: Likhareva, Darya, et al.
Veröffentlicht: (2024)

MelHuBERT: A simplified HuBERT on Mel spectrograms
von: Lin, Tzu-Quan, et al.
Veröffentlicht: (2022)

GottBERT: a pure German Language Model
von: Scheible, Raphael, et al.
Veröffentlicht: (2020)

Weight-Inherited Distillation for Task-Agnostic BERT Compression
von: Wu, Taiqiang, et al.
Veröffentlicht: (2023)

Enhancing BERT Fine-Tuning for Sentiment Analysis in Lower-Resourced Languages
von: Kubík, Jozef, et al.
Veröffentlicht: (2025)

Deep Learning for Medical Text Processing: BERT Model Fine-Tuning and Comparative Study
von: Hu, Jiacheng, et al.
Veröffentlicht: (2024)

Graph Memory Learning: Imitating Lifelong Remembering and Forgetting of Brain Networks
von: Miao, Jiaxing, et al.
Veröffentlicht: (2024)

BERT Learns (and Teaches) Chemistry
von: Payne, Josh, et al.
Veröffentlicht: (2020)

Energy and Carbon Considerations of Fine-Tuning BERT
von: Wang, Xiaorong, et al.
Veröffentlicht: (2023)

Feature Structure Distillation with Centered Kernel Alignment in BERT Transferring
von: Jung, Hee-Jun, et al.
Veröffentlicht: (2022)

Enhancing Adversarial Text Attacks on BERT Models with Projected Gradient Descent
von: Waghela, Hetvi, et al.
Veröffentlicht: (2024)

Kangaroo: Lossless Self-Speculative Decoding via Double Early Exiting
von: Liu, Fangcheng, et al.
Veröffentlicht: (2024)

LakotaBERT: A Transformer-based Model for Low Resource Lakota Language
von: Parankusham, Kanishka, et al.
Veröffentlicht: (2025)

Benchmarking BERT-based Models for Sentence-level Topic Classification in Nepali Language
von: Karki, Nischal, et al.
Veröffentlicht: (2026)

A BERT-based Hierarchical Classification Model with Applications in Chinese Commodity Classification
von: Liu, Kun, et al.
Veröffentlicht: (2025)

MahaParaphrase: A Marathi Paraphrase Detection Corpus and BERT-based Models
von: Jadhav, Suramya, et al.
Veröffentlicht: (2025)

ProtoBERT-LoRA: Parameter-Efficient Prototypical Finetuning for Immunotherapy Study Identification
von: Zhang, Shijia, et al.
Veröffentlicht: (2025)

Preserving Empirical Probabilities in BERT for Small-sample Clinical Entity Recognition
von: Rehman, Abdul, et al.
Veröffentlicht: (2024)

A Contextualized BERT model for Knowledge Graph Completion
von: Gul, Haji, et al.
Veröffentlicht: (2024)

Sarcasm Detection in Tweets with BERT and GloVe Embeddings
von: Khatri, Akshay, et al.
Veröffentlicht: (2020)

From BERT to Qwen: Hate Detection across architectures
von: Mon, Ariadna, et al.
Veröffentlicht: (2025)

Breaking MLPerf Training: A Case Study on Optimizing BERT
von: Kim, Yongdeok, et al.
Veröffentlicht: (2024)

AxBERT: An Interpretable Chinese Spelling Correction Method Driven by Associative Knowledge Network
von: Wang, Fanyu, et al.
Veröffentlicht: (2025)

BERT-LID: Leveraging BERT to Improve Spoken Language Identification
von: Nie, Yuting, et al.
Veröffentlicht: (2022)

Pre-training technique to localize medical BERT and enhance biomedical BERT
von: Wada, Shoya, et al.
Veröffentlicht: (2020)

ThreatCrawl: A BERT-based Focused Crawler for the Cybersecurity Domain
von: Kuehn, Philipp, et al.
Veröffentlicht: (2023)

Patent Language Model Pretraining with ModernBERT
von: Yousefiramandi, Amirhossein, et al.
Veröffentlicht: (2025)