Adapting LLMs to Hebrew: Unveiling DictaLM 2.0 with Enhanced Vocabulary and Instruction Capabilities
Fuente:
arXiv
Salvato in:
| Autori principali: | Shmidman, Shaltiel, Shmidman, Avi, Cohen, Amir DN, Koppel, Moshe |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Dicta-LM 3.0: Advancing The Frontier of Hebrew Sovereign LLMs
di: Shmidman, Shaltiel, et al.
Pubblicazione: (2026)
di: Shmidman, Shaltiel, et al.
Pubblicazione: (2026)
NeoDictaBERT: Pushing the Frontier of BERT models for Hebrew
di: Shmidman, Shaltiel, et al.
Pubblicazione: (2025)
di: Shmidman, Shaltiel, et al.
Pubblicazione: (2025)
MRL Parsing Without Tears: The Case of Hebrew
di: Shmidman, Shaltiel, et al.
Pubblicazione: (2024)
di: Shmidman, Shaltiel, et al.
Pubblicazione: (2024)
Do Pretrained Contextual Language Models Distinguish between Hebrew Homograph Analyses?
di: Shmidman, Avi, et al.
Pubblicazione: (2024)
di: Shmidman, Avi, et al.
Pubblicazione: (2024)
MsBERT: A New Model for the Reconstruction of Lacunae in Hebrew Manuscripts
di: Shmidman, Avi, et al.
Pubblicazione: (2025)
di: Shmidman, Avi, et al.
Pubblicazione: (2025)
Splintering Nonconcatenative Languages for Better Tokenization
di: Gazit, Bar, et al.
Pubblicazione: (2025)
di: Gazit, Bar, et al.
Pubblicazione: (2025)
Diversity Over Quantity: A Lesson From Few Shot Relation Classification
di: Cohen, Amir DN, et al.
Pubblicazione: (2024)
di: Cohen, Amir DN, et al.
Pubblicazione: (2024)
Learning to Reason: Training LLMs with GPT-OSS or DeepSeek R1 Reasoning Traces
di: Shmidman, Shaltiel, et al.
Pubblicazione: (2025)
di: Shmidman, Shaltiel, et al.
Pubblicazione: (2025)
HEBATRON: A Hebrew-Specialized Open-Weight Mixture-of-Experts Language Model
di: Kayzer, Noam, et al.
Pubblicazione: (2026)
di: Kayzer, Noam, et al.
Pubblicazione: (2026)
HeQ: a Large and Diverse Hebrew Reading Comprehension Benchmark
di: Cohen, Amir DN, et al.
Pubblicazione: (2025)
di: Cohen, Amir DN, et al.
Pubblicazione: (2025)
Knesset-DictaBERT: A Hebrew Language Model for Parliamentary Proceedings
di: Goldin, Gili, et al.
Pubblicazione: (2024)
di: Goldin, Gili, et al.
Pubblicazione: (2024)
IQ Test for LLMs: An Evaluation Framework for Uncovering Core Skills in LLMs
di: Maimon, Aviya, et al.
Pubblicazione: (2025)
di: Maimon, Aviya, et al.
Pubblicazione: (2025)
StyleAdaptedLM: Enhancing Instruction Following Models with Efficient Stylistic Transfer
di: Ramu, Pritika, et al.
Pubblicazione: (2025)
di: Ramu, Pritika, et al.
Pubblicazione: (2025)
Measuring the Effect of Transcription Noise on Downstream Language Understanding Tasks
di: Shapira, Ori, et al.
Pubblicazione: (2025)
di: Shapira, Ori, et al.
Pubblicazione: (2025)
MenakBERT -- Hebrew Diacriticizer
di: Cohen, Ido, et al.
Pubblicazione: (2024)
di: Cohen, Ido, et al.
Pubblicazione: (2024)
Arabic Stable LM: Adapting Stable LM 2 1.6B to Arabic
di: Alyafeai, Zaid, et al.
Pubblicazione: (2024)
di: Alyafeai, Zaid, et al.
Pubblicazione: (2024)
BidirLM: From Text to Omnimodal Bidirectional Encoders by Adapting and Composing Causal LLMs
di: Boizard, Nicolas, et al.
Pubblicazione: (2026)
di: Boizard, Nicolas, et al.
Pubblicazione: (2026)
Format-Adapter: Improving Reasoning Capability of LLMs by Adapting Suitable Format
di: Wang, Dingzirui, et al.
Pubblicazione: (2025)
di: Wang, Dingzirui, et al.
Pubblicazione: (2025)
Description-Based Text Similarity
di: Ravfogel, Shauli, et al.
Pubblicazione: (2023)
di: Ravfogel, Shauli, et al.
Pubblicazione: (2023)
From Text to Emotion: Unveiling the Emotion Annotation Capabilities of LLMs
di: Niu, Minxue, et al.
Pubblicazione: (2024)
di: Niu, Minxue, et al.
Pubblicazione: (2024)
Unveiling Instruction-Specific Neurons & Experts: An Analytical Framework for LLM's Instruction-Following Capabilities
di: Zhang, Junyan, et al.
Pubblicazione: (2025)
di: Zhang, Junyan, et al.
Pubblicazione: (2025)
D-Nikud: Enhancing Hebrew Diacritization with LSTM and Pretrained Models
di: Rosenthal, Adi, et al.
Pubblicazione: (2024)
di: Rosenthal, Adi, et al.
Pubblicazione: (2024)
CoachLM: Automatic Instruction Revisions Improve the Data Quality in LLM Instruction Tuning
di: Liu, Yilun, et al.
Pubblicazione: (2023)
di: Liu, Yilun, et al.
Pubblicazione: (2023)
Unveiling Cultural Blind Spots: Analyzing the Limitations of mLLMs in Procedural Text Comprehension
di: Yari, Amir Hossein, et al.
Pubblicazione: (2025)
di: Yari, Amir Hossein, et al.
Pubblicazione: (2025)
RAG Foundry: A Framework for Enhancing LLMs for Retrieval Augmented Generation
di: Fleischer, Daniel, et al.
Pubblicazione: (2024)
di: Fleischer, Daniel, et al.
Pubblicazione: (2024)
The Inherent Limits of Pretrained LLMs: The Unexpected Convergence of Instruction Tuning and In-Context Learning Capabilities
di: Bigoulaeva, Irina, et al.
Pubblicazione: (2025)
di: Bigoulaeva, Irina, et al.
Pubblicazione: (2025)
Enhancing Instruction-Following Capabilities in Seq2Seq Models: DoLA Adaptations for T5
di: Sun, Huey, et al.
Pubblicazione: (2025)
di: Sun, Huey, et al.
Pubblicazione: (2025)
HealthQ: Unveiling Questioning Capabilities of LLM Chains in Healthcare Conversations
di: Wang, Ziyu, et al.
Pubblicazione: (2024)
di: Wang, Ziyu, et al.
Pubblicazione: (2024)
Xwin-LM: Strong and Scalable Alignment Practice for LLMs
di: Ni, Bolin, et al.
Pubblicazione: (2024)
di: Ni, Bolin, et al.
Pubblicazione: (2024)
Hysteresis Activation Function for Efficient Inference
di: Kimhi, Moshe, et al.
Pubblicazione: (2024)
di: Kimhi, Moshe, et al.
Pubblicazione: (2024)
Gold Panning in Vocabulary: An Adaptive Method for Vocabulary Expansion of Domain-Specific LLMs
di: Liu, Chengyuan, et al.
Pubblicazione: (2024)
di: Liu, Chengyuan, et al.
Pubblicazione: (2024)
Hebrew Diacritics Restoration using Visual Representation
di: Elboher, Yair, et al.
Pubblicazione: (2025)
di: Elboher, Yair, et al.
Pubblicazione: (2025)
Time Series Forecasting with LLMs: Understanding and Enhancing Model Capabilities
di: Tang, Hua, et al.
Pubblicazione: (2024)
di: Tang, Hua, et al.
Pubblicazione: (2024)
Self-Review Framework for Enhancing Instruction Following Capability of LLM
di: Park, Sihyun
Pubblicazione: (2025)
di: Park, Sihyun
Pubblicazione: (2025)
Optimizing LLMs for Italian: Reducing Token Fertility and Enhancing Efficiency Through Vocabulary Adaptation
di: Moroni, Luca, et al.
Pubblicazione: (2025)
di: Moroni, Luca, et al.
Pubblicazione: (2025)
Is LLM an Overconfident Judge? Unveiling the Capabilities of LLMs in Detecting Offensive Language with Annotation Disagreement
di: Lu, Junyu, et al.
Pubblicazione: (2025)
di: Lu, Junyu, et al.
Pubblicazione: (2025)
DebugLM: Learning Traceable Training Data Provenance for LLMs
di: Mo, Wenjie Jacky, et al.
Pubblicazione: (2026)
di: Mo, Wenjie Jacky, et al.
Pubblicazione: (2026)
Open (Clinical) LLMs are Sensitive to Instruction Phrasings
di: Arroyo, Alberto Mario Ceballos, et al.
Pubblicazione: (2024)
di: Arroyo, Alberto Mario Ceballos, et al.
Pubblicazione: (2024)
Accelerating LLM Inference with Lossless Speculative Decoding Algorithms for Heterogeneous Vocabularies
di: Timor, Nadav, et al.
Pubblicazione: (2025)
di: Timor, Nadav, et al.
Pubblicazione: (2025)
Meeseeks: A Feedback-Driven, Iterative Self-Correction Benchmark evaluating LLMs' Instruction Following Capability
di: wang, Jiaming, et al.
Pubblicazione: (2025)
di: wang, Jiaming, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Dicta-LM 3.0: Advancing The Frontier of Hebrew Sovereign LLMs
di: Shmidman, Shaltiel, et al.
Pubblicazione: (2026) -
NeoDictaBERT: Pushing the Frontier of BERT models for Hebrew
di: Shmidman, Shaltiel, et al.
Pubblicazione: (2025) -
MRL Parsing Without Tears: The Case of Hebrew
di: Shmidman, Shaltiel, et al.
Pubblicazione: (2024) -
Do Pretrained Contextual Language Models Distinguish between Hebrew Homograph Analyses?
di: Shmidman, Avi, et al.
Pubblicazione: (2024) -
MsBERT: A New Model for the Reconstruction of Lacunae in Hebrew Manuscripts
di: Shmidman, Avi, et al.
Pubblicazione: (2025)