Compressing LLMs with MoP: Mixture of Pruners
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Yamamoto, Bruno Lopes, de Alcantara, Lucas Lauton, Zacarias, Victor, Mugnaini, Leandro Giusti, Ogawa, Keith Ando, Pellicer, Lucas, Costa, Rosimeire Pereira, Bollis, Edson, Costa, Anna Helena Reali, Jordao, Artur |
|---|---|
| Format: | Preprint |
| Publié: |
2026
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
Efficient LLMs with AMP: Attention Heads and MLP Pruning
par: Mugnaini, Leandro Giusti, et autres
Publié: (2025)
par: Mugnaini, Leandro Giusti, et autres
Publié: (2025)
Technical Report on Text Dataset Distillation
par: Ogawa, Keith Ando, et autres
Publié: (2025)
par: Ogawa, Keith Ando, et autres
Publié: (2025)
Layer-wise LoRA fine-tuning: a similarity metric approach
par: Ogawa, Keith Ando, et autres
Publié: (2026)
par: Ogawa, Keith Ando, et autres
Publié: (2026)
Layer Pruning with Consensus: A Triple-Win Solution
par: Mugnaini, Leandro Giusti, et autres
Publié: (2024)
par: Mugnaini, Leandro Giusti, et autres
Publié: (2024)
The Virtues of Brevity: Avoid Overthinking in Parallel Test-Time Reasoning
par: Dinardi, Raul Cavalcante, et autres
Publié: (2025)
par: Dinardi, Raul Cavalcante, et autres
Publié: (2025)
Effective Layer Pruning Through Similarity Metric Perspective
par: Pons, Ian, et autres
Publié: (2024)
par: Pons, Ian, et autres
Publié: (2024)
One Period to Rule Them All: Identifying Critical Learning Periods in Deep Networks
par: Fukase, Vinicius Yuiti, et autres
Publié: (2025)
par: Fukase, Vinicius Yuiti, et autres
Publié: (2025)
Improving Fairness in LLMs Through Testing-Time Adversaries
par: Gregio, Isabela Pereira, et autres
Publié: (2025)
par: Gregio, Isabela Pereira, et autres
Publié: (2025)
Realistic Market Impact Modeling for Reinforcement Learning Trading Environments
par: Abbade, Lucas Riera, et autres
Publié: (2026)
par: Abbade, Lucas Riera, et autres
Publié: (2026)
Pruning Everything, Everywhere, All at Once
par: Nascimento, Gustavo Henrique do, et autres
Publié: (2025)
par: Nascimento, Gustavo Henrique do, et autres
Publié: (2025)
Sweeping Heterogeneity with Smart MoPs: Mixture of Prompts for LLM Task Adaptation
par: Dun, Chen, et autres
Publié: (2023)
par: Dun, Chen, et autres
Publié: (2023)
Developing an ESG-Oriented Large Language Model through ESG Practices
par: Assis, Gabriel, et autres
Publié: (2026)
par: Assis, Gabriel, et autres
Publié: (2026)
Weakly Supervised Attention-based Models Using Activation Maps for Citrus Mite and Insect Pest Classification
par: Bollis, Edson, et autres
Publié: (2021)
par: Bollis, Edson, et autres
Publié: (2021)
MoP-CLIP: A Mixture of Prompt-Tuned CLIP Models for Domain Incremental Learning
par: Nicolas, Julien, et autres
Publié: (2023)
par: Nicolas, Julien, et autres
Publié: (2023)
Combating the Elsagate phenomenon: Deep learning architectures for disturbing cartoons
par: Ishikawa, Akari, et autres
Publié: (2019)
par: Ishikawa, Akari, et autres
Publié: (2019)
Comparing Normalization Methods for Portfolio Optimization with Reinforcement Learning
par: Costa, Caio de Souza Barbosa, et autres
Publié: (2025)
par: Costa, Caio de Souza Barbosa, et autres
Publié: (2025)
Síntesis y caracterización del fosfuro de molibdeno MoP
par: Ana María Campos Chinchilla
Publié: (2006)
par: Ana María Campos Chinchilla
Publié: (2006)
EL TRAUMA ORTOPÉDICO EN LOS ANCIANOS: UNA REVISIÓN DE LA LITERATURA.
par: J. Lauton Soares
Publié: (2005)
par: J. Lauton Soares
Publié: (2005)
MoE-Pruner: Pruning Mixture-of-Experts Large Language Model using the Hints from Its Router
par: Xie, Yanyue, et autres
Publié: (2024)
par: Xie, Yanyue, et autres
Publié: (2024)
Normalização de nomes de autores em fontes de informação institucionais: proposta de um método automático de verificação de erros
par: Rogério Mugnaini
Publié: (2012)
par: Rogério Mugnaini
Publié: (2012)
Recuperação e impacto da produção científica na era Google: uma análise comparativa entre o Google Acadêmico e a Web of Science
par: Rogério Mugnaini
Publié: (2008)
par: Rogério Mugnaini
Publié: (2008)
Para un protocolo de observación etnográfica de los usos diferenciales y los modos de ver las telenovelas
par: Fabio Mugnaini
Publié: (1986)
par: Fabio Mugnaini
Publié: (1986)
ACESSO ABERTO E FINANCIAMENTO DA PESQUISA NO BRASIL: CARACTERÍSTICAS E TENDÊNCIAS DA PRODUÇÃO CIENTÍFICA
par: Rogério Mugnaini
Publié: (2022)
par: Rogério Mugnaini
Publié: (2022)
Vem pra rua: um estudo sobre ressignificação
par: Suzana Jordão da Costa
Publié: (2016)
par: Suzana Jordão da Costa
Publié: (2016)
Formation of N‐Doped Carbon Nanofibers Decorated with MoP Nanoflakes for Dendrite‐Free Lithium Metal Anode
par: Duhong Chen, et autres
Publié: (2024)
par: Duhong Chen, et autres
Publié: (2024)
“A TORRE AZUL”: memórias de espaços escolares pelas narrativas de estudantes e professores (1954-1996)
par: Lucas Costa Grimaldi
Publié: (2018)
par: Lucas Costa Grimaldi
Publié: (2018)
Cansados e esgotados: trabalhadores precarizados no cinema de ficção brasileiro
par: Edson Costa
Publié: (2023)
par: Edson Costa
Publié: (2023)
Synergistic Pt‐MoP Interaction on Carbon Support Enables High‐Performance Hydrogen Evolution with Reduced Platinum Loading
par: Niu Liu, et autres
Publié: (2025)
par: Niu Liu, et autres
Publié: (2025)
RL-Pruner: Structured Pruning Using Reinforcement Learning for CNN Compression and Acceleration
par: Wang, Boyao, et autres
Publié: (2024)
par: Wang, Boyao, et autres
Publié: (2024)
MI-Pruner: Crossmodal Mutual Information-guided Token Pruner for Efficient MLLMs
par: Li, Jiameng, et autres
Publié: (2026)
par: Li, Jiameng, et autres
Publié: (2026)
MoBE: Mixture-of-Basis-Experts for Compressing MoE-based LLMs
par: Chen, Xiaodong, et autres
Publié: (2025)
par: Chen, Xiaodong, et autres
Publié: (2025)
The promotion and implementation of open science measures among high‐performing journals from Brazil, Mexico, Portugal, and Spain
par: Chris Fradkin, et autres
Publié: (2024)
par: Chris Fradkin, et autres
Publié: (2024)
Back to the Land: Museum Practices, Collections, and Other‐Than‐Human Politics in Southern Chile
par: Lucas da Costa Maciel
Publié: (2025)
par: Lucas da Costa Maciel
Publié: (2025)
Corpo-comunidade e consenso: o estatuto da palavra em uma assembleia zapatista
par: Lucas da Costa Maciel
Publié: (2023)
par: Lucas da Costa Maciel
Publié: (2023)
ESTUDO BIBLIOMÉTRICO QUANTITATIVO E QUALITATIVO DA CONTABILIDADE DE CUSTOS NO SETOR PÚBLICO NO SÉCULO 21
par: Lucas Emílio Costa Davi
Publié: (2025)
par: Lucas Emílio Costa Davi
Publié: (2025)
Comutação autoral e a problemática da unidade “autor-obra” nos quadrinhos
par: Lucas Piter Alves-Costa
Publié: (2018)
par: Lucas Piter Alves-Costa
Publié: (2018)
CORPO-LIXO: ENTRE O DEJETO E A POTÊNCIA NA CULTURA CONTEMPORÂNEA
par: Pedro Henrique Lucas Costa
Publié: (2016)
par: Pedro Henrique Lucas Costa
Publié: (2016)
Mercado regulado de órganos: el caso de Irán
par: Lucas Costa de Oliveira
Publié: (2018)
par: Lucas Costa de Oliveira
Publié: (2018)
Entre telescopios y milpas construimos resistencia. Horizontes metodológicos en diálogo con niños y niñas nahuas de la Sierra de Puebla
par: Lucas da Costa Maciel
Publié: (2016)
par: Lucas da Costa Maciel
Publié: (2016)
Corpo-lixo: entre o dejeto e a potência na cultura contemporânea
par: Pedro Henrique Lucas Costa
Publié: (2016)
par: Pedro Henrique Lucas Costa
Publié: (2016)
Documents similaires
-
Efficient LLMs with AMP: Attention Heads and MLP Pruning
par: Mugnaini, Leandro Giusti, et autres
Publié: (2025) -
Technical Report on Text Dataset Distillation
par: Ogawa, Keith Ando, et autres
Publié: (2025) -
Layer-wise LoRA fine-tuning: a similarity metric approach
par: Ogawa, Keith Ando, et autres
Publié: (2026) -
Layer Pruning with Consensus: A Triple-Win Solution
par: Mugnaini, Leandro Giusti, et autres
Publié: (2024) -
The Virtues of Brevity: Avoid Overthinking in Parallel Test-Time Reasoning
par: Dinardi, Raul Cavalcante, et autres
Publié: (2025)