A Classical View on Benign Overfitting: The Role of Sample Size
Fuente:
arXiv
Salvato in:
| Autori principali: | Park, Junhyung, Bloebaum, Patrick, Kasiviswanathan, Shiva Prasad |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Benign Overfitting for Regression with Trained Two-Layer ReLU Networks
di: Park, Junhyung, et al.
Pubblicazione: (2024)
di: Park, Junhyung, et al.
Pubblicazione: (2024)
A Quantitative Characterization of Forgetting in Post-Training
di: Balasubramanian, Krishnakumar, et al.
Pubblicazione: (2026)
di: Balasubramanian, Krishnakumar, et al.
Pubblicazione: (2026)
Training Large Language Models To Reason In Parallel With Global Forking Tokens
di: Jia, Sheng, et al.
Pubblicazione: (2025)
di: Jia, Sheng, et al.
Pubblicazione: (2025)
From Guess2Graph: When and How Can Unreliable Experts Safely Boost Causal Discovery in Finite Samples?
di: Hiremath, Sujai, et al.
Pubblicazione: (2025)
di: Hiremath, Sujai, et al.
Pubblicazione: (2025)
Benign Overfitting in Adversarial Training for Vision Transformers
di: Zhang, Jiaming, et al.
Pubblicazione: (2026)
di: Zhang, Jiaming, et al.
Pubblicazione: (2026)
Debiasing Reward Models by Representation Learning with Guarantees
di: Ng, Ignavier, et al.
Pubblicazione: (2025)
di: Ng, Ignavier, et al.
Pubblicazione: (2025)
What Causes Postoperative Aspiration?
di: Nagesh, Supriya, et al.
Pubblicazione: (2025)
di: Nagesh, Supriya, et al.
Pubblicazione: (2025)
Learning to Answer from Correct Demonstrations
di: Joshi, Nirmit, et al.
Pubblicazione: (2025)
di: Joshi, Nirmit, et al.
Pubblicazione: (2025)
Benign, Tempered, or Catastrophic: A Taxonomy of Overfitting
di: Mallinar, Neil, et al.
Pubblicazione: (2022)
di: Mallinar, Neil, et al.
Pubblicazione: (2022)
Risk Phase Transitions in Spiked Regression: Alignment Driven Benign and Catastrophic Overfitting
di: Li, Jiping, et al.
Pubblicazione: (2025)
di: Li, Jiping, et al.
Pubblicazione: (2025)
Score matching through the roof: linear, nonlinear, and latent variables causal discovery
di: Montagna, Francesco, et al.
Pubblicazione: (2024)
di: Montagna, Francesco, et al.
Pubblicazione: (2024)
On Predicting Post-Click Conversion Rate via Counterfactual Inference
di: Ahn, Junhyung, et al.
Pubblicazione: (2025)
di: Ahn, Junhyung, et al.
Pubblicazione: (2025)
Stable Minima Cannot Overfit in Univariate ReLU Networks: Generalization by Large Step Sizes
di: Qiao, Dan, et al.
Pubblicazione: (2024)
di: Qiao, Dan, et al.
Pubblicazione: (2024)
Stochastic Deep Graph Clustering for Practical Group Formation
di: Park, Junhyung, et al.
Pubblicazione: (2025)
di: Park, Junhyung, et al.
Pubblicazione: (2025)
Control of Overfitting with Physics
di: Kozyrev, Sergei V., et al.
Pubblicazione: (2024)
di: Kozyrev, Sergei V., et al.
Pubblicazione: (2024)
Modeling Causal Mechanisms with Diffusion Models for Interventional and Counterfactual Queries
di: Chao, Patrick, et al.
Pubblicazione: (2023)
di: Chao, Patrick, et al.
Pubblicazione: (2023)
From Overfitting to Robustness: Quantity, Quality, and Variety Oriented Negative Sample Selection in Graph Contrastive Learning
di: Ali, Adnan, et al.
Pubblicazione: (2024)
di: Ali, Adnan, et al.
Pubblicazione: (2024)
How to Mitigate Overfitting in Weak-to-strong Generalization?
di: Shi, Junhao, et al.
Pubblicazione: (2025)
di: Shi, Junhao, et al.
Pubblicazione: (2025)
Towards Mitigating Architecture Overfitting on Distilled Datasets
di: Zhong, Xuyang, et al.
Pubblicazione: (2023)
di: Zhong, Xuyang, et al.
Pubblicazione: (2023)
Residual Stream Analysis of Overfitting And Structural Disruptions
di: Liu, Quan, et al.
Pubblicazione: (2026)
di: Liu, Quan, et al.
Pubblicazione: (2026)
Dependence-Aware Label Aggregation for LLM-as-a-Judge via Ising Models
di: Balasubramanian, Krishnakumar, et al.
Pubblicazione: (2026)
di: Balasubramanian, Krishnakumar, et al.
Pubblicazione: (2026)
Friend or Foe? Harnessing Controllable Overfitting for Anomaly Detection
di: Qian, Long, et al.
Pubblicazione: (2024)
di: Qian, Long, et al.
Pubblicazione: (2024)
On the Implicit Reward Overfitting and the Low-rank Dynamics in RLVR
di: Ye, Hao, et al.
Pubblicazione: (2026)
di: Ye, Hao, et al.
Pubblicazione: (2026)
Detecting Generative Parroting through Overfitting Masked Autoencoders
di: Taghanaki, Saeid Asgari, et al.
Pubblicazione: (2024)
di: Taghanaki, Saeid Asgari, et al.
Pubblicazione: (2024)
Differentially Private Conditional Independence Testing
di: Kalemaj, Iden, et al.
Pubblicazione: (2023)
di: Kalemaj, Iden, et al.
Pubblicazione: (2023)
Sequential Kernelized Independence Testing
di: Podkopaev, Aleksandr, et al.
Pubblicazione: (2022)
di: Podkopaev, Aleksandr, et al.
Pubblicazione: (2022)
LoRA Dropout as a Sparsity Regularizer for Overfitting Control
di: Lin, Yang, et al.
Pubblicazione: (2024)
di: Lin, Yang, et al.
Pubblicazione: (2024)
SCONE: A Novel Stochastic Sampling to Generate Contrastive Views and Hard Negative Samples for Recommendation
di: Lee, Chaejeong, et al.
Pubblicazione: (2024)
di: Lee, Chaejeong, et al.
Pubblicazione: (2024)
Overcoming Overfitting in Reinforcement Learning via Gaussian Process Diffusion Policy
di: Horprasert, Amornyos, et al.
Pubblicazione: (2025)
di: Horprasert, Amornyos, et al.
Pubblicazione: (2025)
From Overfitting to Reliability: Introducing the Hierarchical Approximate Bayesian Neural Network
di: Amirkhanian, Hayk, et al.
Pubblicazione: (2025)
di: Amirkhanian, Hayk, et al.
Pubblicazione: (2025)
Mitigating Overfitting in Graph Neural Networks via Feature and Hyperplane Perturbation
di: Choi, Yoonhyuk, et al.
Pubblicazione: (2022)
di: Choi, Yoonhyuk, et al.
Pubblicazione: (2022)
Effective Sample Size and Generalization Bounds for Temporal Networks
di: Gahtan, Barak, et al.
Pubblicazione: (2025)
di: Gahtan, Barak, et al.
Pubblicazione: (2025)
mSFT: Addressing Dataset Mixtures Overfitting Heterogeneously in Multi-task SFT
di: Koh, Woosung, et al.
Pubblicazione: (2026)
di: Koh, Woosung, et al.
Pubblicazione: (2026)
How Ensemble Learning Balances Accuracy and Overfitting: A Bias-Variance Perspective on Tabular Data
di: Mohammad, Zubair Ahmed
Pubblicazione: (2025)
di: Mohammad, Zubair Ahmed
Pubblicazione: (2025)
Low Resource Reconstruction Attacks Through Benign Prompts
di: Yarkoni, Sol, et al.
Pubblicazione: (2025)
di: Yarkoni, Sol, et al.
Pubblicazione: (2025)
Revisiting Knowledge Distillation: The Hidden Role of Dataset Size
di: Lanzillotta, Giulia, et al.
Pubblicazione: (2025)
di: Lanzillotta, Giulia, et al.
Pubblicazione: (2025)
Understanding Sample Generation Strategies for Learning Heuristic Functions in Classical Planning
di: Bettker, R. V., et al.
Pubblicazione: (2022)
di: Bettker, R. V., et al.
Pubblicazione: (2022)
Utilizing Strategic Pre-training to Reduce Overfitting: Baguan -- A Pre-trained Weather Forecasting Model
di: Niu, Peisong, et al.
Pubblicazione: (2025)
di: Niu, Peisong, et al.
Pubblicazione: (2025)
IT-OSE: Exploring Optimal Sample Size for Industrial Data Augmentation
di: Sun, Mingchun, et al.
Pubblicazione: (2026)
di: Sun, Mingchun, et al.
Pubblicazione: (2026)
Foundations of Global Consistency Checking with Noisy LLM Oracles
di: He, Paul, et al.
Pubblicazione: (2026)
di: He, Paul, et al.
Pubblicazione: (2026)
Documenti analoghi
-
Benign Overfitting for Regression with Trained Two-Layer ReLU Networks
di: Park, Junhyung, et al.
Pubblicazione: (2024) -
A Quantitative Characterization of Forgetting in Post-Training
di: Balasubramanian, Krishnakumar, et al.
Pubblicazione: (2026) -
Training Large Language Models To Reason In Parallel With Global Forking Tokens
di: Jia, Sheng, et al.
Pubblicazione: (2025) -
From Guess2Graph: When and How Can Unreliable Experts Safely Boost Causal Discovery in Finite Samples?
di: Hiremath, Sujai, et al.
Pubblicazione: (2025) -
Benign Overfitting in Adversarial Training for Vision Transformers
di: Zhang, Jiaming, et al.
Pubblicazione: (2026)