LastingBench: Defend Benchmarks Against Knowledge Leakage
Fuente:
arXiv
Salvato in:
| Autori principali: | Fang, Yixiong, Sun, Tianran, Shi, Yuling, Wang, Min, Gu, Xiaodong |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
AttentionRAG: Attention-Guided Context Pruning in Retrieval-Augmented Generation
di: Fang, Yixiong, et al.
Pubblicazione: (2025)
di: Fang, Yixiong, et al.
Pubblicazione: (2025)
From Code to Correctness: Closing the Last Mile of Code Generation with Hierarchical Debugging
di: Shi, Yuling, et al.
Pubblicazione: (2024)
di: Shi, Yuling, et al.
Pubblicazione: (2024)
Benchmarking and Defending Against Indirect Prompt Injection Attacks on Large Language Models
di: Yi, Jingwei, et al.
Pubblicazione: (2023)
di: Yi, Jingwei, et al.
Pubblicazione: (2023)
Reasoning in Trees: Improving Retrieval-Augmented Generation for Multi-Hop Question Answering
di: Shi, Yuling, et al.
Pubblicazione: (2026)
di: Shi, Yuling, et al.
Pubblicazione: (2026)
Between Lines of Code: Unraveling the Distinct Patterns of Machine and Human Programmers
di: Shi, Yuling, et al.
Pubblicazione: (2024)
di: Shi, Yuling, et al.
Pubblicazione: (2024)
Defending Large Language Models Against Jailbreak Attacks via In-Decoding Safety-Awareness Probing
di: Zhao, Yinzhi, et al.
Pubblicazione: (2026)
di: Zhao, Yinzhi, et al.
Pubblicazione: (2026)
SKA-Bench: A Fine-Grained Benchmark for Evaluating Structured Knowledge Understanding of LLMs
di: Liu, Zhiqiang, et al.
Pubblicazione: (2025)
di: Liu, Zhiqiang, et al.
Pubblicazione: (2025)
Benchmarking Benchmark Leakage in Large Language Models
di: Xu, Ruijie, et al.
Pubblicazione: (2024)
di: Xu, Ruijie, et al.
Pubblicazione: (2024)
VitaBench: Benchmarking LLM Agents with Versatile Interactive Tasks in Real-world Applications
di: He, Wei, et al.
Pubblicazione: (2025)
di: He, Wei, et al.
Pubblicazione: (2025)
Adversarial Tuning: Defending Against Jailbreak Attacks for LLMs
di: Liu, Fan, et al.
Pubblicazione: (2024)
di: Liu, Fan, et al.
Pubblicazione: (2024)
Defending LLMs against Jailbreaking Attacks via Backtranslation
di: Wang, Yihan, et al.
Pubblicazione: (2024)
di: Wang, Yihan, et al.
Pubblicazione: (2024)
Generating Leakage-Free Benchmarks for Robust RAG Evaluation
di: Liu, Jiayi, et al.
Pubblicazione: (2026)
di: Liu, Jiayi, et al.
Pubblicazione: (2026)
LessLeak-Bench: A First Investigation of Data Leakage in LLMs Across 83 Software Engineering Benchmarks
di: Zhou, Xin, et al.
Pubblicazione: (2025)
di: Zhou, Xin, et al.
Pubblicazione: (2025)
LocalBench: Benchmarking LLMs on County-Level Local Knowledge and Reasoning
di: Gao, Zihan, et al.
Pubblicazione: (2025)
di: Gao, Zihan, et al.
Pubblicazione: (2025)
SE-Bench: Benchmarking Self-Evolution with Knowledge Internalization
di: Yuan, Jiarui, et al.
Pubblicazione: (2026)
di: Yuan, Jiarui, et al.
Pubblicazione: (2026)
TTT-Bench: A Benchmark for Evaluating Reasoning Ability with Simple and Novel Tic-Tac-Toe-style Games
di: Mishra, Prakamya, et al.
Pubblicazione: (2025)
di: Mishra, Prakamya, et al.
Pubblicazione: (2025)
CodeCipher: Learning to Obfuscate Source Code Against LLMs
di: Lin, Yalan, et al.
Pubblicazione: (2024)
di: Lin, Yalan, et al.
Pubblicazione: (2024)
MemoryRewardBench: Benchmarking Reward Models for Long-Term Memory Management in Large Language Models
di: Tang, Zecheng, et al.
Pubblicazione: (2026)
di: Tang, Zecheng, et al.
Pubblicazione: (2026)
Digital Socrates: Evaluating LLMs through Explanation Critiques
di: Gu, Yuling, et al.
Pubblicazione: (2023)
di: Gu, Yuling, et al.
Pubblicazione: (2023)
OphthBench: A Comprehensive Benchmark for Evaluating Large Language Models in Chinese Ophthalmology
di: Zhou, Chengfeng, et al.
Pubblicazione: (2025)
di: Zhou, Chengfeng, et al.
Pubblicazione: (2025)
MemPot: Defending Against Memory Extraction Attack with Optimized Honeypots
di: Wang, Yuhao, et al.
Pubblicazione: (2026)
di: Wang, Yuhao, et al.
Pubblicazione: (2026)
MedAgentsBench: Benchmarking Thinking Models and Agent Frameworks for Complex Medical Reasoning
di: Tang, Xiangru, et al.
Pubblicazione: (2025)
di: Tang, Xiangru, et al.
Pubblicazione: (2025)
Mobile-Bench: An Evaluation Benchmark for LLM-based Mobile Agents
di: Deng, Shihan, et al.
Pubblicazione: (2024)
di: Deng, Shihan, et al.
Pubblicazione: (2024)
PADBen: A Comprehensive Benchmark for Evaluating AI Text Detectors Against Paraphrase Attacks
di: Zha, Yiwei, et al.
Pubblicazione: (2025)
di: Zha, Yiwei, et al.
Pubblicazione: (2025)
RPC-Bench: A Fine-grained Benchmark for Research Paper Comprehension
di: Chen, Yelin, et al.
Pubblicazione: (2026)
di: Chen, Yelin, et al.
Pubblicazione: (2026)
CoCoReviewBench: A Completeness- and Correctness-Oriented Benchmark for AI Reviewers
di: Deng, Hexuan, et al.
Pubblicazione: (2026)
di: Deng, Hexuan, et al.
Pubblicazione: (2026)
Defending Against Weight-Poisoning Backdoor Attacks for Parameter-Efficient Fine-Tuning
di: Zhao, Shuai, et al.
Pubblicazione: (2024)
di: Zhao, Shuai, et al.
Pubblicazione: (2024)
CO-Bench: Benchmarking Language Model Agents in Algorithm Search for Combinatorial Optimization
di: Sun, Weiwei, et al.
Pubblicazione: (2025)
di: Sun, Weiwei, et al.
Pubblicazione: (2025)
PILOT-Bench: A Benchmark for Legal Reasoning in the Patent Domain with IRAC-Aligned Classification Tasks
di: Jang, Yehoon, et al.
Pubblicazione: (2026)
di: Jang, Yehoon, et al.
Pubblicazione: (2026)
ESG-Bench: Benchmarking Long-Context ESG Reports for Hallucination Mitigation
di: Sun, Siqi, et al.
Pubblicazione: (2026)
di: Sun, Siqi, et al.
Pubblicazione: (2026)
FDARxBench: Benchmarking Regulatory and Clinical Reasoning on FDA Generic Drug Assessment
di: Xiong, Betty, et al.
Pubblicazione: (2026)
di: Xiong, Betty, et al.
Pubblicazione: (2026)
FoundaBench: Evaluating Chinese Fundamental Knowledge Capabilities of Large Language Models
di: Li, Wei, et al.
Pubblicazione: (2024)
di: Li, Wei, et al.
Pubblicazione: (2024)
GameDevBench: Evaluating Agentic Capabilities Through Game Development
di: Chi, Wayne, et al.
Pubblicazione: (2026)
di: Chi, Wayne, et al.
Pubblicazione: (2026)
CASE-Bench: Context-Aware SafEty Benchmark for Large Language Models
di: Sun, Guangzhi, et al.
Pubblicazione: (2025)
di: Sun, Guangzhi, et al.
Pubblicazione: (2025)
EVADE-Bench: Multimodal Benchmark for Evaluating and Enhancing Evasive Content Detection
di: Xu, Ancheng, et al.
Pubblicazione: (2025)
di: Xu, Ancheng, et al.
Pubblicazione: (2025)
Robust Prompt Optimization for Defending Language Models Against Jailbreaking Attacks
di: Zhou, Andy, et al.
Pubblicazione: (2024)
di: Zhou, Andy, et al.
Pubblicazione: (2024)
WritingBench: A Comprehensive Benchmark for Generative Writing
di: Wu, Yuning, et al.
Pubblicazione: (2025)
di: Wu, Yuning, et al.
Pubblicazione: (2025)
BabelBench: An Omni Benchmark for Code-Driven Analysis of Multimodal and Multistructured Data
di: Wang, Xuwu, et al.
Pubblicazione: (2024)
di: Wang, Xuwu, et al.
Pubblicazione: (2024)
ConflictBank: A Benchmark for Evaluating the Influence of Knowledge Conflicts in LLM
di: Su, Zhaochen, et al.
Pubblicazione: (2024)
di: Su, Zhaochen, et al.
Pubblicazione: (2024)
When Style Breaks Safety: Defending LLMs Against Superficial Style Alignment
di: Xiao, Yuxin, et al.
Pubblicazione: (2025)
di: Xiao, Yuxin, et al.
Pubblicazione: (2025)
Documenti analoghi
-
AttentionRAG: Attention-Guided Context Pruning in Retrieval-Augmented Generation
di: Fang, Yixiong, et al.
Pubblicazione: (2025) -
From Code to Correctness: Closing the Last Mile of Code Generation with Hierarchical Debugging
di: Shi, Yuling, et al.
Pubblicazione: (2024) -
Benchmarking and Defending Against Indirect Prompt Injection Attacks on Large Language Models
di: Yi, Jingwei, et al.
Pubblicazione: (2023) -
Reasoning in Trees: Improving Retrieval-Augmented Generation for Multi-Hop Question Answering
di: Shi, Yuling, et al.
Pubblicazione: (2026) -
Between Lines of Code: Unraveling the Distinct Patterns of Machine and Human Programmers
di: Shi, Yuling, et al.
Pubblicazione: (2024)