Copertina

Pervasive Annotation Errors Break Text-to-SQL Benchmarks and Leaderboards

Fuente: arXiv

Salvato in:

Dettagli Bibliografici
Autori principali:	Jin, Tengjun, Choi, Yoojin, Zhu, Yuxuan, Kang, Daniel
Natura:	Preprint
Pubblicazione:	2026
Soggetti:	Artificial Intelligence Databases
Accesso online:	Acceder al recurso
Tags:	Aggiungi Tag Nessun Tag, puoi essere il primo ad aggiungerne!!

Documenti analoghi

ReViSQL: Achieving Human-Level Text-to-SQL
di: Zhu, Yuxuan, et al.
Pubblicazione: (2026)

ELT-Bench: An End-to-End Benchmark for Evaluating AI Agents on ELT Pipelines
di: Jin, Tengjun, et al.
Pubblicazione: (2025)

ELT-Bench-Verified: Benchmark Quality Issues Underestimate AI Agent Capabilities
di: Zanoli, Christopher, et al.
Pubblicazione: (2026)

Evaluating LLMs for Text-to-SQL Generation With Complex SQL Workload
di: Ma, Limin, et al.
Pubblicazione: (2024)

EPI-SQL: Enhancing Text-to-SQL Translation with Error-Prevention Instructions
di: Liu, Xiping, et al.
Pubblicazione: (2024)

BenchPress: A Human-in-the-Loop Annotation System for Rapid Text-to-SQL Benchmark Curation
di: Wenz, Fabian, et al.
Pubblicazione: (2025)

BEAVER: An Enterprise Benchmark for Text-to-SQL
di: Chen, Peter Baile, et al.
Pubblicazione: (2024)

SQL-to-Schema Enhances Schema Linking in Text-to-SQL
di: Yang, Sun, et al.
Pubblicazione: (2024)

Text-to-SQL Domain Adaptation via Human-LLM Collaborative Data Annotation
di: Tian, Yuan, et al.
Pubblicazione: (2025)

SQL-o1: A Self-Reward Heuristic Dynamic Search Method for Text-to-SQL
di: Lyu, Shuai, et al.
Pubblicazione: (2025)

APEX-SQL: Talking to the data via Agentic Exploration for Text-to-SQL
di: Cao, Bowen, et al.
Pubblicazione: (2026)

PSM-SQL: Progressive Schema Learning with Multi-granularity Semantics for Text-to-SQL
di: Yang, Zhuopan, et al.
Pubblicazione: (2025)

EllieSQL: Cost-Efficient Text-to-SQL with Complexity-Aware Routing
di: Zhu, Yizhang, et al.
Pubblicazione: (2025)

Reliable Text-to-SQL with Adaptive Abstention
di: Chen, Kaiwen, et al.
Pubblicazione: (2025)

PV-SQL: Synergizing Database Probing and Rule-based Verification for Text-to-SQL Agents
di: Tian, Yuan, et al.
Pubblicazione: (2026)

SING-SQL: A Synthetic Data Generation Framework for In-Domain Text-to-SQL Translation
di: Caferoğlu, Hasan Alp, et al.
Pubblicazione: (2025)

IndicDB -- Benchmarking Multilingual Text-to-SQL Capabilities in Indian Languages
di: Dawar, Aviral, et al.
Pubblicazione: (2026)

A Survey of Large Language Model-Based Generative AI for Text-to-SQL: Benchmarks, Applications, Use Cases, and Challenges
di: Singh, Aditi, et al.
Pubblicazione: (2024)

Bridging the Gap: Enabling Natural Language Queries for NoSQL Databases through Text-to-NoSQL Translation
di: Lu, Jinwei, et al.
Pubblicazione: (2025)

RSL-SQL: Robust Schema Linking in Text-to-SQL Generation
di: Cao, Zhenbiao, et al.
Pubblicazione: (2024)

Synthetic SQL Column Descriptions and Their Impact on Text-to-SQL Performance
di: Wretblad, Niklas, et al.
Pubblicazione: (2024)

ExeSQL: Self-Taught Text-to-SQL Models with Execution-Driven Bootstrapping for SQL Dialects
di: Zhang, Jipeng, et al.
Pubblicazione: (2025)

Rationalization Models for Text-to-SQL
di: Rossiello, Gaetano, et al.
Pubblicazione: (2025)

Text2SQL is Not Enough: Unifying AI and Databases with TAG
di: Biswal, Asim, et al.
Pubblicazione: (2024)

Weakly Supervised Text-to-SQL Parsing through Question Decomposition
di: Wolfson, Tomer, et al.
Pubblicazione: (2021)

EHR-SeqSQL : A Sequential Text-to-SQL Dataset For Interactively Exploring Electronic Health Records
di: Ryu, Jaehee, et al.
Pubblicazione: (2024)

Accelerating Approximate Analytical Join Queries over Unstructured Data with Statistical Guarantees
di: Zhu, Yuxuan, et al.
Pubblicazione: (2026)

TinySQL: A Progressive Text-to-SQL Dataset for Mechanistic Interpretability Research
di: Harrasse, Abir, et al.
Pubblicazione: (2025)

HES-SQL: Hybrid Reasoning for Efficient Text-to-SQL with Structural Skeleton Guidance
di: Qiu, Suming, et al.
Pubblicazione: (2025)

QDA-SQL: Questions Enhanced Dialogue Augmentation for Multi-Turn Text-to-SQL
di: Sun, Yinggang, et al.
Pubblicazione: (2024)

Extractive Schema Linking for Text-to-SQL
di: Glass, Michael, et al.
Pubblicazione: (2025)

SQL-PaLM: Improved Large Language Model Adaptation for Text-to-SQL (extended)
di: Sun, Ruoxi, et al.
Pubblicazione: (2023)

FinSQL: Model-Agnostic LLMs-based Text-to-SQL Framework for Financial Analysis
di: Zhang, Chao, et al.
Pubblicazione: (2024)

BAPPA: Benchmarking Agents, Plans, and Pipelines for Automated Text-to-SQL Generation
di: Ahmed, Fahim, et al.
Pubblicazione: (2025)

A Demonstration of SQLyzr: A Platform for Fine-Grained Text-to-SQL Evaluation and Analysis
di: Abedini, Sepideh, et al.
Pubblicazione: (2026)

A Survey of Text-to-SQL in the Era of LLMs: Where are we, and where are we going?
di: Liu, Xinyu, et al.
Pubblicazione: (2024)

Analyzing Performance Characteristics of PostgreSQL and MariaDB on NVMeVirt
di: Han, Juhee, et al.
Pubblicazione: (2024)

MCTS-SQL: Light-Weight LLMs can Master the Text-to-SQL through Monte Carlo Tree Search
di: Yuan, Shuozhi, et al.
Pubblicazione: (2025)

SWE-SQL: Illuminating LLM Pathways to Solve User SQL Issues in Real-World Applications
di: Li, Jinyang, et al.
Pubblicazione: (2025)

JudgeSQL: Reasoning over SQL Candidates with Weighted Consensus Tournament
di: Bai, Jiayuan, et al.
Pubblicazione: (2025)