AstroVisBench: A Code Benchmark for Scientific Computing and Visualization in Astronomy
Fuente:
arXiv
Salvato in:
| Autori principali: | Joseph, Sebastian Antony, Husain, Syed Murtaza, Offner, Stella S. R., Juneau, Stéphanie, Torrey, Paul, Bolton, Adam S., Farias, Juan P., Gaffney, Niall, Durrett, Greg, Li, Junyi Jessy |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Using Natural Language Explanations to Rescale Human Judgments
di: Wadhwa, Manya, et al.
Pubblicazione: (2023)
di: Wadhwa, Manya, et al.
Pubblicazione: (2023)
Learning to Refine with Fine-Grained Natural Language Feedback
di: Wadhwa, Manya, et al.
Pubblicazione: (2024)
di: Wadhwa, Manya, et al.
Pubblicazione: (2024)
VESTA: Visual Exploration with Statistical Tool Agents
di: Rudman, William, et al.
Pubblicazione: (2026)
di: Rudman, William, et al.
Pubblicazione: (2026)
Which questions should I answer? Salience Prediction of Inquisitive Questions
di: Wu, Yating, et al.
Pubblicazione: (2024)
di: Wu, Yating, et al.
Pubblicazione: (2024)
CREATE: Testing LLMs for Associative Creativity
di: Wadhwa, Manya, et al.
Pubblicazione: (2026)
di: Wadhwa, Manya, et al.
Pubblicazione: (2026)
VeriSoftBench: Repository-Scale Formal Verification Benchmarks for Lean
di: Xin, Yutong, et al.
Pubblicazione: (2026)
di: Xin, Yutong, et al.
Pubblicazione: (2026)
EvalAgent: Discovering Implicit Evaluation Criteria from the Web
di: Wadhwa, Manya, et al.
Pubblicazione: (2025)
di: Wadhwa, Manya, et al.
Pubblicazione: (2025)
QUDsim: Quantifying Discourse Similarities in LLM-Generated Text
di: Namuduri, Ramya, et al.
Pubblicazione: (2025)
di: Namuduri, Ramya, et al.
Pubblicazione: (2025)
AstroMLab 2: AstroLLaMA-2-70B Model and Benchmarking Specialised LLMs for Astronomy
di: Pan, Rui, et al.
Pubblicazione: (2024)
di: Pan, Rui, et al.
Pubblicazione: (2024)
Coeditor: Leveraging Contextual Changes for Multi-round Code Auto-editing
di: Wei, Jiayi, et al.
Pubblicazione: (2023)
di: Wei, Jiayi, et al.
Pubblicazione: (2023)
CodeUpdateArena: Benchmarking Knowledge Editing on API Updates
di: Liu, Zeyu Leo, et al.
Pubblicazione: (2024)
di: Liu, Zeyu Leo, et al.
Pubblicazione: (2024)
CRUST-Bench: A Comprehensive Benchmark for C-to-safe-Rust Transpilation
di: Khatry, Anirudh, et al.
Pubblicazione: (2025)
di: Khatry, Anirudh, et al.
Pubblicazione: (2025)
AstroMMBench: A Benchmark for Evaluating Multimodal Large Language Models Capabilities in Astronomy
di: Shi, Jinghang, et al.
Pubblicazione: (2025)
di: Shi, Jinghang, et al.
Pubblicazione: (2025)
Molecular Facts: Desiderata for Decontextualization in LLM Fact Verification
di: Gunjal, Anisha, et al.
Pubblicazione: (2024)
di: Gunjal, Anisha, et al.
Pubblicazione: (2024)
SynthesizRR: Generating Diverse Datasets with Retrieval Augmentation
di: Divekar, Abhishek, et al.
Pubblicazione: (2024)
di: Divekar, Abhishek, et al.
Pubblicazione: (2024)
SciVisAgentBench: A Benchmark for Evaluating Scientific Data Analysis and Visualization Agents
di: Ai, Kuangshi, et al.
Pubblicazione: (2026)
di: Ai, Kuangshi, et al.
Pubblicazione: (2026)
AstroPT: Scaling Large Observation Models for Astronomy
di: Smith, Michael J., et al.
Pubblicazione: (2024)
di: Smith, Michael J., et al.
Pubblicazione: (2024)
AstroMLab 1: Who Wins Astronomy Jeopardy!?
di: Ting, Yuan-Sen, et al.
Pubblicazione: (2024)
di: Ting, Yuan-Sen, et al.
Pubblicazione: (2024)
Astro-COLIBRI: Empowering Citizen Scientists in Time Domain Astronomy
di: Schüssler, Fabian, et al.
Pubblicazione: (2024)
di: Schüssler, Fabian, et al.
Pubblicazione: (2024)
OntoPortal-Astro, a Semantic Artefact Catalogue for Astronomy
di: Cecconi, Baptiste, et al.
Pubblicazione: (2025)
di: Cecconi, Baptiste, et al.
Pubblicazione: (2025)
AInsteinBench: Benchmarking Coding Agents on Scientific Repositories
di: Duston, Titouan, et al.
Pubblicazione: (2025)
di: Duston, Titouan, et al.
Pubblicazione: (2025)
Computational advances and challenges in simulations of turbulence and star formation
di: Federrath, Christoph, et al.
Pubblicazione: (2025)
di: Federrath, Christoph, et al.
Pubblicazione: (2025)
CLEVER: A Curated Benchmark for Formally Verified Code Generation
di: Thakur, Amitayush, et al.
Pubblicazione: (2025)
di: Thakur, Amitayush, et al.
Pubblicazione: (2025)
LEGOBench: Scientific Leaderboard Generation Benchmark
di: Singh, Shruti, et al.
Pubblicazione: (2024)
di: Singh, Shruti, et al.
Pubblicazione: (2024)
Calibrate-Then-Act: Cost-Aware Exploration in LLM Agents
di: Ding, Wenxuan, et al.
Pubblicazione: (2026)
di: Ding, Wenxuan, et al.
Pubblicazione: (2026)
MiniCheck: Efficient Fact-Checking of LLMs on Grounding Documents
di: Tang, Liyan, et al.
Pubblicazione: (2024)
di: Tang, Liyan, et al.
Pubblicazione: (2024)
Understanding Synthetic Context Extension via Retrieval Heads
di: Zhao, Xinyu, et al.
Pubblicazione: (2024)
di: Zhao, Xinyu, et al.
Pubblicazione: (2024)
From Distributional to Overton Pluralism: Investigating Large Language Model Alignment
di: Lake, Thom, et al.
Pubblicazione: (2024)
di: Lake, Thom, et al.
Pubblicazione: (2024)
LoFiT: Localized Fine-tuning on LLM Representations
di: Yin, Fangcong, et al.
Pubblicazione: (2024)
di: Yin, Fangcong, et al.
Pubblicazione: (2024)
Multimodal QUD: Inquisitive Questions from Scientific Figures
di: Wu, Yating, et al.
Pubblicazione: (2026)
di: Wu, Yating, et al.
Pubblicazione: (2026)
Robo-Instruct: Simulator-Augmented Instruction Alignment For Finetuning Code LLMs
di: Hu, Zichao, et al.
Pubblicazione: (2024)
di: Hu, Zichao, et al.
Pubblicazione: (2024)
SuperBench: A Super-Resolution Benchmark Dataset for Scientific Machine Learning
di: Ren, Pu, et al.
Pubblicazione: (2023)
di: Ren, Pu, et al.
Pubblicazione: (2023)
AstroSpy: On detecting Fake Images in Astronomy via Joint Image-Spectral Representations
di: Alam, Mohammed Talha, et al.
Pubblicazione: (2024)
di: Alam, Mohammed Talha, et al.
Pubblicazione: (2024)
Stellar populations in STARFORGE II: Comparison with observations
di: Farias, Juan P., et al.
Pubblicazione: (2025)
di: Farias, Juan P., et al.
Pubblicazione: (2025)
PropMEND: Hypernetworks for Knowledge Propagation in LLMs
di: Liu, Zeyu Leo, et al.
Pubblicazione: (2025)
di: Liu, Zeyu Leo, et al.
Pubblicazione: (2025)
X-PARADE: Cross-Lingual Textual Entailment and Information Divergence across Paragraphs
di: Rodriguez, Juan Diego, et al.
Pubblicazione: (2023)
di: Rodriguez, Juan Diego, et al.
Pubblicazione: (2023)
AstroMLab 4: Benchmark-Topping Performance in Astronomy Q&A with a 70B-Parameter Domain-Specialized Reasoning Model
di: de Haan, Tijmen, et al.
Pubblicazione: (2025)
di: de Haan, Tijmen, et al.
Pubblicazione: (2025)
VisBrowse-Bench: Benchmarking Visual-Native Search for Multimodal Browsing Agents
di: Zhang, Zhengbo, et al.
Pubblicazione: (2026)
di: Zhang, Zhengbo, et al.
Pubblicazione: (2026)
From EduVisBench to EduVisAgent: A Benchmark and Multi-Agent Framework for Reasoning-Driven Pedagogical Visualization
di: Ji, Haonian, et al.
Pubblicazione: (2025)
di: Ji, Haonian, et al.
Pubblicazione: (2025)
Astro-NER -- Astronomy Named Entity Recognition: Is GPT a Good Domain Expert Annotator?
di: Evans, Julia, et al.
Pubblicazione: (2024)
di: Evans, Julia, et al.
Pubblicazione: (2024)
Documenti analoghi
-
Using Natural Language Explanations to Rescale Human Judgments
di: Wadhwa, Manya, et al.
Pubblicazione: (2023) -
Learning to Refine with Fine-Grained Natural Language Feedback
di: Wadhwa, Manya, et al.
Pubblicazione: (2024) -
VESTA: Visual Exploration with Statistical Tool Agents
di: Rudman, William, et al.
Pubblicazione: (2026) -
Which questions should I answer? Salience Prediction of Inquisitive Questions
di: Wu, Yating, et al.
Pubblicazione: (2024) -
CREATE: Testing LLMs for Associative Creativity
di: Wadhwa, Manya, et al.
Pubblicazione: (2026)