An Agentic Evaluation Framework for AI-Generated Scientific Code in PETSc
Fuente:
arXiv
Salvato in:
| Autori principali: | Zhang, Hong, Smith, Barry, Balay, Satish, Chen, Le, Keceli, Murat, McInnes, Lois Curfman, Zhang, Junchao |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2026
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
AI Assistants to Enhance and Exploit the PETSc Knowledge Base
di: Smith, Barry, et al.
Pubblicazione: (2025)
di: Smith, Barry, et al.
Pubblicazione: (2025)
Toward a Cohesive AI and Simulation Software Ecosystem for Scientific Innovation
di: Heroux, Michael A., et al.
Pubblicazione: (2024)
di: Heroux, Michael A., et al.
Pubblicazione: (2024)
PETSc/TAO Developments for GPU-Based Early Exascale Systems
di: Mills, Richard Tran, et al.
Pubblicazione: (2024)
di: Mills, Richard Tran, et al.
Pubblicazione: (2024)
ChemGraph: An Agentic Framework for Computational Chemistry Workflows
di: Pham, Thang D., et al.
Pubblicazione: (2025)
di: Pham, Thang D., et al.
Pubblicazione: (2025)
Reconciling Inflation with Hubble Anisotropies
di: McInnes, Brett
Pubblicazione: (2025)
di: McInnes, Brett
Pubblicazione: (2025)
Evidence that the Rate of Evolution of a Black Hole Interior Has a Holographic Dual
di: McInnes, Brett
Pubblicazione: (2023)
di: McInnes, Brett
Pubblicazione: (2023)
Intrinsic Torsion, Extrinsic Torsion, and the Hubble Parameter
di: McInnes, Brett
Pubblicazione: (2024)
di: McInnes, Brett
Pubblicazione: (2024)
Superradiance in the Bulk Protects Quantum State Evolution of Rapidly Rotating Matter on the Boundary
di: McInnes, Brett
Pubblicazione: (2024)
di: McInnes, Brett
Pubblicazione: (2024)
ChemGraph-XANES: An Agentic Framework for XANES Simulation and Analysis
di: Grizzi, Vitor F., et al.
Pubblicazione: (2026)
di: Grizzi, Vitor F., et al.
Pubblicazione: (2026)
Agentic Code Reasoning
di: Ugare, Shubham, et al.
Pubblicazione: (2026)
di: Ugare, Shubham, et al.
Pubblicazione: (2026)
Stellar engines and Dyson bubbles can be stable
di: McInnes, Colin R
Pubblicazione: (2026)
di: McInnes, Colin R
Pubblicazione: (2026)
Ringworlds and Dyson spheres can be stable
di: McInnes, Colin R
Pubblicazione: (2025)
di: McInnes, Colin R
Pubblicazione: (2025)
TusoAI: Agentic Optimization for Scientific Methods
di: Turcan, Alistair, et al.
Pubblicazione: (2025)
di: Turcan, Alistair, et al.
Pubblicazione: (2025)
Brain-Inspired AI with Hyperbolic Geometry
di: Joseph, Alexander, et al.
Pubblicazione: (2024)
di: Joseph, Alexander, et al.
Pubblicazione: (2024)
Improving Mapper's Robustness by Varying Resolution According to Lens-Space Density
di: Ruscitti, Kaleb D., et al.
Pubblicazione: (2024)
di: Ruscitti, Kaleb D., et al.
Pubblicazione: (2024)
Merged ChemProt-DrugProt for Relation Extraction from Biomedical Literature
di: Nguyen, Mai H., et al.
Pubblicazione: (2024)
di: Nguyen, Mai H., et al.
Pubblicazione: (2024)
EAIRA: Establishing a Methodology for Evaluating AI Models as Scientific Research Assistants
di: Cappello, Franck, et al.
Pubblicazione: (2025)
di: Cappello, Franck, et al.
Pubblicazione: (2025)
Holistic Evaluation of State-of-the-Art LLMs for Code Generation
di: Zhang, Le, et al.
Pubblicazione: (2025)
di: Zhang, Le, et al.
Pubblicazione: (2025)
SciHorizon-DataEVA: An Agentic System for AI-Readiness Evaluation of Heterogeneous Scientific Data
di: Liu, Dianyu, et al.
Pubblicazione: (2026)
di: Liu, Dianyu, et al.
Pubblicazione: (2026)
Persistent Multiscale Density-based Clustering
di: Bot, Daniël, et al.
Pubblicazione: (2025)
di: Bot, Daniël, et al.
Pubblicazione: (2025)
GCM Simulations of Eastern Australian Cutoff Lows
di: Jack J. Katzfey and Kathleen L. McInnes
Pubblicazione: (1996)
di: Jack J. Katzfey and Kathleen L. McInnes
Pubblicazione: (1996)
SR-Scientist: Scientific Equation Discovery With Agentic AI
di: Xia, Shijie, et al.
Pubblicazione: (2025)
di: Xia, Shijie, et al.
Pubblicazione: (2025)
The AI Scientific Community: Agentic Virtual Lab Swarms
di: Braga-Neto, Ulisses
Pubblicazione: (2026)
di: Braga-Neto, Ulisses
Pubblicazione: (2026)
Agentic AI Scientists Are Not Built For Autonomous Scientific Discovery
di: Bisht, Harshit, et al.
Pubblicazione: (2026)
di: Bisht, Harshit, et al.
Pubblicazione: (2026)
Agentic Design Patterns: A System-Theoretic Framework
di: Dao, Minh-Dung, et al.
Pubblicazione: (2026)
di: Dao, Minh-Dung, et al.
Pubblicazione: (2026)
BibAgent: An Agentic Framework for Traceable Miscitation Detection in Scientific Literature
di: Li, Peiran, et al.
Pubblicazione: (2026)
di: Li, Peiran, et al.
Pubblicazione: (2026)
SciNav: A General Agent Framework for Scientific Coding Tasks
di: Zhang, Tianshu, et al.
Pubblicazione: (2026)
di: Zhang, Tianshu, et al.
Pubblicazione: (2026)
PRiSM: An Agentic Multimodal Benchmark for Scientific Reasoning via Python-Grounded Evaluation
di: Imani, Shima, et al.
Pubblicazione: (2025)
di: Imani, Shima, et al.
Pubblicazione: (2025)
TRACE: A Conversational Framework for Sustainable Tourism Recommendation with Agentic Counterfactual Explanations
di: Banerjee, Ashmi, et al.
Pubblicazione: (2026)
di: Banerjee, Ashmi, et al.
Pubblicazione: (2026)
Collab-REC: An LLM-based Agentic Framework for Balancing Recommendations in Tourism
di: Banerjee, Ashmi, et al.
Pubblicazione: (2025)
di: Banerjee, Ashmi, et al.
Pubblicazione: (2025)
BloClaw: An Omniscient, Multi-Modal Agentic Workspace for Next-Generation Scientific Discovery
di: Qin, Yao, et al.
Pubblicazione: (2026)
di: Qin, Yao, et al.
Pubblicazione: (2026)
Memorize or Generalize? Evaluating LLM Code Generation with Code Rewriting
di: Zhang, Lizhe, et al.
Pubblicazione: (2025)
di: Zhang, Lizhe, et al.
Pubblicazione: (2025)
InteractScience: Programmatic and Visually-Grounded Evaluation of Interactive Scientific Demonstration Code Generation
di: Chen, Qiaosheng, et al.
Pubblicazione: (2025)
di: Chen, Qiaosheng, et al.
Pubblicazione: (2025)
The Auton Agentic AI Framework
di: Cao, Sheng, et al.
Pubblicazione: (2026)
di: Cao, Sheng, et al.
Pubblicazione: (2026)
Vibe Coding vs. Agentic Coding: Fundamentals and Practical Implications of Agentic AI
di: Sapkota, Ranjan, et al.
Pubblicazione: (2025)
di: Sapkota, Ranjan, et al.
Pubblicazione: (2025)
FlyAOC: Evaluating Agentic Ontology Curation of Drosophila Scientific Knowledge Bases
di: Zhang, Xingjian, et al.
Pubblicazione: (2026)
di: Zhang, Xingjian, et al.
Pubblicazione: (2026)
CodeDistiller: Automatically Generating Code Libraries for Scientific Coding Agents
di: Jansen, Peter, et al.
Pubblicazione: (2025)
di: Jansen, Peter, et al.
Pubblicazione: (2025)
Evaluating Agentic AI in the Wild: Failure Modes, Drift Patterns, and a Production Evaluation Framework
di: Pandey, Mukund
Pubblicazione: (2026)
di: Pandey, Mukund
Pubblicazione: (2026)
InternAgent-1.5: A Unified Agentic Framework for Long-Horizon Autonomous Scientific Discovery
di: Feng, Shiyang, et al.
Pubblicazione: (2026)
di: Feng, Shiyang, et al.
Pubblicazione: (2026)
An Agentic AI Framework for Training General Practitioner Student Skills
di: De Marez, Victor, et al.
Pubblicazione: (2025)
di: De Marez, Victor, et al.
Pubblicazione: (2025)
Documenti analoghi
-
AI Assistants to Enhance and Exploit the PETSc Knowledge Base
di: Smith, Barry, et al.
Pubblicazione: (2025) -
Toward a Cohesive AI and Simulation Software Ecosystem for Scientific Innovation
di: Heroux, Michael A., et al.
Pubblicazione: (2024) -
PETSc/TAO Developments for GPU-Based Early Exascale Systems
di: Mills, Richard Tran, et al.
Pubblicazione: (2024) -
ChemGraph: An Agentic Framework for Computational Chemistry Workflows
di: Pham, Thang D., et al.
Pubblicazione: (2025) -
Reconciling Inflation with Hubble Anisotropies
di: McInnes, Brett
Pubblicazione: (2025)