GEMS: Generative Expert Metric System through Iterative Prompt Priming
Fuente:
arXiv
Salvato in:
| Autori principali: | Cheng, Ti-Chung, Badea, Carmen, Bird, Christian, Zimmermann, Thomas, DeLine, Robert, Forsgren, Nicole, Ford, Denae |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Can GPT-4 Replicate Empirical Software Engineering Research?
di: Liang, Jenny T., et al.
Pubblicazione: (2023)
di: Liang, Jenny T., et al.
Pubblicazione: (2023)
AI Where It Matters: Where, Why, and How Developers Want AI Support in Daily Work
di: Choudhuri, Rudrajit, et al.
Pubblicazione: (2025)
di: Choudhuri, Rudrajit, et al.
Pubblicazione: (2025)
Investigating and Designing for Trust in AI-powered Code Generation Tools
di: Wang, Ruotong, et al.
Pubblicazione: (2023)
di: Wang, Ruotong, et al.
Pubblicazione: (2023)
To Copilot and Beyond: 22 AI Systems Developers Want Built
di: Choudhuri, Rudrajit, et al.
Pubblicazione: (2026)
di: Choudhuri, Rudrajit, et al.
Pubblicazione: (2026)
"Maybe We Need Some More Examples:" Individual and Team Drivers of Developer GenAI Tool Use
di: Miller, Courtney, et al.
Pubblicazione: (2025)
di: Miller, Courtney, et al.
Pubblicazione: (2025)
Beyond the Comfort Zone: Emerging Solutions to Overcome Challenges in Integrating LLMs into Software Products
di: Nahar, Nadia, et al.
Pubblicazione: (2024)
di: Nahar, Nadia, et al.
Pubblicazione: (2024)
Prompting in the Wild: An Empirical Study of Prompt Evolution in Software Repositories
di: Tafreshipour, Mahan, et al.
Pubblicazione: (2024)
di: Tafreshipour, Mahan, et al.
Pubblicazione: (2024)
Reproducibility of Build Environments through Space and Time
di: Malka, Julien, et al.
Pubblicazione: (2024)
di: Malka, Julien, et al.
Pubblicazione: (2024)
Efficient Prime Paths Generation
di: Zelek, Jakub, et al.
Pubblicazione: (2026)
di: Zelek, Jakub, et al.
Pubblicazione: (2026)
Selection of Prompt Engineering Techniques for Code Generation through Predicting Code Complexity
di: Wang, Chung-Yu, et al.
Pubblicazione: (2024)
di: Wang, Chung-Yu, et al.
Pubblicazione: (2024)
The First Prompt Counts the Most! An Evaluation of Large Language Models on Iterative Example-Based Code Generation
di: Fu, Yingjie, et al.
Pubblicazione: (2024)
di: Fu, Yingjie, et al.
Pubblicazione: (2024)
Good Vibrations? A Qualitative Study of Co-Creation, Communication, Flow, and Trust in Vibe Coding
di: Pimenova, Veronica, et al.
Pubblicazione: (2025)
di: Pimenova, Veronica, et al.
Pubblicazione: (2025)
MOS: Towards Effective Smart Contract Vulnerability Detection through Mixture-of-Experts Tuning of Large Language Models
di: Yuan, Hang, et al.
Pubblicazione: (2025)
di: Yuan, Hang, et al.
Pubblicazione: (2025)
ARISE -- Adaptive Refinement and Iterative Scenario Engineering
di: Poddubnyy, Konstantin, et al.
Pubblicazione: (2026)
di: Poddubnyy, Konstantin, et al.
Pubblicazione: (2026)
Green Prompt Engineering: Investigating the Energy Impact of Prompt Design in Software Engineering
di: De Martino, Vincenzo, et al.
Pubblicazione: (2025)
di: De Martino, Vincenzo, et al.
Pubblicazione: (2025)
Will It Break in Production? Metric-Driven Prediction of Residual Defects in Python Systems
di: De Rosa, Giuseppe, et al.
Pubblicazione: (2026)
di: De Rosa, Giuseppe, et al.
Pubblicazione: (2026)
Uncovering Scientific Software Sustainability through Community Engagement and Software Quality Metrics
di: Ahmed, Sharif, et al.
Pubblicazione: (2025)
di: Ahmed, Sharif, et al.
Pubblicazione: (2025)
Exploring Sustainability in Scientific Software through Code Quality & Test Coverage Metrics
di: Rahman, Sheikh Md. Mushfiqur, et al.
Pubblicazione: (2026)
di: Rahman, Sheikh Md. Mushfiqur, et al.
Pubblicazione: (2026)
Studying LLM Performance on Closed- and Open-source Data
di: Ahmed, Toufique, et al.
Pubblicazione: (2024)
di: Ahmed, Toufique, et al.
Pubblicazione: (2024)
Improving Assignment Submission in Higher Education through a Git-Enabled System: An Iterative Case Study
di: Babatunde, Ololade, et al.
Pubblicazione: (2025)
di: Babatunde, Ololade, et al.
Pubblicazione: (2025)
Understanding Dominant Themes in Reviewing Agentic AI-authored Code
di: Haider, Md. Asif, et al.
Pubblicazione: (2026)
di: Haider, Md. Asif, et al.
Pubblicazione: (2026)
An Empirical Study on the Effects of System Prompts in Instruction-Tuned Models for Code Generation
di: Cheng, Zaiyu, et al.
Pubblicazione: (2026)
di: Cheng, Zaiyu, et al.
Pubblicazione: (2026)
E-code: Mastering Efficient Code Generation through Pretrained Models and Expert Encoder Group
di: Pan, Yue, et al.
Pubblicazione: (2024)
di: Pan, Yue, et al.
Pubblicazione: (2024)
Bias Ahead: Sensitive Prompts as Early Warnings for Fairness in Large Language Models
di: Voria, Gianmario, et al.
Pubblicazione: (2026)
di: Voria, Gianmario, et al.
Pubblicazione: (2026)
On Fixing Insecure AI-Generated Code through Model Fine-Tuning and Prompting Strategies
di: Jahromi, Ali Soltanian Fard, et al.
Pubblicazione: (2026)
di: Jahromi, Ali Soltanian Fard, et al.
Pubblicazione: (2026)
How Do Microservice API Patterns Impact Understandability? A Controlled Experiment
di: Bogner, Justus, et al.
Pubblicazione: (2024)
di: Bogner, Justus, et al.
Pubblicazione: (2024)
Does Functional Package Management Enable Reproducible Builds at Scale? Yes
di: Malka, Julien, et al.
Pubblicazione: (2025)
di: Malka, Julien, et al.
Pubblicazione: (2025)
Docker Does Not Guarantee Reproducibility
di: Malka, Julien, et al.
Pubblicazione: (2026)
di: Malka, Julien, et al.
Pubblicazione: (2026)
Statistical-Based Metric Threshold Setting Method for Software Fault Prediction in Firmware Projects: An Industrial Experience
di: De Luca, Marco, et al.
Pubblicazione: (2026)
di: De Luca, Marco, et al.
Pubblicazione: (2026)
BinMetric: A Comprehensive Binary Analysis Benchmark for Large Language Models
di: Shang, Xiuwei, et al.
Pubblicazione: (2025)
di: Shang, Xiuwei, et al.
Pubblicazione: (2025)
PromptSet: A Programmer's Prompting Dataset
di: Pister, Kaiser, et al.
Pubblicazione: (2024)
di: Pister, Kaiser, et al.
Pubblicazione: (2024)
MetricSynth: Framework for Aggregating DORA and KPI Metrics Across Multi-Platform Engineering
di: Jain, Pallav, et al.
Pubblicazione: (2025)
di: Jain, Pallav, et al.
Pubblicazione: (2025)
Towards a Responsible AI Metrics Catalogue: A Collection of Metrics for AI Accountability
di: Xia, Boming, et al.
Pubblicazione: (2023)
di: Xia, Boming, et al.
Pubblicazione: (2023)
Task-oriented Prompt Enhancement via Script Generation
di: Wang, Chung-Yu, et al.
Pubblicazione: (2024)
di: Wang, Chung-Yu, et al.
Pubblicazione: (2024)
SCOPE: A Dataset of Stereotyped Prompts for Counterfactual Fairness Assessment of LLMs
di: Parziale, Alessandra, et al.
Pubblicazione: (2026)
di: Parziale, Alessandra, et al.
Pubblicazione: (2026)
Predicting the Understandability of Computational Notebooks through Code Metrics Analysis
di: Ghahfarokhi, Mojtaba Mostafavi, et al.
Pubblicazione: (2024)
di: Ghahfarokhi, Mojtaba Mostafavi, et al.
Pubblicazione: (2024)
Prompt Alchemy: Automatic Prompt Refinement for Enhancing Code Generation
di: Ye, Sixiang, et al.
Pubblicazione: (2025)
di: Ye, Sixiang, et al.
Pubblicazione: (2025)
Chain-of-Experts (CoE): Reverse Engineering Software Bills of Materials for JavaScript Application Bundles through Code Clone Search
di: Song, Leo, et al.
Pubblicazione: (2024)
di: Song, Leo, et al.
Pubblicazione: (2024)
Automatic Test-Case Reduction in Proof Assistants: A Case Study in Coq
di: Gross, Jason, et al.
Pubblicazione: (2022)
di: Gross, Jason, et al.
Pubblicazione: (2022)
Zero-Shot Prompting Approaches for LLM-based Graphical User Interface Generation
di: Kolthoff, Kristian, et al.
Pubblicazione: (2024)
di: Kolthoff, Kristian, et al.
Pubblicazione: (2024)
Documenti analoghi
-
Can GPT-4 Replicate Empirical Software Engineering Research?
di: Liang, Jenny T., et al.
Pubblicazione: (2023) -
AI Where It Matters: Where, Why, and How Developers Want AI Support in Daily Work
di: Choudhuri, Rudrajit, et al.
Pubblicazione: (2025) -
Investigating and Designing for Trust in AI-powered Code Generation Tools
di: Wang, Ruotong, et al.
Pubblicazione: (2023) -
To Copilot and Beyond: 22 AI Systems Developers Want Built
di: Choudhuri, Rudrajit, et al.
Pubblicazione: (2026) -
"Maybe We Need Some More Examples:" Individual and Team Drivers of Developer GenAI Tool Use
di: Miller, Courtney, et al.
Pubblicazione: (2025)