Rocks Coding, Not Development--A Human-Centric, Experimental Evaluation of LLM-Supported SE Tasks
Fuente:
arXiv
Gespeichert in:
| Hauptverfasser: | Wang, Wei, Ning, Huilong, Zhang, Gaowei, Liu, Libo, Wang, Yi |
|---|---|
| Format: | Preprint |
| Veröffentlicht: |
2024
|
| Schlagworte: | |
| Online-Zugang: | |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Ähnliche Einträge
RMCBench: Benchmarking Large Language Models' Resistance to Malicious Code
von: Chen, Jiachi, et al.
Veröffentlicht: (2024)
von: Chen, Jiachi, et al.
Veröffentlicht: (2024)
Model-Driven Legacy System Modernization at Scale
von: Böhm, Tobias, et al.
Veröffentlicht: (2026)
von: Böhm, Tobias, et al.
Veröffentlicht: (2026)
AutoCodeSherpa: Symbolic Explanations in AI Coding Agents
von: Kang, Sungmin, et al.
Veröffentlicht: (2025)
von: Kang, Sungmin, et al.
Veröffentlicht: (2025)
Design Patterns for Multilevel Modeling and Simulation
von: Serena, Luca, et al.
Veröffentlicht: (2024)
von: Serena, Luca, et al.
Veröffentlicht: (2024)
Toward Architecture-Aware Evaluation Metrics for LLM Agents
von: Souza, Débora, et al.
Veröffentlicht: (2026)
von: Souza, Débora, et al.
Veröffentlicht: (2026)
Who Writes the Docs in SE 3.0? Agent vs. Human Documentation Pull Requests
von: Yamasaki, Kazuma, et al.
Veröffentlicht: (2026)
von: Yamasaki, Kazuma, et al.
Veröffentlicht: (2026)
Automated Deep Learning Optimization via DSL-Based Source Code Transformation
von: Wang, Ruixin, et al.
Veröffentlicht: (2024)
von: Wang, Ruixin, et al.
Veröffentlicht: (2024)
LLM-Driven Cost-Effective Requirements Change Impact Analysis
von: Etezadi, Romina, et al.
Veröffentlicht: (2025)
von: Etezadi, Romina, et al.
Veröffentlicht: (2025)
CCCI: Code Completion with Contextual Information for Complex Data Transfer Tasks Using Large Language Models
von: Jin, Hangzhan, et al.
Veröffentlicht: (2025)
von: Jin, Hangzhan, et al.
Veröffentlicht: (2025)
CIFE: Code Instruction-Following Evaluation
von: Gunnu, Sravani, et al.
Veröffentlicht: (2025)
von: Gunnu, Sravani, et al.
Veröffentlicht: (2025)
Triage: Routing Software Engineering Tasks to Cost-Effective LLM Tiers via Code Quality Signals
von: Madeyski, Lech
Veröffentlicht: (2026)
von: Madeyski, Lech
Veröffentlicht: (2026)
An Empirical Study on the Effectiveness of Large Language Models for SATD Identification and Classification
von: Sheikhaei, Mohammad Sadegh, et al.
Veröffentlicht: (2024)
von: Sheikhaei, Mohammad Sadegh, et al.
Veröffentlicht: (2024)
Test-driven Software Experimentation with LASSO: an LLM Prompt Benchmarking Example
von: Kessel, Marcus
Veröffentlicht: (2024)
von: Kessel, Marcus
Veröffentlicht: (2024)
Compiled AI: Deterministic Code Generation for LLM-Based Workflow Automation
von: Trooskens, Geert, et al.
Veröffentlicht: (2026)
von: Trooskens, Geert, et al.
Veröffentlicht: (2026)
AI Agentic workflows and Enterprise APIs: Adapting API architectures for the age of AI agents
von: Tupe, Vaibhav, et al.
Veröffentlicht: (2025)
von: Tupe, Vaibhav, et al.
Veröffentlicht: (2025)
Review Beats Planning: Dual-Model Interaction Patterns for Code Synthesis
von: Miller, Jan
Veröffentlicht: (2026)
von: Miller, Jan
Veröffentlicht: (2026)
LLM-Assisted Translation of Legacy FORTRAN Codes to C++: A Cross-Platform Study
von: Ranasinghe, Nishath Rajiv, et al.
Veröffentlicht: (2025)
von: Ranasinghe, Nishath Rajiv, et al.
Veröffentlicht: (2025)
Bounded Autonomy for Enterprise AI: Typed Action Contracts and Consumer-Side Execution
von: Sohail, Sarmad, et al.
Veröffentlicht: (2026)
von: Sohail, Sarmad, et al.
Veröffentlicht: (2026)
RelRepair: Enhancing Automated Program Repair by Retrieving Relevant Code
von: Liu, Shunyu, et al.
Veröffentlicht: (2025)
von: Liu, Shunyu, et al.
Veröffentlicht: (2025)
SmellBench: Evaluating LLM Agents on Architectural Code Smell Repair
von: Dinu, Ion George, et al.
Veröffentlicht: (2026)
von: Dinu, Ion George, et al.
Veröffentlicht: (2026)
EyeLayer: Integrating Human Attention Patterns into LLM-Based Code Summarization
von: Zhang, Jiahao, et al.
Veröffentlicht: (2026)
von: Zhang, Jiahao, et al.
Veröffentlicht: (2026)
The Specification as Quality Gate: Three Hypotheses on AI-Assisted Code Review
von: Zietsman, Christo
Veröffentlicht: (2026)
von: Zietsman, Christo
Veröffentlicht: (2026)
From Machine Learning Documentation to Requirements: Bridging Processes with Requirements Languages
von: Peng, Yi, et al.
Veröffentlicht: (2025)
von: Peng, Yi, et al.
Veröffentlicht: (2025)
Enhancing LLM Code Generation Capabilities through Test-Driven Development and Code Interpreter
von: Jalil, Sajed, et al.
Veröffentlicht: (2025)
von: Jalil, Sajed, et al.
Veröffentlicht: (2025)
BACE: LLM-based Code Generation through Bayesian Anchored Co-Evolution of Code and Test Populations
von: Silva, Kaushitha, et al.
Veröffentlicht: (2026)
von: Silva, Kaushitha, et al.
Veröffentlicht: (2026)
Towards Reliable Generation of Executable Workflows by Foundation Models
von: Masoumzadeh, Sogol, et al.
Veröffentlicht: (2025)
von: Masoumzadeh, Sogol, et al.
Veröffentlicht: (2025)
UTBoost: Rigorous Evaluation of Coding Agents on SWE-Bench
von: Yu, Boxi, et al.
Veröffentlicht: (2025)
von: Yu, Boxi, et al.
Veröffentlicht: (2025)
Refute-or-Promote: An Adversarial Stage-Gated Multi-Agent Review Methodology for High-Precision LLM-Assisted Defect Discovery
von: Agarwal, Abhinav
Veröffentlicht: (2026)
von: Agarwal, Abhinav
Veröffentlicht: (2026)
Multicalibration for LLM-based Code Generation
von: Campos, Viola, et al.
Veröffentlicht: (2025)
von: Campos, Viola, et al.
Veröffentlicht: (2025)
CodeCompass: Navigating the Navigation Paradox in Agentic Code Intelligence
von: Paipuru, Tarakanath
Veröffentlicht: (2026)
von: Paipuru, Tarakanath
Veröffentlicht: (2026)
AdaDec: A Uncertainty-Guided Lookahead Decoding Framework for LLM-Based Code Generation
von: He, Kaifeng, et al.
Veröffentlicht: (2025)
von: He, Kaifeng, et al.
Veröffentlicht: (2025)
OODEval: Evaluating Large Language Models on Object-Oriented Design
von: Xiao, Bingxu, et al.
Veröffentlicht: (2026)
von: Xiao, Bingxu, et al.
Veröffentlicht: (2026)
How Generation Architecture Shapes Code Complexity in Multi-Agent LLM Systems: A Paired Study on HumanEval
von: Ashrafi, Nazmus
Veröffentlicht: (2026)
von: Ashrafi, Nazmus
Veröffentlicht: (2026)
LLMLOOP: Improving LLM-Generated Code and Tests through Automated Iterative Feedback Loops
von: Ravi, Ravin, et al.
Veröffentlicht: (2026)
von: Ravi, Ravin, et al.
Veröffentlicht: (2026)
ATLAS: A Layered Constraint-Guided Framework for Structured Artifact Generation in LLM-Assisted MDE
von: Ma, Tong, et al.
Veröffentlicht: (2025)
von: Ma, Tong, et al.
Veröffentlicht: (2025)
MeDeT: Medical Device Digital Twins Creation with Few-shot Meta-learning
von: Sartaj, Hassan, et al.
Veröffentlicht: (2024)
von: Sartaj, Hassan, et al.
Veröffentlicht: (2024)
Can ChatGPT Support Developers? An Empirical Evaluation of Large Language Models for Code Generation
von: Jin, Kailun, et al.
Veröffentlicht: (2024)
von: Jin, Kailun, et al.
Veröffentlicht: (2024)
Abstain and Validate: A Dual-LLM Policy for Reducing Noise in Agentic Program Repair
von: Cambronero, José, et al.
Veröffentlicht: (2025)
von: Cambronero, José, et al.
Veröffentlicht: (2025)
Prompt Engineering Strategies for LLM-based Qualitative Coding of Psychological Safety in Software Engineering Communities: A Controlled Empirical Study
von: Alshaikh, Moaath, et al.
Veröffentlicht: (2026)
von: Alshaikh, Moaath, et al.
Veröffentlicht: (2026)
Comparing Human and LLM Generated Code: The Jury is Still Out!
von: Licorish, Sherlock A., et al.
Veröffentlicht: (2025)
von: Licorish, Sherlock A., et al.
Veröffentlicht: (2025)
Ähnliche Einträge
-
RMCBench: Benchmarking Large Language Models' Resistance to Malicious Code
von: Chen, Jiachi, et al.
Veröffentlicht: (2024) -
Model-Driven Legacy System Modernization at Scale
von: Böhm, Tobias, et al.
Veröffentlicht: (2026) -
AutoCodeSherpa: Symbolic Explanations in AI Coding Agents
von: Kang, Sungmin, et al.
Veröffentlicht: (2025) -
Design Patterns for Multilevel Modeling and Simulation
von: Serena, Luca, et al.
Veröffentlicht: (2024) -
Toward Architecture-Aware Evaluation Metrics for LLM Agents
von: Souza, Débora, et al.
Veröffentlicht: (2026)