Buchumschlag

Ensuring Reproducibility in Generative AI Systems for General Use Cases: A Framework for Regression Testing and Open Datasets

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Morishige, Masumi, Koshihara, Ryo
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Computation and Language Artificial Intelligence
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Arrow-Guided VLM: Enhancing Flowchart Understanding via Arrow Direction Encoding
von: Omasa, Takamitsu, et al.
Veröffentlicht: (2025)

Overcoming Vision Language Model Challenges in Diagram Understanding: A Proof-of-Concept with XML-Driven Large Language Models Solutions
von: Shiinoki, Shue, et al.
Veröffentlicht: (2025)

Developing Story: Case Studies of Generative AI's Use in Journalism
von: Brigham, Natalie Grace, et al.
Veröffentlicht: (2024)

Narrative Context Protocol: An Open-Source Storytelling Framework for Generative AI
von: Gerba, Hank
Veröffentlicht: (2025)

aiXiv: A Next-Generation Open Access Ecosystem for Scientific Discovery Generated by AI Scientists
von: Zhang, Pengsong, et al.
Veröffentlicht: (2025)

A General Retrieval-Augmented Generation Framework for Multimodal Case-Based Reasoning Applications
von: Marom, Ofir
Veröffentlicht: (2025)

FinRpt: Dataset, Evaluation System and LLM-based Multi-agent Framework for Equity Research Report Generation
von: Jin, Song, et al.
Veröffentlicht: (2025)

ReviewEval: An Evaluation Framework for AI-Generated Reviews
von: Garg, Madhav Krishan, et al.
Veröffentlicht: (2025)

Efficient Adaptive Transformer: An Empirical Study and Reproducible Framework
von: Miller, Jan
Veröffentlicht: (2025)

Development and Testing of Retrieval Augmented Generation in Large Language Models -- A Case Study Report
von: Ke, YuHe, et al.
Veröffentlicht: (2024)

Lost-in-the-Middle in Long-Text Generation: Synthetic Dataset, Evaluation Framework, and Mitigation
von: Zhang, Junhao, et al.
Veröffentlicht: (2025)

Efficient Data Generation for Source-grounded Information-seeking Dialogs: A Use Case for Meeting Transcripts
von: Golany, Lotem, et al.
Veröffentlicht: (2024)

Generative AI Act II: Test Time Scaling Drives Cognition Engineering
von: Xia, Shijie, et al.
Veröffentlicht: (2025)

GTA-2: Benchmarking General Tool Agents from Atomic Tool-Use to Open-Ended Workflows
von: Wang, Jize, et al.
Veröffentlicht: (2026)

System Message Generation for User Preferences using Open-Source Models
von: Jeong, Minbyul, et al.
Veröffentlicht: (2025)

An Agentic AI Framework for Training General Practitioner Student Skills
von: De Marez, Victor, et al.
Veröffentlicht: (2025)

OpenAI GPT-5 System Card
von: Singh, Aaditya, et al.
Veröffentlicht: (2025)

Measuring Human Involvement in AI-Generated Text: A Case Study on Academic Writing
von: Guo, Yuchen, et al.
Veröffentlicht: (2025)

AI-Driven Generation of Old English: A Framework for Low-Resource Languages
von: Alva, Rodrigo Gabriel Salazar, et al.
Veröffentlicht: (2025)

Forbidden Science: Dual-Use AI Challenge Benchmark and Scientific Refusal Tests
von: Noever, David, et al.
Veröffentlicht: (2025)

Exploring the Potential of Machine Translation for Generating Named Entity Datasets: A Case Study between Persian and English
von: Sartipi, Amir, et al.
Veröffentlicht: (2023)

SciQAG: A Framework for Auto-Generated Science Question Answering Dataset with Fine-grained Evaluation
von: Wan, Yuwei, et al.
Veröffentlicht: (2024)

Assessing AI-Generated Questions' Alignment with Cognitive Frameworks in Educational Assessment
von: Yaacoub, Antoun, et al.
Veröffentlicht: (2025)

Compiling Prompts, Not Crafting Them: A Reproducible Workflow for AI-Assisted Evidence Synthesis
von: Susnjak, Teo
Veröffentlicht: (2025)

A Comprehensive Review of Datasets for Clinical Mental Health AI Systems
von: Mandal, Aishik, et al.
Veröffentlicht: (2025)

Generative AI and Its Impact on Personalized Intelligent Tutoring Systems
von: Maity, Subhankar, et al.
Veröffentlicht: (2024)

LIMBA: An Open-Source Framework for the Preservation and Valorization of Low-Resource Languages using Generative Models
von: Carta, Salvatore Mario, et al.
Veröffentlicht: (2024)

Can LLMs Generate Reliable Test Case Generators? A Study on Competition-Level Programming Problems
von: Cao, Yuhan, et al.
Veröffentlicht: (2025)

A Survey of Pun Generation: Datasets, Evaluations and Methodologies
von: Su, Yuchen, et al.
Veröffentlicht: (2025)

FinGen: A Dataset for Argument Generation in Finance
von: Chen, Chung-Chi, et al.
Veröffentlicht: (2024)

PyRIT: A Framework for Security Risk Identification and Red Teaming in Generative AI System
von: Munoz, Gary D. Lopez, et al.
Veröffentlicht: (2024)

REALM: A Dataset of Real-World LLM Use Cases
von: Cheng, Jingwen, et al.
Veröffentlicht: (2025)

Generation Space Size: Understanding and Calibrating Open-Endedness of LLM Generations
von: Yu, Sunny, et al.
Veröffentlicht: (2025)

Responsible AI for Test Equity and Quality: The Duolingo English Test as a Case Study
von: Burstein, Jill, et al.
Veröffentlicht: (2024)

OpenMMReasoner: Pushing the Frontiers for Multimodal Reasoning with an Open and General Recipe
von: Zhang, Kaichen, et al.
Veröffentlicht: (2025)

Nine Ways to Break Copyright Law and Why Our LLM Won't: A Fair Use Aligned Generation Framework
von: Sharma, Aakash Sen, et al.
Veröffentlicht: (2025)

Generative AI for FFRDCs
von: Maiya, Arun S.
Veröffentlicht: (2025)

SAIF: A Comprehensive Framework for Evaluating the Risks of Generative AI in the Public Sector
von: Lee, Kyeongryul, et al.
Veröffentlicht: (2025)

Open TutorAI: An Open-source Platform for Personalized and Immersive Learning with Generative AI
von: Hajji, Mohamed El, et al.
Veröffentlicht: (2026)

Responsible AI in NLP: GUS-Net Span-Level Bias Detection Dataset and Benchmark for Generalizations, Unfairness, and Stereotypes
von: Powers, Maximus, et al.
Veröffentlicht: (2024)