Buchumschlag

A Case Study of Scalable Content Annotation Using Multi-LLM Consensus and Human Review

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Yuan, Mingyue, Chen, Jieshan, Xing, Zhenchang, Mohammadi, Gelareh, Quigley, Aaron
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Human-Computer Interaction
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Towards Human-AI Synergy in UI Design: Supporting Iterative Generation with LLMs
von: Yuan, Mingyue, et al.
Veröffentlicht: (2024)

MAxPrototyper: A Multi-Agent Generation System for Interactive User Interface Prototyping
von: Yuan, Mingyue, et al.
Veröffentlicht: (2024)

Investigating the Design Considerations for Integrating Text-to-Image Generative AI within Augmented Reality Environments
von: Hu, Yongquan, et al.
Veröffentlicht: (2023)

A critical analysis of cognitive load measurement methods for evaluating the usability of different types of interfaces: guidelines and framework for Human-Computer Interaction
von: Darejeh, Ali, et al.
Veröffentlicht: (2024)

GPTVoiceTasker: Advancing Multi-step Mobile Task Efficiency Through Dynamic Interface Exploration and Learning
von: Vu, Minh Duc, et al.
Veröffentlicht: (2024)

EmoStim: A Database of Emotional Film Clips with Discrete and Componential Assessment
von: Somarathna, Rukshani, et al.
Veröffentlicht: (2023)

Exploring Emotions in Multi-componential Space using Interactive VR Games
von: Somarathna, Rukshani, et al.
Veröffentlicht: (2024)

Unveiling the Tricks: Automated Detection of Dark Patterns in Mobile Applications
von: Chen, Jieshan, et al.
Veröffentlicht: (2023)

MicroCam: Leveraging Smartphone Microscope Camera for Context-Aware Contact Surface Sensing
von: Hu, Yongquan, et al.
Veröffentlicht: (2024)

Exploring Device-Oriented Video Encryption for Hierarchical Privacy Protection in AR Content Sharing
von: Hu, Yongquan, et al.
Veröffentlicht: (2024)

Towards Enhanced Context Awareness with Vision-based Multimodal Interfaces
von: Hu, Yongquan, et al.
Veröffentlicht: (2024)

MEGAnno+: A Human-LLM Collaborative Annotation System
von: Kim, Hannah, et al.
Veröffentlicht: (2024)

FactFlow: Automatic Fact Sheet Generation and Customization from Tabular Dataset via AI Chain Design & Implementation
von: Vu, Minh Duc, et al.
Veröffentlicht: (2025)

MultiSurf-GPT: Facilitating Context-Aware Reasoning with Large-Scale Language Models for Multimodal Surface Sensing
von: Hu, Yongquan, et al.
Veröffentlicht: (2024)

Multi-Agent Consensus as a Cognitive Bias Trigger in Human-AI Interaction
von: Lee, Soohwan, et al.
Veröffentlicht: (2026)

Human Perception of LLM-generated Text Content in Social Media Environments
von: Radivojevic, Kristina, et al.
Veröffentlicht: (2024)

"The explanation makes sense": An Empirical Study on LLM Performance in News Classification and its Influence on Judgment in Human-AI Collaborative Annotation
von: Wang, Qile, et al.
Veröffentlicht: (2026)

The Role of Human Creativity in the Presence of AI Creativity Tools at Work: A Case Study on AI-Driven Content Transformation in Journalism
von: Wang, Sitong, et al.
Veröffentlicht: (2025)

Using LLM-Generated Draft Replies to Support Human Experts in Responding to Stakeholder Inquiries in Maritime Industry: A Real-World Case Study of Industrial AI
von: Bach, Tita Alissa, et al.
Veröffentlicht: (2024)

AI-Generated Content in Landscape Architecture: A Survey
von: Xing, Yue, et al.
Veröffentlicht: (2025)

How Aligned are Human Chart Takeaways and LLM Predictions? A Case Study on Bar Charts with Varying Layouts
von: Wang, Huichen Will, et al.
Veröffentlicht: (2024)

Eliciting New Perspectives in RtD Studies through Annotated Portfolios: A Case Study of Robotic Artefacts
von: Hoggenmuller, Marius, et al.
Veröffentlicht: (2024)

Collaborative Human-AI Risk Annotation: Co-Annotating Online Incivility with CHAIRA
von: Park, Jinkyung Katie, et al.
Veröffentlicht: (2024)

DuoDrama: Supporting Screenplay Refinement Through LLM-Assisted Human Reflection
von: Tang, Yuying, et al.
Veröffentlicht: (2026)

Case Law Grounding: Using Precedents to Align Decision-Making for Humans and AI
von: Chen, Quan Ze, et al.
Veröffentlicht: (2023)

A Multi-Agent Framework for Democratizing XR Content Creation in K-12 Classrooms
von: Chang, Yuan, et al.
Veröffentlicht: (2026)

AgentClick: A Skill-Based Human-in-the-Loop Review Layer for Terminal AI Agents
von: Zhuang, Haomin, et al.
Veröffentlicht: (2026)

A Comparative Study on Annotation Quality of Crowdsourcing and LLM via Label Aggregation
von: Li, Jiyi
Veröffentlicht: (2024)

Learning Annotation Consensus for Continuous Emotion Recognition
von: Shoer, Ibrahim, et al.
Veröffentlicht: (2025)

Governance of AI-Generated Content: A Case Study on Social Media Platforms
von: Gao, Lan, et al.
Veröffentlicht: (2026)

Human and LLM Biases in Hate Speech Annotations: A Socio-Demographic Analysis of Annotators and Targets
von: Giorgi, Tommaso, et al.
Veröffentlicht: (2024)

Text-to-SQL Domain Adaptation via Human-LLM Collaborative Data Annotation
von: Tian, Yuan, et al.
Veröffentlicht: (2025)

Adapting Online Customer Reviews for Blind Users: A Case Study of Restaurant Reviews
von: Sunkara, Mohan, et al.
Veröffentlicht: (2025)

From Model Uncertainty to Human Attention: Localization-Aware Visual Cues for Scalable Annotation Review
von: Sbeyti, Moussa Kassem, et al.
Veröffentlicht: (2026)

An LLM-Assisted Toolkit for Inspectable Multimodal Emotion Data Annotation
von: Kuang, Zheyuan, et al.
Veröffentlicht: (2026)

Designing Human-AI System for Legal Research: A Case Study of Precedent Search in Chinese Law
von: Guan, Jiarui, et al.
Veröffentlicht: (2025)

Reliable Annotations with Less Effort: Evaluating LLM-Human Collaboration in Search Clarifications
von: Tavakoli, Leila, et al.
Veröffentlicht: (2025)

Human-LLM Hybrid Text Answer Aggregation for Crowd Annotations
von: Li, Jiyi
Veröffentlicht: (2024)

Exploring Large-Scale Language Models to Evaluate EEG-Based Multimodal Data for Mental Health
von: Hu, Yongquan, et al.
Veröffentlicht: (2024)

Adanonymizer: Interactively Navigating and Balancing the Duality of Privacy and Output Performance in Human-LLM Interaction
von: Zhang, Shuning, et al.
Veröffentlicht: (2024)