OPeRA: A Dataset of Observation, Persona, Rationale, and Action for Evaluating LLMs on Human Online Shopping Behavior Simulation
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Wang, Ziyi, Lu, Yuxuan, Li, Wenbo, Amini, Amirali, Sun, Bo, Bart, Yakov, Lyu, Weimin, Gesi, Jiri, Wang, Tian, Huang, Jing, Su, Yu, Ehsan, Upol, Alikhani, Malihe, Li, Toby Jia-Jun, Chilton, Lydia, Wang, Dakuo |
|---|---|
| Format: | Preprint |
| Publié: |
2025
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
LLM Agent Meets Agentic AI: Can LLM Agents Simulate Customers to Evaluate Agentic-AI-based Shopping Assistants?
par: Sun, Lu, et autres
Publié: (2025)
par: Sun, Lu, et autres
Publié: (2025)
Shop-R1: Rewarding LLMs to Simulate Human Behavior in Online Shopping via Reinforcement Learning
par: Zhang, Yimeng, et autres
Publié: (2025)
par: Zhang, Yimeng, et autres
Publié: (2025)
Customer-R1: Personalized Simulation of Human Behaviors via RL-based LLM Agent in Online Shopping
par: Wang, Ziyi, et autres
Publié: (2025)
par: Wang, Ziyi, et autres
Publié: (2025)
UXAgent: A System for Simulating Usability Testing of Web Design with LLM Agents
par: Lu, Yuxuan, et autres
Publié: (2025)
par: Lu, Yuxuan, et autres
Publié: (2025)
UXAgent: An LLM Agent-Based Usability Testing Framework for Web Design
par: Lu, Yuxuan, et autres
Publié: (2025)
par: Lu, Yuxuan, et autres
Publié: (2025)
Evaluating Theory of (an uncertain) Mind: Predicting the Uncertain Beliefs of Others in Conversation Forecasting
par: Sicilia, Anthony, et autres
Publié: (2024)
par: Sicilia, Anthony, et autres
Publié: (2024)
Eliciting Uncertainty in Chain-of-Thought to Mitigate Bias against Forecasting Harmful User Behaviors
par: Sicilia, Anthony, et autres
Publié: (2024)
par: Sicilia, Anthony, et autres
Publié: (2024)
Explainable AI Reloaded: Challenging the XAI Status Quo in the Era of Large Language Models
par: Ehsan, Upol, et autres
Publié: (2024)
par: Ehsan, Upol, et autres
Publié: (2024)
Beyond Self-learned Attention: Mitigating Attention Bias in Transformer-based Models Using Attention Guidance
par: Gesi, Jiri, et autres
Publié: (2024)
par: Gesi, Jiri, et autres
Publié: (2024)
Schemex: Discovering Design Patterns from Examples through Iterative Abstraction and Refinement
par: Wang, Sitong, et autres
Publié: (2025)
par: Wang, Sitong, et autres
Publié: (2025)
Multi-Agent-as-Judge: Aligning LLM-Agent-Based Automated Evaluation with Multi-Dimensional Human Evaluation
par: Chen, Jiaju, et autres
Publié: (2025)
par: Chen, Jiaju, et autres
Publié: (2025)
Studying and Mitigating Biases in Sign Language Understanding Models
par: Atwell, Katherine, et autres
Publié: (2024)
par: Atwell, Katherine, et autres
Publié: (2024)
An Active Learning Framework for Inclusive Generation by Large Language Models
par: Hassan, Sabit, et autres
Publié: (2024)
par: Hassan, Sabit, et autres
Publié: (2024)
Accounting for Sycophancy in Language Model Uncertainty Estimation
par: Sicilia, Anthony, et autres
Publié: (2024)
par: Sicilia, Anthony, et autres
Publié: (2024)
Active Learning for Robust and Representative LLM Generation in Safety-Critical Scenarios
par: Hassan, Sabit, et autres
Publié: (2024)
par: Hassan, Sabit, et autres
Publié: (2024)
MoodSmith: Enabling Mood-Consistent Multimedia for AI-Generated Advocacy Campaigns
par: Menon, Samia, et autres
Publié: (2024)
par: Menon, Samia, et autres
Publié: (2024)
See, Think, Act: Online Shopper Behavior Simulation with VLM Agents
par: Zhang, Yimeng, et autres
Publié: (2025)
par: Zhang, Yimeng, et autres
Publié: (2025)
HumBEL: A Human-in-the-Loop Approach for Evaluating Demographic Factors of Language Models in Human-Machine Conversations
par: Sicilia, Anthony, et autres
Publié: (2023)
par: Sicilia, Anthony, et autres
Publié: (2023)
Simulating Human Strategic Behavior: Comparing Single and Multi-agent LLMs
par: Sreedhar, Karthik, et autres
Publié: (2024)
par: Sreedhar, Karthik, et autres
Publié: (2024)
Rewriting Video: Text-Driven Reauthoring of Video Footage
par: Wang, Sitong, et autres
Publié: (2026)
par: Wang, Sitong, et autres
Publié: (2026)
Copying style, Extracting value: Illustrators' Perception of AI Style Transfer and its Impact on Creative Labor
par: Porquet, Julien, et autres
Publié: (2024)
par: Porquet, Julien, et autres
Publié: (2024)
WEBSERV: A Full-Stack and RL-Ready Web Environment for Training Web Agents at Scale
par: Lu, Yuxuan, et autres
Publié: (2025)
par: Lu, Yuxuan, et autres
Publié: (2025)
BASIL: Bayesian Assessment of Sycophancy in LLMs
par: Atwell, Katherine, et autres
Publié: (2025)
par: Atwell, Katherine, et autres
Publié: (2025)
"Nothing about us without us": Perspectives of Global Deaf and Hard-of-hearing Community Members on Sign Language Technologies
par: Atwell, Katherine, et autres
Publié: (2025)
par: Atwell, Katherine, et autres
Publié: (2025)
Fairness at Every Intersection: Uncovering and Mitigating Intersectional Biases in Multimodal Clinical Predictions
par: Ramachandranpillai, Resmi, et autres
Publié: (2024)
par: Ramachandranpillai, Resmi, et autres
Publié: (2024)
SiLVERScore: Semantically-Aware Embeddings for Sign Language Generation Evaluation
par: Imai, Saki, et autres
Publié: (2025)
par: Imai, Saki, et autres
Publié: (2025)
Measuring How (Not Just Whether) VLMs Build Common Ground
par: Imai, Saki, et autres
Publié: (2025)
par: Imai, Saki, et autres
Publié: (2025)
Including Facial Expressions in Contextual Embeddings for Sign Language Generation
par: Viegas, Carla, et autres
Publié: (2022)
par: Viegas, Carla, et autres
Publié: (2022)
Can LLM Agents Simulate Multi-Turn Human Behavior? Evidence from Real Online Customer Behavior Data
par: Lu, Yuxuan, et autres
Publié: (2025)
par: Lu, Yuxuan, et autres
Publié: (2025)
Eliciting Topic Hierarchies from Large Language Models
par: Li, Grace, et autres
Publié: (2023)
par: Li, Grace, et autres
Publié: (2023)
Trajectory2Task: Training Robust Tool-Calling Agents with Synthesized Yet Verifiable Data for Complex User Intents
par: Wang, Ziyi, et autres
Publié: (2026)
par: Wang, Ziyi, et autres
Publié: (2026)
Towards Robustness Analysis of E-Commerce Ranking System
par: Wang, Ningfei, et autres
Publié: (2024)
par: Wang, Ningfei, et autres
Publié: (2024)
Beyond Training: How Workers Discover Value in Enterprise AI
par: Sahni, Riya, et autres
Publié: (2025)
par: Sahni, Riya, et autres
Publié: (2025)
AI Humor Generation: Cognitive, Social and Creative Skills for Effective Humor
par: Kim, Sean, et autres
Publié: (2025)
par: Kim, Sean, et autres
Publié: (2025)
Towards a Design Guideline for RPA Evaluation: A Survey of Large Language Model-Based Role-Playing Agents
par: Chen, Chaoran, et autres
Publié: (2025)
par: Chen, Chaoran, et autres
Publié: (2025)
Human-centered explanation does not fit all: The interplay of sociotechnical, cognitive, and individual factors in the effect AI explanations in algorithmic decision-making
par: Ahn, Yongsu, et autres
Publié: (2025)
par: Ahn, Yongsu, et autres
Publié: (2025)
Firefly: Illuminating Large-Scale Verified Tool-Call Data Generation from Real APIs
par: Lu, Yuxuan, et autres
Publié: (2026)
par: Lu, Yuxuan, et autres
Publié: (2026)
Through the Lens of Human-Human Collaboration: A Configurable Research Platform for Exploring Human-Agent Collaboration
par: Yao, Bingsheng, et autres
Publié: (2025)
par: Yao, Bingsheng, et autres
Publié: (2025)
Coherence-Driven Multimodal Safety Dialogue with Active Learning for Embodied Agents
par: Hassan, Sabit, et autres
Publié: (2024)
par: Hassan, Sabit, et autres
Publié: (2024)
Modeling Intensification for Sign Language Generation: A Computational Approach
par: İnan, Mert, et autres
Publié: (2022)
par: İnan, Mert, et autres
Publié: (2022)
Documents similaires
-
LLM Agent Meets Agentic AI: Can LLM Agents Simulate Customers to Evaluate Agentic-AI-based Shopping Assistants?
par: Sun, Lu, et autres
Publié: (2025) -
Shop-R1: Rewarding LLMs to Simulate Human Behavior in Online Shopping via Reinforcement Learning
par: Zhang, Yimeng, et autres
Publié: (2025) -
Customer-R1: Personalized Simulation of Human Behaviors via RL-based LLM Agent in Online Shopping
par: Wang, Ziyi, et autres
Publié: (2025) -
UXAgent: A System for Simulating Usability Testing of Web Design with LLM Agents
par: Lu, Yuxuan, et autres
Publié: (2025) -
UXAgent: An LLM Agent-Based Usability Testing Framework for Web Design
par: Lu, Yuxuan, et autres
Publié: (2025)