AI Psychometrics: Evaluating the Psychological Reasoning of Large Language Models with Psychometric Validities
Fuente:
arXiv
Gespeichert in:
| Hauptverfasser: | Li, Yibai, Lin, Xiaolin, Sha, Zhenghui, Jin, Zhiye, Li, Xiaobing |
|---|---|
| Format: | Preprint |
| Veröffentlicht: |
2026
|
| Schlagworte: | |
| Online-Zugang: | |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Ähnliche Einträge
Vibe-Creation: The Epistemology of Human-AI Emergent Cognition
von: Levin, Ilya
Veröffentlicht: (2026)
von: Levin, Ilya
Veröffentlicht: (2026)
GIM: Evaluating models via tasks that integrate multiple cognitive domains
von: Patel, Rohit, et al.
Veröffentlicht: (2026)
von: Patel, Rohit, et al.
Veröffentlicht: (2026)
The Association of Transformer-based Sentiment Analysis with Symptom Distress and Deterioration in Routine Psychotherapy Care
von: Faust, Douglas K., et al.
Veröffentlicht: (2026)
von: Faust, Douglas K., et al.
Veröffentlicht: (2026)
Can We Trust AI-Inferred User States. A Psychometric Framework for Validating the Reliability of Users States Classification by LLMs in Operational Environments
von: Krzeminska, Izabella, et al.
Veröffentlicht: (2026)
von: Krzeminska, Izabella, et al.
Veröffentlicht: (2026)
Multimodal AI-based visualization of strategic leaders' emotional dynamics: a deep behavioral analysis of Trump's trade war discourse
von: Meng, Wei
Veröffentlicht: (2025)
von: Meng, Wei
Veröffentlicht: (2025)
Claim Automation using Large Language Model
von: Mo, Zhengda, et al.
Veröffentlicht: (2026)
von: Mo, Zhengda, et al.
Veröffentlicht: (2026)
ValueBlindBench: Agreement-Gated Stress Testing of LLM-Judged Investment Rationales Before Returns Are Observable
von: Chang, Sidi, et al.
Veröffentlicht: (2026)
von: Chang, Sidi, et al.
Veröffentlicht: (2026)
CLEV: LLM-Based Evaluation Through Lightweight Efficient Voting for Free-Form Question-Answering
von: Badshah, Sher, et al.
Veröffentlicht: (2025)
von: Badshah, Sher, et al.
Veröffentlicht: (2025)
The MSR-Video to Text Dataset with Clean Annotations
von: Chen, Haoran, et al.
Veröffentlicht: (2021)
von: Chen, Haoran, et al.
Veröffentlicht: (2021)
MEDLEY-BENCH: Scale Buys Evaluation but Not Control in AI Metacognition
von: Abtahi, Farhad, et al.
Veröffentlicht: (2026)
von: Abtahi, Farhad, et al.
Veröffentlicht: (2026)
Model Surgery: Modulating LLM's Behavior Via Simple Parameter Editing
von: Wang, Huanqian, et al.
Veröffentlicht: (2024)
von: Wang, Huanqian, et al.
Veröffentlicht: (2024)
Multimodal Structure-Aware Quantum Data Processing
von: Hawashin, Hala, et al.
Veröffentlicht: (2024)
von: Hawashin, Hala, et al.
Veröffentlicht: (2024)
Unpacking Hateful Memes: Presupposed Context and False Claims
von: Cai, Weibin, et al.
Veröffentlicht: (2025)
von: Cai, Weibin, et al.
Veröffentlicht: (2025)
MORQA: Benchmarking Evaluation Metrics for Medical Open-Ended Question Answering
von: Yim, Wen-wai, et al.
Veröffentlicht: (2025)
von: Yim, Wen-wai, et al.
Veröffentlicht: (2025)
Developing the PsyCogMetrics AI Lab to Evaluate Large Language Models and Advance Cognitive Science -- A Three-Cycle Action Design Science Study
von: Jin, Zhiye, et al.
Veröffentlicht: (2026)
von: Jin, Zhiye, et al.
Veröffentlicht: (2026)
A Novel Kuhnian Ontology for Epistemic Classification of STM Scholarly Articles
von: Saqr, Khalid M.
Veröffentlicht: (2020)
von: Saqr, Khalid M.
Veröffentlicht: (2020)
Chatbots put to the test in math and logic problems: A preliminary comparison and assessment of ChatGPT-3.5, ChatGPT-4, and Google Bard
von: Plevris, Vagelis, et al.
Veröffentlicht: (2023)
von: Plevris, Vagelis, et al.
Veröffentlicht: (2023)
Prompt Tuned Embedding Classification for Multi-Label Industry Sector Allocation
von: Buchner, Valentin Leonhard, et al.
Veröffentlicht: (2023)
von: Buchner, Valentin Leonhard, et al.
Veröffentlicht: (2023)
Detecting Corporate AI-Washing via Cross-Modal Semantic Inconsistency Learning
von: Wen, Zhanjie, et al.
Veröffentlicht: (2026)
von: Wen, Zhanjie, et al.
Veröffentlicht: (2026)
Conformal Prediction Sets for Next-Token Prediction in Large Language Models: Balancing Coverage Guarantees with Set Efficiency
von: Kotla, Yoshith Roy, et al.
Veröffentlicht: (2025)
von: Kotla, Yoshith Roy, et al.
Veröffentlicht: (2025)
AgentDS Technical Report: Benchmarking the Future of Human-AI Collaboration in Domain-Specific Data Science
von: Luo, An, et al.
Veröffentlicht: (2026)
von: Luo, An, et al.
Veröffentlicht: (2026)
Conformal Path Reasoning: Trustworthy Knowledge Graph Question Answering via Path-Level Calibration
von: Lin, Shuhang, et al.
Veröffentlicht: (2026)
von: Lin, Shuhang, et al.
Veröffentlicht: (2026)
Thinking Longer, Not Always Smarter: Evaluating LLM Capabilities in Hierarchical Legal Reasoning
von: Zhang, Li, et al.
Veröffentlicht: (2025)
von: Zhang, Li, et al.
Veröffentlicht: (2025)
AI-based Drone Assisted Human Rescue in Disaster Environments: Challenges and Opportunities
von: Papyan, Narek, et al.
Veröffentlicht: (2024)
von: Papyan, Narek, et al.
Veröffentlicht: (2024)
Can Agentic AI Match the Performance of Human Data Scientists?
von: Luo, An, et al.
Veröffentlicht: (2025)
von: Luo, An, et al.
Veröffentlicht: (2025)
Reference-Guided Verdict: LLMs-as-Judges in Automatic Evaluation of Free-Form QA
von: Badshah, Sher, et al.
Veröffentlicht: (2024)
von: Badshah, Sher, et al.
Veröffentlicht: (2024)
Can Large Language Models (or Humans) Disentangle Text?
von: de Pieuchon, Nicolas Audinet, et al.
Veröffentlicht: (2024)
von: de Pieuchon, Nicolas Audinet, et al.
Veröffentlicht: (2024)
Large Language Models Report Subjective Experience Under Self-Referential Processing
von: Berg, Cameron, et al.
Veröffentlicht: (2025)
von: Berg, Cameron, et al.
Veröffentlicht: (2025)
Automated Quality Assessment for LLM-Based Complex Qualitative Coding: A Confidence-Diversity Framework
von: Zhao, Zhilong, et al.
Veröffentlicht: (2025)
von: Zhao, Zhilong, et al.
Veröffentlicht: (2025)
Causal Dimensionality of Transformer Representations: Measurement, Scaling, and Layer Structure
von: Sarkar, Nilesh, et al.
Veröffentlicht: (2026)
von: Sarkar, Nilesh, et al.
Veröffentlicht: (2026)
Mubeen AI: A Specialized Arabic Language Model for Heritage Preservation and User Intent Understanding
von: Aljafari, Mohammed, et al.
Veröffentlicht: (2025)
von: Aljafari, Mohammed, et al.
Veröffentlicht: (2025)
TableMoE: Neuro-Symbolic Routing for Structured Expert Reasoning in Multimodal Table Understanding
von: Zhang, Junwen, et al.
Veröffentlicht: (2025)
von: Zhang, Junwen, et al.
Veröffentlicht: (2025)
Reasoning Promotes Robustness in Theory of Mind Tasks
von: de Haan, Ian B., et al.
Veröffentlicht: (2026)
von: de Haan, Ian B., et al.
Veröffentlicht: (2026)
D-SMART: Enhancing LLM Dialogue Consistency via Dynamic Structured Memory And Reasoning Tree
von: Lei, Xiang, et al.
Veröffentlicht: (2025)
von: Lei, Xiang, et al.
Veröffentlicht: (2025)
ProactBench: Beyond What The User Asked For
von: Harfi, Sepehr, et al.
Veröffentlicht: (2026)
von: Harfi, Sepehr, et al.
Veröffentlicht: (2026)
PennyCoder: Efficient Domain-Specific LLMs for PennyLane-Based Quantum Code Generation
von: Basit, Abdul, et al.
Veröffentlicht: (2025)
von: Basit, Abdul, et al.
Veröffentlicht: (2025)
Mapping the Web of Science, a large-scale graph and text-based dataset with LLM embeddings
von: Kunt, Tim, et al.
Veröffentlicht: (2026)
von: Kunt, Tim, et al.
Veröffentlicht: (2026)
Context-Dependent Affordance Computation in Vision-Language Models
von: Farzulla, Murad
Veröffentlicht: (2026)
von: Farzulla, Murad
Veröffentlicht: (2026)
Agentic AI Systems Applied to tasks in Financial Services: Modeling and model risk management crews
von: Okpala, Izunna, et al.
Veröffentlicht: (2025)
von: Okpala, Izunna, et al.
Veröffentlicht: (2025)
Unveiling factors influencing judgment variation in Sentiment Analysis with Natural Language Processing and Statistics
von: Kellert, Olga, et al.
Veröffentlicht: (2024)
von: Kellert, Olga, et al.
Veröffentlicht: (2024)
Ähnliche Einträge
-
Vibe-Creation: The Epistemology of Human-AI Emergent Cognition
von: Levin, Ilya
Veröffentlicht: (2026) -
GIM: Evaluating models via tasks that integrate multiple cognitive domains
von: Patel, Rohit, et al.
Veröffentlicht: (2026) -
The Association of Transformer-based Sentiment Analysis with Symptom Distress and Deterioration in Routine Psychotherapy Care
von: Faust, Douglas K., et al.
Veröffentlicht: (2026) -
Can We Trust AI-Inferred User States. A Psychometric Framework for Validating the Reliability of Users States Classification by LLMs in Operational Environments
von: Krzeminska, Izabella, et al.
Veröffentlicht: (2026) -
Multimodal AI-based visualization of strategic leaders' emotional dynamics: a deep behavioral analysis of Trump's trade war discourse
von: Meng, Wei
Veröffentlicht: (2025)