FLUKE: A Linguistically-Driven and Task-Agnostic Framework for Robustness Evaluation
Fuente:
arXiv
Gespeichert in:
| Hauptverfasser: | Otmakhova, Yulia, Truong, Hung Thinh, Mahendra, Rahmad, Zhai, Zenan, Zhu, Rongxin, Beck, Daniel, Lau, Jey Han |
|---|---|
| Format: | Preprint |
| Veröffentlicht: |
2025
|
| Schlagworte: | |
| Online-Zugang: | |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Ähnliche Einträge
Revisiting subword tokenization: A case study on affixal negation in large language models
von: Truong, Thinh Hung, et al.
Veröffentlicht: (2024)
von: Truong, Thinh Hung, et al.
Veröffentlicht: (2024)
Factual Dialogue Summarization via Learning from Large Language Models
von: Zhu, Rongxin, et al.
Veröffentlicht: (2024)
von: Zhu, Rongxin, et al.
Veröffentlicht: (2024)
GPSBench: Do Large Language Models Understand GPS Coordinates?
von: Truong, Thinh Hung, et al.
Veröffentlicht: (2026)
von: Truong, Thinh Hung, et al.
Veröffentlicht: (2026)
Understanding the Geospatial Reasoning Capabilities of LLMs: A Trajectory Recovery Perspective
von: Truong, Thinh Hung, et al.
Veröffentlicht: (2025)
von: Truong, Thinh Hung, et al.
Veröffentlicht: (2025)
Narrative Media Framing in Political Discourse
von: Otmakhova, Yulia, et al.
Veröffentlicht: (2025)
von: Otmakhova, Yulia, et al.
Veröffentlicht: (2025)
Interaction Matters: An Evaluation Framework for Interactive Dialogue Assessment on English Second Language Conversations
von: Gao, Rena, et al.
Veröffentlicht: (2024)
von: Gao, Rena, et al.
Veröffentlicht: (2024)
Retain or Reframe? A Computational Framework for the Analysis of Framing in News Articles and Reader Comments
von: Guida, Matteo, et al.
Veröffentlicht: (2025)
von: Guida, Matteo, et al.
Veröffentlicht: (2025)
Not all ANIMALs are equal: metaphorical framing through source domains and semantic frames
von: Otmakhova, Yulia, et al.
Veröffentlicht: (2026)
von: Otmakhova, Yulia, et al.
Veröffentlicht: (2026)
A Sentiment Consolidation Framework for Meta-Review Generation
von: Li, Miao, et al.
Veröffentlicht: (2024)
von: Li, Miao, et al.
Veröffentlicht: (2024)
Evaluating Evidence Attribution in Generated Fact Checking Explanations
von: Xing, Rui, et al.
Veröffentlicht: (2024)
von: Xing, Rui, et al.
Veröffentlicht: (2024)
Learning Robust Negation Text Representations
von: Truong, Thinh Hung, et al.
Veröffentlicht: (2025)
von: Truong, Thinh Hung, et al.
Veröffentlicht: (2025)
LLMs for Argument Mining: Detection, Extraction, and Relationship Classification of pre-defined Arguments in Online Comments
von: Guida, Matteo, et al.
Veröffentlicht: (2025)
von: Guida, Matteo, et al.
Veröffentlicht: (2025)
Article and Comment Frames Shape the Quality of Online Comments
von: Guida, Matteo, et al.
Veröffentlicht: (2026)
von: Guida, Matteo, et al.
Veröffentlicht: (2026)
IndoCulture: Exploring Geographically-Influenced Cultural Commonsense Reasoning Across Eleven Indonesian Provinces
von: Koto, Fajri, et al.
Veröffentlicht: (2024)
von: Koto, Fajri, et al.
Veröffentlicht: (2024)
Generative Debunking of Climate Misinformation
von: Zanartu, Francisco, et al.
Veröffentlicht: (2024)
von: Zanartu, Francisco, et al.
Veröffentlicht: (2024)
Training and Evaluating with Human Label Variation: An Empirical Study
von: Kurniawan, Kemal, et al.
Veröffentlicht: (2025)
von: Kurniawan, Kemal, et al.
Veröffentlicht: (2025)
MoDEM: Mixture of Domain Expert Models
von: Simonds, Toby, et al.
Veröffentlicht: (2024)
von: Simonds, Toby, et al.
Veröffentlicht: (2024)
CMA-R:Causal Mediation Analysis for Explaining Rumour Detection
von: Tian, Lin, et al.
Veröffentlicht: (2024)
von: Tian, Lin, et al.
Veröffentlicht: (2024)
Beyond Seen Data: Improving KBQA Generalization Through Schema-Guided Logical Form Generation
von: Gao, Shengxiang, et al.
Veröffentlicht: (2025)
von: Gao, Shengxiang, et al.
Veröffentlicht: (2025)
WET: Overcoming Paraphrasing Vulnerabilities in Embeddings-as-a-Service with Linear Transformation Watermarks
von: Shetty, Anudeex, et al.
Veröffentlicht: (2024)
von: Shetty, Anudeex, et al.
Veröffentlicht: (2024)
Context Volume Drives Performance: Tackling Domain Shift in Extremely Low-Resource Translation via RAG
von: Setiawan, David Samuel, et al.
Veröffentlicht: (2026)
von: Setiawan, David Samuel, et al.
Veröffentlicht: (2026)
On the Interplay between Human Label Variation and Model Fairness
von: Kurniawan, Kemal, et al.
Veröffentlicht: (2025)
von: Kurniawan, Kemal, et al.
Veröffentlicht: (2025)
To Aggregate or Not to Aggregate. That is the Question: A Case Study on Annotation Subjectivity in Span Prediction
von: Kurniawan, Kemal, et al.
Veröffentlicht: (2024)
von: Kurniawan, Kemal, et al.
Veröffentlicht: (2024)
Who Wrote the Book? Detecting and Attributing LLM Ghostwriters
von: Shetty, Anudeex, et al.
Veröffentlicht: (2026)
von: Shetty, Anudeex, et al.
Veröffentlicht: (2026)
WHoW: A Cross-domain Approach for Analysing Conversation Moderation
von: Chen, Ming-Bin, et al.
Veröffentlicht: (2024)
von: Chen, Ming-Bin, et al.
Veröffentlicht: (2024)
Decomposed Opinion Summarization with Verified Aspect-Aware Modules
von: Li, Miao, et al.
Veröffentlicht: (2025)
von: Li, Miao, et al.
Veröffentlicht: (2025)
COMMUNITYNOTES: A Dataset for Exploring the Helpfulness of Fact-Checking Explanations
von: Xing, Rui, et al.
Veröffentlicht: (2025)
von: Xing, Rui, et al.
Veröffentlicht: (2025)
Moderation Matters:Measuring Conversational Moderation Impact in English as a Second Language Group Discussion
von: Gao, Rena, et al.
Veröffentlicht: (2025)
von: Gao, Rena, et al.
Veröffentlicht: (2025)
An Interpretable and Crosslingual Method for Evaluating Second-Language Dialogues
von: Gao, Rena, et al.
Veröffentlicht: (2024)
von: Gao, Rena, et al.
Veröffentlicht: (2024)
CIG: Measuring Conversational Information Gain in Deliberative Dialogues with Semantic Memory Dynamics
von: Chen, Ming-Bin, et al.
Veröffentlicht: (2026)
von: Chen, Ming-Bin, et al.
Veröffentlicht: (2026)
An Analytical Emotion Framework of Rumour Threads on Social Media
von: Xing, Rui, et al.
Veröffentlicht: (2025)
von: Xing, Rui, et al.
Veröffentlicht: (2025)
Inclusion-of-Thoughts: Mitigating Preference Instability via Purifying the Decision Space
von: Madani, Mohammad Reza Ghasemi, et al.
Veröffentlicht: (2026)
von: Madani, Mohammad Reza Ghasemi, et al.
Veröffentlicht: (2026)
Predicting Sentence Acceptability Judgments in Multimodal Contexts
von: Jang, Hyewon, et al.
Veröffentlicht: (2026)
von: Jang, Hyewon, et al.
Veröffentlicht: (2026)
Agent-Driven Corpus Linguistics: A Framework for Autonomous Linguistic Discovery
von: Yu, Jia, et al.
Veröffentlicht: (2026)
von: Yu, Jia, et al.
Veröffentlicht: (2026)
Trans-EnV: A Framework for Evaluating the Linguistic Robustness of LLMs Against English Varieties
von: Lee, Jiyoung, et al.
Veröffentlicht: (2025)
von: Lee, Jiyoung, et al.
Veröffentlicht: (2025)
RuozhiBench: Evaluating LLMs with Logical Fallacies and Misleading Premises
von: Zhai, Zenan, et al.
Veröffentlicht: (2025)
von: Zhai, Zenan, et al.
Veröffentlicht: (2025)
Controlling Distributional Bias in Multi-Round LLM Generation via KL-Optimized Fine-Tuning
von: Jiang, Yanbei, et al.
Veröffentlicht: (2026)
von: Jiang, Yanbei, et al.
Veröffentlicht: (2026)
PromptSuite: A Task-Agnostic Framework for Multi-Prompt Generation
von: Habba, Eliya, et al.
Veröffentlicht: (2025)
von: Habba, Eliya, et al.
Veröffentlicht: (2025)
Crossing Linguistic Horizons: Finetuning and Comprehensive Evaluation of Vietnamese Large Language Models
von: Truong, Sang T., et al.
Veröffentlicht: (2024)
von: Truong, Sang T., et al.
Veröffentlicht: (2024)
PlugMem: A Task-Agnostic Plugin Memory Module for LLM Agents
von: Yang, Ke, et al.
Veröffentlicht: (2026)
von: Yang, Ke, et al.
Veröffentlicht: (2026)
Ähnliche Einträge
-
Revisiting subword tokenization: A case study on affixal negation in large language models
von: Truong, Thinh Hung, et al.
Veröffentlicht: (2024) -
Factual Dialogue Summarization via Learning from Large Language Models
von: Zhu, Rongxin, et al.
Veröffentlicht: (2024) -
GPSBench: Do Large Language Models Understand GPS Coordinates?
von: Truong, Thinh Hung, et al.
Veröffentlicht: (2026) -
Understanding the Geospatial Reasoning Capabilities of LLMs: A Trajectory Recovery Perspective
von: Truong, Thinh Hung, et al.
Veröffentlicht: (2025) -
Narrative Media Framing in Political Discourse
von: Otmakhova, Yulia, et al.
Veröffentlicht: (2025)