Buchumschlag

Are Large Language Models State-of-the-art Quality Estimators for Machine Translation of User-generated Content?

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Qian, Shenbin, Orăsan, Constantin, Kanojia, Diptesh, Carmo, Félix do
Format:	Preprint
Veröffentlicht:	2024
Schlagworte:	Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

A Multi-task Learning Framework for Evaluating Machine Translation of Emotion-loaded User-generated Content
von: Qian, Shenbin, et al.
Veröffentlicht: (2024)

Automatically Generating Chinese Homophone Words to Probe Machine Translation Estimation Systems
von: Qian, Shenbin, et al.
Veröffentlicht: (2025)

When LLMs Struggle: Reference-less Translation Evaluation for Low-resource Languages
von: Sindhujan, Archchana, et al.
Veröffentlicht: (2025)

Beyond Scalar Scores: Reinforcement Learning for Error-Aware Quality Estimation of Machine Translation
von: Sindhujan, Archchana, et al.
Veröffentlicht: (2026)

ALOPE: Adaptive Layer Optimization for Translation Quality Estimation using Large Language Models
von: Sindhujan, Archchana, et al.
Veröffentlicht: (2025)

What do Large Language Models Need for Machine Translation Evaluation?
von: Qian, Shenbin, et al.
Veröffentlicht: (2024)

Edit Distances and Their Applications to Downstream Tasks in Research and Commercial Contexts
von: Carmo, Félix do, et al.
Veröffentlicht: (2024)

NEAR$^2$: A Nested Embedding Approach to Efficient Product Retrieval and Ranking
von: Qian, Shenbin, et al.
Veröffentlicht: (2025)

Why do Large Language Models Fail in Low-resource Translation? Unraveling the Token Dynamics of Large Language Models for Machine Translation
von: Qian, Shenbin, et al.
Veröffentlicht: (2026)

Domain-Specific Quality Estimation for Machine Translation in Low-Resource Scenarios
von: Gurav, Namrata Patil, et al.
Veröffentlicht: (2026)

Parameter-Efficient Quality Estimation via Frozen Recursive Models
von: Abubacar, Umar, et al.
Veröffentlicht: (2026)

Google Translate Error Analysis for Mental Healthcare Information: Evaluating Accuracy, Comprehensibility, and Implications for Multilingual Healthcare Communication
von: Delfani, Jaleh, et al.
Veröffentlicht: (2024)

The Mind's Eye: A Multi-Faceted Reward Framework for Guiding Visual Metaphor Generation
von: Koushik, Girish A., et al.
Veröffentlicht: (2025)

Giving the Old a Fresh Spin: Quality Estimation-Assisted Constrained Decoding for Automatic Post-Editing
von: Deoghare, Sourabh, et al.
Veröffentlicht: (2025)

Cyber Risks of Machine Translation Critical Errors : Arabic Mental Health Tweets as a Case Study
von: Saadany, Hadeel, et al.
Veröffentlicht: (2024)

Together We Can: Multilingual Automatic Post-Editing for Low-Resource Languages
von: Deoghare, Sourabh, et al.
Veröffentlicht: (2024)

Towards a Robust Framework for Multimodal Hate Detection: A Study on Video vs. Image-based Content
von: Koushik, Girish A., et al.
Veröffentlicht: (2025)

Large Language Models as Annotators for Machine Translation Quality Estimation
von: Wang, Sidi, et al.
Veröffentlicht: (2026)

Experiences from Creating a Benchmark for Sentiment Classification for Varieties of English
von: Srirag, Dipankar, et al.
Veröffentlicht: (2024)

Benchmarking terminology building capabilities of ChatGPT on an English-Russian Fashion Corpus
von: Bezobrazova, Anastasiia, et al.
Veröffentlicht: (2024)

Integrating automatic speech recognition into remote healthcare interpreting: A pilot study of its impact on interpreting quality
von: Tan, Shiyi, et al.
Veröffentlicht: (2025)

BESSTIE: A Benchmark for Sentiment and Sarcasm Classification for Varieties of English
von: Srirag, Dipankar, et al.
Veröffentlicht: (2024)

TRACE: Textual Relevance Augmentation and Contextual Encoding for Multimodal Hate Detection
von: Koushik, Girish A., et al.
Veröffentlicht: (2025)

A Survey of Multimodal Sarcasm Detection
von: Farabi, Shafkat, et al.
Veröffentlicht: (2024)

GCDance: Genre-Controlled Music-Driven 3D Full Body Dance Generation
von: Liu, Xinran, et al.
Veröffentlicht: (2025)

Natural Language Processing for Dialects of a Language: A Survey
von: Joshi, Aditya, et al.
Veröffentlicht: (2024)

Cyberbullying Detection via Aggression-Enhanced Prompting
von: Saeid, Aisha, et al.
Veröffentlicht: (2025)

Centrality-aware Product Retrieval and Ranking
von: Saadany, Hadeel, et al.
Veröffentlicht: (2024)

Connecting Ideas in 'Lower-Resource' Scenarios: NLP for National Varieties, Creoles and Other Low-resource Scenarios
von: Joshi, Aditya, et al.
Veröffentlicht: (2024)

Human-Centred Evaluation of Text-to-Image Generation Models for Self-expression of Mental Distress: A Dataset Based on GPT-4o
von: He, Sui, et al.
Veröffentlicht: (2025)

Lost in the Source Language: How Large Language Models Evaluate the Quality of Machine Translation
von: Huang, Xu, et al.
Veröffentlicht: (2024)

Simultaneous Machine Translation with Large Language Models
von: Wang, Minghan, et al.
Veröffentlicht: (2023)

On-the-Fly Fusion of Large Language Models and Machine Translation
von: Hoang, Hieu, et al.
Veröffentlicht: (2023)

Gender-specific Machine Translation with Large Language Models
von: Sánchez, Eduardo, et al.
Veröffentlicht: (2023)

Should I Share this Translation? Evaluating Quality Feedback for User Reliance on Machine Translation
von: Ki, Dayeon, et al.
Veröffentlicht: (2025)

MUNIChus: Multilingual News Image Captioning Benchmark
von: Chen, Yuji, et al.
Veröffentlicht: (2026)

Modeling User Preferences with Automatic Metrics: Creating a High-Quality Preference Dataset for Machine Translation
von: Agrawal, Sweta, et al.
Veröffentlicht: (2024)

PheMT: A Phenomenon-wise Dataset for Machine Translation Robustness on User-Generated Contents
von: Fujii, Ryo, et al.
Veröffentlicht: (2020)

Watching the Watchers: Exposing Gender Disparities in Machine Translation Quality Estimation
von: Zaranis, Emmanouil, et al.
Veröffentlicht: (2024)

Guiding In-Context Learning of LLMs through Quality Estimation for Machine Translation
von: Sharami, Javad Pourmostafa Roshan, et al.
Veröffentlicht: (2024)