Buchumschlag

Automatic Evaluation Metrics for Document-level Translation: Overview, Challenges and Trends

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	GUO, Jiaxin, Chen, Xiaoyu, Rao, Zhiqiang, Yang, Jinlong, Li, Zongyao, Shang, Hengchao, Wei, Daimeng, Yang, Hao
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Computation and Language Artificial Intelligence
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Align-then-Slide: A complete evaluation framework for Ultra-Long Document-Level Machine Translation
von: Guo, Jiaxin, et al.
Veröffentlicht: (2025)

Combining the Best of Both Worlds: A Method for Hybrid NMT and LLM Translation
von: Wu, Zhanglin, et al.
Veröffentlicht: (2025)

Doc-Guided Sent2Sent++: A Sent2Sent++ Agent with Doc-Guided memory for Document-level Machine Translation
von: Guo, Jiaxin, et al.
Veröffentlicht: (2025)

R-BI: Regularized Batched Inputs enhance Incremental Decoding Framework for Low-Latency Simultaneous Speech Translation
von: Guo, Jiaxin, et al.
Veröffentlicht: (2024)

A Novel Paradigm Boosting Translation Capabilities of Large Language Models
von: Guo, Jiaxin, et al.
Veröffentlicht: (2024)

Generative Annotation for ASR Named Entity Correction
von: Luo, Yuanchang, et al.
Veröffentlicht: (2025)

Chain-of-Description: What I can understand, I can put into words
von: Guo, Jiaxin, et al.
Veröffentlicht: (2025)

Machine Translation Advancements of Low-Resource Indian Languages by Transfer Learning
von: Wei, Bin, et al.
Veröffentlicht: (2024)

M-Ped: Multi-Prompt Ensemble Decoding for Large Language Models
von: Guo, Jiaxin, et al.
Veröffentlicht: (2024)

Context-aware and Style-related Incremental Decoding framework for Discourse-Level Literary Translation
von: Luo, Yuanchang, et al.
Veröffentlicht: (2024)

Multilingual Transfer and Domain Adaptation for Low-Resource Languages of Spain
von: Luo, Yuanchang, et al.
Veröffentlicht: (2024)

Exploring the traditional NMT model and Large Language Model for chat translation
von: Yang, Jinlong, et al.
Veröffentlicht: (2024)

An End-to-End Speech Summarization Using Large Language Model
von: Shang, Hengchao, et al.
Veröffentlicht: (2024)

HW-TSC's Submission to the CCMT 2024 Machine Translation Tasks
von: Wu, Zhanglin, et al.
Veröffentlicht: (2024)

Choose the Final Translation from NMT and LLM hypotheses Using MBR Decoding: HW-TSC's Submission to the WMT24 General MT Shared Task
von: Wu, Zhanglin, et al.
Veröffentlicht: (2024)

LA-RAG:Enhancing LLM-based ASR Accuracy with Retrieval-Augmented Generation
von: Li, Shaojun, et al.
Veröffentlicht: (2024)

Cross-Preference Learning for Sentence-Level and Context-Aware Machine Translation
von: Li, Ying, et al.
Veröffentlicht: (2026)

UCorrect: An Unsupervised Framework for Automatic Speech Recognition Error Correction
von: Guo, Jiaxin, et al.
Veröffentlicht: (2024)

Fine-Grained and Multi-Dimensional Metrics for Document-Level Machine Translation
von: Sun, Yirong, et al.
Veröffentlicht: (2024)

Two Intermediate Translations Are Better Than One: Fine-tuning LLMs for Document-level Translation Refinement
von: Dong, Yichen, et al.
Veröffentlicht: (2025)

Improving LLM-based Document-level Machine Translation with Multi-Knowledge Fusion
von: Liu, Bin, et al.
Veröffentlicht: (2025)

AutoMetrics: Approximate Human Judgements with Automatically Generated Evaluators
von: Ryan, Michael J., et al.
Veröffentlicht: (2025)

Towards Fine-Grained Code-Switch Speech Translation with Semantic Space Alignment
von: Gao, Yan, et al.
Veröffentlicht: (2025)

Loong: A Human-Like Long Document Translation Agent with Observe-and-Act Adaptive Context Selection
von: Wang, Yutong, et al.
Veröffentlicht: (2026)

Beyond Correlation: Interpretable Evaluation of Machine Translation Metrics
von: Perrella, Stefano, et al.
Veröffentlicht: (2024)

An Analysis on Automated Metrics for Evaluating Japanese-English Chat Translation
von: Rusli, Andre, et al.
Veröffentlicht: (2024)

Guardians of the Machine Translation Meta-Evaluation: Sentinel Metrics Fall In!
von: Perrella, Stefano, et al.
Veröffentlicht: (2024)

Do Automatic Factuality Metrics Measure Factuality? A Critical Evaluation
von: Ramprasad, Sanjana, et al.
Veröffentlicht: (2024)

How to Evaluate Speech Translation with Source-Aware Neural MT Metrics
von: Cettolo, Mauro, et al.
Veröffentlicht: (2025)

Evaluating Automatic Metrics with Incremental Machine Translation Systems
von: Wu, Guojun, et al.
Veröffentlicht: (2024)

DoCIA: An Online Document-Level Context Incorporation Agent for Speech Translation
von: Lyu, Xinglin, et al.
Veröffentlicht: (2025)

PandaLM: An Automatic Evaluation Benchmark for LLM Instruction Tuning Optimization
von: Wang, Yidong, et al.
Veröffentlicht: (2023)

Speaker-Smoothed kNN Speaker Adaptation for End-to-End ASR
von: Li, Shaojun, et al.
Veröffentlicht: (2024)

Submodular Evaluation Subset Selection in Automatic Prompt Optimization
von: Nian, Jinming, et al.
Veröffentlicht: (2026)

Improving Statistical Significance in Human Evaluation of Automatic Metrics via Soft Pairwise Accuracy
von: Thompson, Brian, et al.
Veröffentlicht: (2024)

A Step Towards Mixture of Grader: Statistical Analysis of Existing Automatic Evaluation Metrics
von: Soh, Yun Joon, et al.
Veröffentlicht: (2024)

Extending Automatic Machine Translation Evaluation to Book-Length Documents
von: Wang, Kuang-Da, et al.
Veröffentlicht: (2025)

Unveiling the Competitive Dynamics: A Comparative Evaluation of American and Chinese LLMs
von: Jiang, Zhenhui, et al.
Veröffentlicht: (2024)

HarmMetric Eval: Benchmarking Metrics and Judges for LLM Harmfulness Assessment
von: Yang, Langqi, et al.
Veröffentlicht: (2025)

Large Language Models for Classical Chinese Poetry Translation: Benchmarking, Evaluating, and Improving
von: Chen, Andong, et al.
Veröffentlicht: (2024)