Buchumschlag

A Critical Study of Automatic Evaluation in Sign Language Translation

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Yazdani, Shakib, Hamidullah, Yasser, España-Bonet, Cristina, Avramidis, Eleftherios, van Genabith, Josef
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Seeing, Signing, and Saying: A Vision-Language Model-Assisted Pipeline for Sign Language Data Acquisition and Curation from Social Media
von: Yazdani, Shakib, et al.
Veröffentlicht: (2025)

SONAR-SLT: Multilingual Sign Language Translation via Language-Agnostic Sentence Embedding Supervision
von: Hamidullah, Yasser, et al.
Veröffentlicht: (2025)

Sign Language Translation with Sentence Embedding Supervision
von: Hamidullah, Yasser, et al.
Veröffentlicht: (2025)

Spatio-temporal Sign Language Representation and Translation
von: Hamidullah, Yasser, et al.
Veröffentlicht: (2025)

DFKI-MLT at SemEval-2026 TASK 7: Steering Multilingual Models Towards Cultural Knowledge
von: Ghussin, Yusser Al, et al.
Veröffentlicht: (2026)

PETra: A Multilingual Corpus of Pragmatic Explicitation in Translation
von: Osmelak, Doreen, et al.
Veröffentlicht: (2025)

Measuring Spurious Correlation in Classification: 'Clever Hans' in Translationese
von: Borah, Angana, et al.
Veröffentlicht: (2023)

When your Cousin has the Right Connections: Unsupervised Bilingual Lexicon Induction for Related Data-Imbalanced Languages
von: Bafna, Niyati, et al.
Veröffentlicht: (2023)

The Importance of Facial Features in Vision-based Sign Language Recognition: Eyes, Mouth or Full Face?
von: Pham, Dinh Nam, et al.
Veröffentlicht: (2025)

Evaluation of a Sign Language Avatar on Comprehensibility, User Experience \& Acceptability
von: Wasserroth, Fenya, et al.
Veröffentlicht: (2025)

When Flores Bloomz Wrong: Cross-Direction Contamination in Machine Translation Evaluation
von: Tan, David, et al.
Veröffentlicht: (2026)

DualFact+: A Multimodal Fact Verification Framework for Procedural Video Understanding
von: Oguz, Cennet, et al.
Veröffentlicht: (2026)

When Scale Meets Diversity: Evaluating Language Models on Fine-Grained Multilingual Claim Verification
von: Shcharbakova, Hanna, et al.
Veröffentlicht: (2025)

Probing Context Localization of Polysemous Words in Pre-trained Language Model Sub-Layers
von: Vijayakumar, Soniya, et al.
Veröffentlicht: (2024)

On Multilingual Encoder Language Model Compression for Low-Resource Languages
von: Gurgurov, Daniil, et al.
Veröffentlicht: (2025)

Sparse Subnetwork Enhancement for Underrepresented Languages in Large Language Models
von: Gurgurov, Daniil, et al.
Veröffentlicht: (2025)

Disentangling Mathematical Reasoning in LLMs: A Methodological Investigation of Internal Mechanisms
von: Baeumel, Tanja, et al.
Veröffentlicht: (2026)

Small Models, Big Impact: Efficient Corpus and Graph-Based Adaptation of Small Multilingual Language Models for Low-Resource Languages
von: Gurgurov, Daniil, et al.
Veröffentlicht: (2025)

Error Span Annotation: A Balanced Approach for Human Evaluation of Machine Translation
von: Kocmi, Tom, et al.
Veröffentlicht: (2024)

Automatic Fact-checking in English and Telugu
von: Chikkala, Ravi Kiran, et al.
Veröffentlicht: (2025)

The Lookahead Limitation: Why Multi-Operand Addition is Hard for LLMs
von: Baeumel, Tanja, et al.
Veröffentlicht: (2025)

SignBLEU: Automatic Evaluation of Multi-channel Sign Language Translation
von: Kim, Jung-Ho, et al.
Veröffentlicht: (2024)

Transfer Learning from Visual Speech Recognition to Mouthing Recognition in German Sign Language
von: Pham, Dinh Nam, et al.
Veröffentlicht: (2025)

The TUB Sign Language Corpus Collection
von: Avramidis, Eleftherios, et al.
Veröffentlicht: (2025)

AutoPsyC: Automatic Recognition of Psychodynamic Conflicts from Semi-structured Interviews with Large Language Models
von: Hossain, Sayed Muddashir, et al.
Veröffentlicht: (2025)

Why Does Reinforcement Learning Generalize? A Feature-Level Mechanistic Study of Post-Training in Large Language Models
von: Shi, Dan, et al.
Veröffentlicht: (2026)

Listening or Reading? Evaluating Speech Awareness in Chain-of-Thought Speech-to-Text Translation
von: Romero-Díaz, Jacobo, et al.
Veröffentlicht: (2025)

The Latin Substrate: How Language Models Represent and Mediate Script Choice
von: Gurgurov, Daniil, et al.
Veröffentlicht: (2026)

Revisiting Direct Speech-to-Text Translation with Speech LLMs: Better Scaling than CoT Prompting?
von: Pareras, Oriol, et al.
Veröffentlicht: (2025)

Language Arithmetics: Towards Systematic Language Neuron Identification and Manipulation
von: Gurgurov, Daniil, et al.
Veröffentlicht: (2025)

Multilingual Political Views of Large Language Models: Identification and Steering
von: Gurgurov, Daniil, et al.
Veröffentlicht: (2025)

Modular Arithmetic: Language Models Solve Math Digit by Digit
von: Baeumel, Tanja, et al.
Veröffentlicht: (2025)

ReasonXL: Shifting LLM Reasoning Language Without Sacrificing Performance
von: Gurgurov, Daniil, et al.
Veröffentlicht: (2026)

Evaluation of Pose Estimation Systems for Sign Language Translation
von: O'Brien, Catherine, et al.
Veröffentlicht: (2026)

Rewiring the Transformer with Depth-Wise LSTMs
von: Xu, Hongfei, et al.
Veröffentlicht: (2020)

Reverse Probing: Evaluating Knowledge Transfer via Finetuned Task Embeddings for Coreference Resolution
von: Anikina, Tatiana, et al.
Veröffentlicht: (2025)

LLMCheckup: Conversational Examination of Large Language Models via Interpretability Tools and Self-Explanations
von: Wang, Qianli, et al.
Veröffentlicht: (2024)

Unsupervised Sign Language Translation and Generation
von: Guo, Zhengsheng, et al.
Veröffentlicht: (2024)

SignDATA: Data Pipeline for Sign Language Translation
von: Chen, Kuanwei, et al.
Veröffentlicht: (2026)

Multilingual Steering by Design: Multilingual Sparse Autoencoders and Principled Layer Selection
von: Ghussin, Yusser Al, et al.
Veröffentlicht: (2026)