How Good are LLMs at Relation Extraction under Low-Resource Scenario? Comprehensive Evaluation
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Jinensibieke, Dawulie, Maimaiti, Mieradilijiang, Xiao, Wentao, Zheng, Yuanhang, Wang, Xiaobo |
|---|---|
| Format: | Preprint |
| Publié: |
2024
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
Improving Cross-lingual Representation for Semantic Retrieval with Code-switching
par: Maimaiti, Mieradilijiang, et autres
Publié: (2024)
par: Maimaiti, Mieradilijiang, et autres
Publié: (2024)
Thinker-DDM: Modeling Deliberation for Machine Translation with a Drift-Diffusion Process
par: Na, Hongbin, et autres
Publié: (2024)
par: Na, Hongbin, et autres
Publié: (2024)
How Good is Zero-Shot MT Evaluation for Low Resource Indian Languages?
par: Singh, Anushka, et autres
Publié: (2024)
par: Singh, Anushka, et autres
Publié: (2024)
Beyond Metrics: Evaluating LLMs' Effectiveness in Culturally Nuanced, Low-Resource Real-World Scenarios
par: Ochieng, Millicent, et autres
Publié: (2024)
par: Ochieng, Millicent, et autres
Publié: (2024)
Are LLMs Good Annotators for Discourse-level Event Relation Extraction?
par: Wei, Kangda, et autres
Publié: (2024)
par: Wei, Kangda, et autres
Publié: (2024)
How Good Are LLMs at Out-of-Distribution Detection?
par: Liu, Bo, et autres
Publié: (2023)
par: Liu, Bo, et autres
Publié: (2023)
Information Extraction in Low-Resource Scenarios: Survey and Perspective
par: Deng, Shumin, et autres
Publié: (2022)
par: Deng, Shumin, et autres
Publié: (2022)
How Fragile is Relation Extraction under Entity Replacements?
par: Wang, Yiwei, et autres
Publié: (2023)
par: Wang, Yiwei, et autres
Publié: (2023)
LLM Probe: Evaluating LLMs for Low-Resource Languages
par: Teklehaymanot, Hailay Kidu, et autres
Publié: (2026)
par: Teklehaymanot, Hailay Kidu, et autres
Publié: (2026)
How Good Are LLMs for Literary Translation, Really? Literary Translation Evaluation with Humans and LLMs
par: Zhang, Ran, et autres
Publié: (2024)
par: Zhang, Ran, et autres
Publié: (2024)
Targeted Augmentation for Low-Resource Event Extraction
par: Wang, Sijia, et autres
Publié: (2024)
par: Wang, Sijia, et autres
Publié: (2024)
Improving Automatic Evaluation of Large Language Models (LLMs) in Biomedical Relation Extraction via LLMs-as-the-Judge
par: Laskar, Md Tahmid Rahman, et autres
Publié: (2025)
par: Laskar, Md Tahmid Rahman, et autres
Publié: (2025)
DHP Benchmark: Are LLMs Good NLG Evaluators?
par: Wang, Yicheng, et autres
Publié: (2024)
par: Wang, Yicheng, et autres
Publié: (2024)
Bot Meets Shortcut: How Can LLMs Aid in Handling Unknown Invariance OOD Scenarios?
par: Zheng, Shiyan, et autres
Publié: (2025)
par: Zheng, Shiyan, et autres
Publié: (2025)
Can LLMs be Good Graph Judge for Knowledge Graph Construction?
par: Huang, Haoyu, et autres
Publié: (2024)
par: Huang, Haoyu, et autres
Publié: (2024)
Evaluating the Robustness of Machine Reading Comprehension Models to Low Resource Entity Renaming
par: Siro, Clemencia, et autres
Publié: (2023)
par: Siro, Clemencia, et autres
Publié: (2023)
CCR-Bench: A Comprehensive Benchmark for Evaluating LLMs on Complex Constraints, Control Flows, and Real-World Cases
par: Xue, Xiaona, et autres
Publié: (2026)
par: Xue, Xiaona, et autres
Publié: (2026)
Can LLMs Augment Low-Resource Reading Comprehension Datasets? Opportunities and Challenges
par: Samuel, Vinay, et autres
Publié: (2023)
par: Samuel, Vinay, et autres
Publié: (2023)
Artificial Intelligence and Civil Discourse: How LLMs Moderate Climate Change Conversations
par: Fan, Wenlu, et autres
Publié: (2025)
par: Fan, Wenlu, et autres
Publié: (2025)
Speech LLMs in Low-Resource Scenarios: Data Volume Requirements and the Impact of Pretraining on High-Resource Languages
par: Fong, Seraphina, et autres
Publié: (2025)
par: Fong, Seraphina, et autres
Publié: (2025)
Mixture of Experts for Low-Resource LLMs
par: Joseph, Ori Bar, et autres
Publié: (2026)
par: Joseph, Ori Bar, et autres
Publié: (2026)
Efficient Extractive Summarization with MAMBA-Transformer Hybrids for Low-Resource Scenarios
par: Khayi, Nisrine Ait
Publié: (2026)
par: Khayi, Nisrine Ait
Publié: (2026)
Planning, Creation, Usage: Benchmarking LLMs for Comprehensive Tool Utilization in Real-World Complex Scenarios
par: Huang, Shijue, et autres
Publié: (2024)
par: Huang, Shijue, et autres
Publié: (2024)
Event Temporal Relation Extraction based on Retrieval-Augmented on LLMs
par: Zhang, Xiaobin, et autres
Publié: (2024)
par: Zhang, Xiaobin, et autres
Publié: (2024)
CRAB: A Benchmark for Evaluating Curation of Retrieval-Augmented LLMs in Biomedicine
par: Zhong, Hanmeng, et autres
Publié: (2025)
par: Zhong, Hanmeng, et autres
Publié: (2025)
Relation Extraction Capabilities of LLMs on Clinical Text: A Bilingual Evaluation for English and Turkish
par: Aidynkyzy, Aidana, et autres
Publié: (2026)
par: Aidynkyzy, Aidana, et autres
Publié: (2026)
How well ChatGPT understand Malaysian English? An Evaluation on Named Entity Recognition and Relation Extraction
par: Chanthran, Mohan Raj, et autres
Publié: (2023)
par: Chanthran, Mohan Raj, et autres
Publié: (2023)
Bridging the Knowledge-Action Gap by Evaluating LLMs in Dynamic Dental Clinical Scenarios
par: Ma, Hongyang, et autres
Publié: (2026)
par: Ma, Hongyang, et autres
Publié: (2026)
State Space Models for Extractive Summarization in Low Resource Scenarios
par: Khayi, Nisrine Ait
Publié: (2025)
par: Khayi, Nisrine Ait
Publié: (2025)
KnowRA: Knowledge Retrieval Augmented Method for Document-level Relation Extraction with Comprehensive Reasoning Abilities
par: Mai, Chengcheng, et autres
Publié: (2024)
par: Mai, Chengcheng, et autres
Publié: (2024)
Monolingual and Multilingual Misinformation Detection for Low-Resource Languages: A Comprehensive Survey
par: Wang, Xinyu, et autres
Publié: (2024)
par: Wang, Xinyu, et autres
Publié: (2024)
A Comprehensive Survey on Relation Extraction: Recent Advances and New Frontiers
par: Zhao, Xiaoyan, et autres
Publié: (2023)
par: Zhao, Xiaoyan, et autres
Publié: (2023)
The Good, The Bad, and The Greedy: Evaluation of LLMs Should Not Ignore Non-Determinism
par: Song, Yifan, et autres
Publié: (2024)
par: Song, Yifan, et autres
Publié: (2024)
Understanding LLMs' Cross-Lingual Context Retrieval: How Good It Is And Where It Comes From
par: Gao, Changjiang, et autres
Publié: (2025)
par: Gao, Changjiang, et autres
Publié: (2025)
How Good (Or Bad) Are LLMs at Detecting Misleading Visualizations?
par: Lo, Leo Yu-Ho, et autres
Publié: (2024)
par: Lo, Leo Yu-Ho, et autres
Publié: (2024)
Connecting Ideas in 'Lower-Resource' Scenarios: NLP for National Varieties, Creoles and Other Low-resource Scenarios
par: Joshi, Aditya, et autres
Publié: (2024)
par: Joshi, Aditya, et autres
Publié: (2024)
AnesSuite: A Comprehensive Benchmark and Dataset Suite for Anesthesiology Reasoning in LLMs
par: Feng, Xiang, et autres
Publié: (2025)
par: Feng, Xiang, et autres
Publié: (2025)
TextQuests: How Good are LLMs at Text-Based Video Games?
par: Phan, Long, et autres
Publié: (2025)
par: Phan, Long, et autres
Publié: (2025)
LLMs for Extremely Low-Resource Finno-Ugric Languages
par: Purason, Taido, et autres
Publié: (2024)
par: Purason, Taido, et autres
Publié: (2024)
Is GPT-OSS Good? A Comprehensive Evaluation of OpenAI's Latest Open Source Models
par: Bi, Ziqian, et autres
Publié: (2025)
par: Bi, Ziqian, et autres
Publié: (2025)
Documents similaires
-
Improving Cross-lingual Representation for Semantic Retrieval with Code-switching
par: Maimaiti, Mieradilijiang, et autres
Publié: (2024) -
Thinker-DDM: Modeling Deliberation for Machine Translation with a Drift-Diffusion Process
par: Na, Hongbin, et autres
Publié: (2024) -
How Good is Zero-Shot MT Evaluation for Low Resource Indian Languages?
par: Singh, Anushka, et autres
Publié: (2024) -
Beyond Metrics: Evaluating LLMs' Effectiveness in Culturally Nuanced, Low-Resource Real-World Scenarios
par: Ochieng, Millicent, et autres
Publié: (2024) -
Are LLMs Good Annotators for Discourse-level Event Relation Extraction?
par: Wei, Kangda, et autres
Publié: (2024)