High Recall, Small Data: The Challenges of Within-System Evaluation in a Live Legal Search System

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Wiggers, Gineke, Verberne, Suzan, de Vries, Arjen, van der Burg, Roel
Format:	Preprint
Veröffentlicht:	2024
Schlagworte:	Information Retrieval
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Answer Retrieval in Legal Community Question Answering
von: Askari, Arian, et al.
Veröffentlicht: (2024)

QUIDS: Query Intent Description for Exploratory Search via Dual Space Modeling
von: Wang, Yumeng, et al.
Veröffentlicht: (2024)

Efficient course recommendations with T5-based ranking and summarization
von: Bijl, Thijmen, et al.
Veröffentlicht: (2024)

The Impact of Quantization on Retrieval-Augmented Generation: An Analysis of Small LLMs
von: Yazan, Mert, et al.
Veröffentlicht: (2024)

RankSteer: Activation Steering for Pointwise LLM Ranking
von: Wang, Yumeng, et al.
Veröffentlicht: (2026)

What are the limits of cross-lingual dense passage retrieval for low-resource languages?
von: Wu, Jie, et al.
Veröffentlicht: (2024)

Unifying Search and Recommendation in LLMs via Gradient Multi-Subspace Tuning
von: Zhao, Jujia, et al.
Veröffentlicht: (2026)

Controlled Retrieval-augmented Context Evaluation for Long-form RAG
von: Ju, Jia-Huei, et al.
Veröffentlicht: (2025)

Search for Coverage: Learning Coverage-Aware Retrieval with Augmented Sub-Question Answerability
von: Ju, Jia-Huei, et al.
Veröffentlicht: (2026)

Unifying Search and Recommendation with Dual-View Representation Learning in a Generative Paradigm
von: Zhao, Jujia, et al.
Veröffentlicht: (2025)

A Multi-Agent Conversational Recommender System
von: Fang, Jiabao, et al.
Veröffentlicht: (2024)

In a Few Words: Comparing Weak Supervision and LLMs for Short Query Intent Classification
von: Alexander, Daria, et al.
Veröffentlicht: (2025)

LUMI: Unsupervised Intent Clustering with Multiple Pseudo-Labels
von: Lin, I-Fan, et al.
Veröffentlicht: (2025)

Adaptive Orchestration of Modular Generative Information Access Systems
von: Hoveyda, Mohanna, et al.
Veröffentlicht: (2025)

Improving RAG for Personalization with Author Features and Contrastive Examples
von: Yazan, Mert, et al.
Veröffentlicht: (2025)

How role-play shapes relevance judgment in zero-shot LLM rankers
von: Wang, Yumeng, et al.
Veröffentlicht: (2025)

LANCER: LLM Reranking for Nugget Coverage
von: Ju, Jia-Huei, et al.
Veröffentlicht: (2026)

Doing Personal LAPS: LLM-Augmented Dialogue Construction for Personalized Multi-Session Conversational Search
von: Joko, Hideaki, et al.
Veröffentlicht: (2024)

Graph-Embedding Empowered Entity Retrieval
von: Gerritse, Emma J., et al.
Veröffentlicht: (2025)

The Impacts of Data, Ordering, and Intrinsic Dimensionality on Recall in Hierarchical Navigable Small Worlds
von: Elliott, Owen Pendrigh, et al.
Veröffentlicht: (2024)

Recall, Robustness, and Lexicographic Evaluation
von: Diaz, Fernando, et al.
Veröffentlicht: (2023)

Differentiable Semantic ID for Generative Recommendation
von: Fu, Junchen, et al.
Veröffentlicht: (2026)

Semantic Recall for Vector Search
von: Kuffo, Leonardo, et al.
Veröffentlicht: (2026)

Contextualization with SPLADE for High Recall Retrieval
von: Yang, Eugene
Veröffentlicht: (2024)

KuaiSearch: A Large-Scale E-Commerce Search Dataset for Recall, Ranking, and Relevance
von: Li, Yupeng, et al.
Veröffentlicht: (2026)

Evaluating Search System Explainability with Psychometrics and Crowdsourcing
von: Chen, Catherine, et al.
Veröffentlicht: (2022)

FullRecall: A Semantic Search-Based Ranking Approach for Maximizing Recall in Patent Retrieval
von: Ali, Amna, et al.
Veröffentlicht: (2025)

SSE: A Metric for Evaluating Search System Explainability
von: Chen, Catherine, et al.
Veröffentlicht: (2023)

Real World Conversational Entity Linking Requires More Than Zeroshots
von: Hoveyda, Mohanna, et al.
Veröffentlicht: (2024)

Vietnamese Legal Information Retrieval in Question-Answering System
von: Ba, Thiem Nguyen, et al.
Veröffentlicht: (2024)

Research on Evaluation Methods for Patent Novelty Search Systems and Empirical Analysis
von: Zhang, Shu, et al.
Veröffentlicht: (2025)

Total Recall QA: A Verifiable Evaluation Suite for Deep Research Agents
von: Rafiee, Mahta, et al.
Veröffentlicht: (2026)

Reproducing Complex Set-Compositional Information Retrieval
von: Degenhart, Vincent, et al.
Veröffentlicht: (2026)

OrLog: Resolving Complex Queries with LLMs and Probabilistic Reasoning
von: Hoveyda, Mohanna, et al.
Veröffentlicht: (2026)

Tutorial on Reasoning for IR & IR for Reasoning
von: Hoveyda, Mohanna, et al.
Veröffentlicht: (2026)

Domain-Adaptive Dense Retrieval for Brazilian Legal Search
von: Pereira, Jayr, et al.
Veröffentlicht: (2026)

Conversational Gold: Evaluating Personalized Conversational Search System using Gold Nuggets
von: Abbasiantaeb, Zahra, et al.
Veröffentlicht: (2025)

Inclusive Design Insights from a Preliminary Image-Based Conversational Search Systems Evaluation
von: Zheng, Yue, et al.
Veröffentlicht: (2024)

UniSearch: Rethinking Search System with a Unified Generative Architecture
von: Chen, Jiahui, et al.
Veröffentlicht: (2025)

On-Premise AI for the Newsroom: Evaluating Small Language Models for Investigative Document Search
von: Hagar, Nick, et al.
Veröffentlicht: (2025)