Visual Haystacks: A Vision-Centric Needle-In-A-Haystack Benchmark
Fuente:
arXiv
Salvato in:
| Autori principali: | Wu, Tsung-Han, Biamby, Giscard, Quenum, Jerome, Gupta, Ritwik, Gonzalez, Joseph E., Darrell, Trevor, Chan, David M. |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
LLARVA: Vision-Action Instruction Tuning Enhances Robot Learning
di: Niu, Dantong, et al.
Pubblicazione: (2024)
di: Niu, Dantong, et al.
Pubblicazione: (2024)
Needle In A Multimodal Haystack
di: Wang, Weiyun, et al.
Pubblicazione: (2024)
di: Wang, Weiyun, et al.
Pubblicazione: (2024)
Two Causally Related Needles in a Video Haystack
di: Li, Miaoyu, et al.
Pubblicazione: (2025)
di: Li, Miaoyu, et al.
Pubblicazione: (2025)
Needle In A Video Haystack: A Scalable Synthetic Evaluator for Video MLLMs
di: Zhao, Zijia, et al.
Pubblicazione: (2024)
di: Zhao, Zijia, et al.
Pubblicazione: (2024)
Losing Visual Needles in Image Haystacks: Vision Language Models are Easily Distracted in Short and Long Contexts
di: Sharma, Aditya, et al.
Pubblicazione: (2024)
di: Sharma, Aditya, et al.
Pubblicazione: (2024)
Generate, but Verify: Reducing Hallucination in Vision-Language Models with Retrospective Resampling
di: Wu, Tsung-Han, et al.
Pubblicazione: (2025)
di: Wu, Tsung-Han, et al.
Pubblicazione: (2025)
MAGNET: A Multi-agent Framework for Finding Audio-Visual Needles by Reasoning over Multi-Video Haystacks
di: Chowdhury, Sanjoy, et al.
Pubblicazione: (2025)
di: Chowdhury, Sanjoy, et al.
Pubblicazione: (2025)
LISAT: Language-Instructed Segmentation Assistant for Satellite Imagery
di: Quenum, Jerome, et al.
Pubblicazione: (2025)
di: Quenum, Jerome, et al.
Pubblicazione: (2025)
REOrdering Patches Improves Vision Models
di: Kutscher, Declan, et al.
Pubblicazione: (2025)
di: Kutscher, Declan, et al.
Pubblicazione: (2025)
Multimodal Needle in a Haystack: Benchmarking Long-Context Capability of Multimodal Large Language Models
di: Wang, Hengyi, et al.
Pubblicazione: (2024)
di: Wang, Hengyi, et al.
Pubblicazione: (2024)
Needle in a Haystack: One-Class Representation Learning for Detecting Rare Malignant Cells in Computational Cytology
di: Chatterjee, Swarnadip, et al.
Pubblicazione: (2026)
di: Chatterjee, Swarnadip, et al.
Pubblicazione: (2026)
Document Haystacks: Vision-Language Reasoning Over Piles of 1000+ Documents
di: Chen, Jun, et al.
Pubblicazione: (2024)
di: Chen, Jun, et al.
Pubblicazione: (2024)
Document Haystack: A Long Context Multimodal Image/Document Understanding Vision LLM Benchmark
di: Huybrechts, Goeric, et al.
Pubblicazione: (2025)
di: Huybrechts, Goeric, et al.
Pubblicazione: (2025)
MultiHaystack: Benchmarking Multimodal Retrieval and Reasoning over 40K Images, Videos, and Documents
di: Xu, Dannong, et al.
Pubblicazione: (2026)
di: Xu, Dannong, et al.
Pubblicazione: (2026)
Puzzled by Puzzles: When Vision-Language Models Can't Take a Hint
di: Lee, Heekyung, et al.
Pubblicazione: (2025)
di: Lee, Heekyung, et al.
Pubblicazione: (2025)
Reasoning on Multiple Needles In A Haystack
di: Wang, Yidong
Pubblicazione: (2025)
di: Wang, Yidong
Pubblicazione: (2025)
Finding Outliers in a Haystack: Anomaly Detection for Large Pointcloud Scenes
di: Faulkner, Ryan, et al.
Pubblicazione: (2025)
di: Faulkner, Ryan, et al.
Pubblicazione: (2025)
Multi-axis Analysis of Image Manipulation Localization
di: Nichols, Keanu, et al.
Pubblicazione: (2026)
di: Nichols, Keanu, et al.
Pubblicazione: (2026)
Looking for the Information Needle in the Internet Haystack.
di: Clausen, Helge
Pubblicazione: (1996)
di: Clausen, Helge
Pubblicazione: (1996)
xT: Nested Tokenization for Larger Context in Large Images
di: Gupta, Ritwik, et al.
Pubblicazione: (2024)
di: Gupta, Ritwik, et al.
Pubblicazione: (2024)
Finding BSM Needles in Electromagnetic Haystacks at DUNE
di: Brdar, Vedran, et al.
Pubblicazione: (2025)
di: Brdar, Vedran, et al.
Pubblicazione: (2025)
Sequential-NIAH: A Needle-In-A-Haystack Benchmark for Extracting Sequential Needles from Long Contexts
di: Yu, Yifei, et al.
Pubblicazione: (2025)
di: Yu, Yifei, et al.
Pubblicazione: (2025)
Needle in the Haystack for Memory Based Large Language Models
di: Nelson, Elliot, et al.
Pubblicazione: (2024)
di: Nelson, Elliot, et al.
Pubblicazione: (2024)
Finding Interest Needle in Popularity Haystack: Improving Retrieval by Modeling Item Exposure
di: Agarwal, Rahul, et al.
Pubblicazione: (2025)
di: Agarwal, Rahul, et al.
Pubblicazione: (2025)
When Do We Not Need Larger Vision Models?
di: Shi, Baifeng, et al.
Pubblicazione: (2024)
di: Shi, Baifeng, et al.
Pubblicazione: (2024)
Jailbreaking in the Haystack
di: Shah, Rishi Rajesh, et al.
Pubblicazione: (2025)
di: Shah, Rishi Rajesh, et al.
Pubblicazione: (2025)
EPIC-Bench: A Perception-Centric Benchmark for Fine-Grained Embodied Visual Grounding in Vision-Language Models
di: Shan, Haozhe, et al.
Pubblicazione: (2026)
di: Shan, Haozhe, et al.
Pubblicazione: (2026)
DENIAHL: In-Context Features Influence LLM Needle-In-A-Haystack Abilities
di: Dai, Hui, et al.
Pubblicazione: (2024)
di: Dai, Hui, et al.
Pubblicazione: (2024)
Vision-Language Models Create Cross-Modal Task Representations
di: Luo, Grace, et al.
Pubblicazione: (2024)
di: Luo, Grace, et al.
Pubblicazione: (2024)
GOLD PANNING: Strategic Context Shuffling for Needle-in-Haystack Reasoning
di: Byerly, Adam, et al.
Pubblicazione: (2025)
di: Byerly, Adam, et al.
Pubblicazione: (2025)
Hidden in the Haystack: Smaller Needles are More Difficult for LLMs to Find
di: Bianchi, Owen, et al.
Pubblicazione: (2025)
di: Bianchi, Owen, et al.
Pubblicazione: (2025)
Needles in Haystacks: Exploring Selective Novel Adsorbents for PFAS Treatment
di: Bryan Sadowski, et al.
Pubblicazione: (2026)
di: Bryan Sadowski, et al.
Pubblicazione: (2026)
ALOHa: A New Measure for Hallucination in Captioning Models
di: Petryk, Suzanne, et al.
Pubblicazione: (2024)
di: Petryk, Suzanne, et al.
Pubblicazione: (2024)
Finding Visual Task Vectors
di: Hojel, Alberto, et al.
Pubblicazione: (2024)
di: Hojel, Alberto, et al.
Pubblicazione: (2024)
VisionArena: 230K Real World User-VLM Conversations with Preference Labels
di: Chou, Christopher, et al.
Pubblicazione: (2024)
di: Chou, Christopher, et al.
Pubblicazione: (2024)
DAVE: A VLM Vision Encoder for Document Understanding and Web Agents
di: Huang, Brandon, et al.
Pubblicazione: (2025)
di: Huang, Brandon, et al.
Pubblicazione: (2025)
CLAIR-A: Leveraging Large Language Models to Judge Audio Captions
di: Wu, Tsung-Han, et al.
Pubblicazione: (2024)
di: Wu, Tsung-Han, et al.
Pubblicazione: (2024)
A Needle in a Cosmic Haystack: A Review of FRB Search Techniques
di: Rajwade, Kaustubh, et al.
Pubblicazione: (2024)
di: Rajwade, Kaustubh, et al.
Pubblicazione: (2024)
VisualNeedle: Benchmarking Active Visual Search in Information-Dense Scenes
di: Chen, Jingru, et al.
Pubblicazione: (2026)
di: Chen, Jingru, et al.
Pubblicazione: (2026)
Visually Prompted Benchmarks Are Surprisingly Fragile
di: Feng, Haiwen, et al.
Pubblicazione: (2025)
di: Feng, Haiwen, et al.
Pubblicazione: (2025)
Documenti analoghi
-
LLARVA: Vision-Action Instruction Tuning Enhances Robot Learning
di: Niu, Dantong, et al.
Pubblicazione: (2024) -
Needle In A Multimodal Haystack
di: Wang, Weiyun, et al.
Pubblicazione: (2024) -
Two Causally Related Needles in a Video Haystack
di: Li, Miaoyu, et al.
Pubblicazione: (2025) -
Needle In A Video Haystack: A Scalable Synthetic Evaluator for Video MLLMs
di: Zhao, Zijia, et al.
Pubblicazione: (2024) -
Losing Visual Needles in Image Haystacks: Vision Language Models are Easily Distracted in Short and Long Contexts
di: Sharma, Aditya, et al.
Pubblicazione: (2024)