AstroAlertBench: Evaluating the Accuracy, Reasoning, and Honesty of Multimodal LLMs in Astronomical Classification
Fuente:
arXiv
Salvato in:
| Autori principali: | Chen, Claire, Xiao, Jiabao Sean, Liu, Shuze Daniel, Paolino, Facundo Perez, Handley, Luke, Laz, Theophile Jegou du, Nilsson, Ricky, Zou, Alice, Graham, Matthew, Mahabal, Ashish |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2026
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
The automation of optical transient discovery and classification in Rubin-era time-domain astronomy
di: Rehemtulla, Nabeel, et al.
Pubblicazione: (2025)
di: Rehemtulla, Nabeel, et al.
Pubblicazione: (2025)
$\texttt{BTSbot}$: A Multi-input Convolutional Neural Network to Automate and Expedite Bright Transient Identification for the Zwicky Transient Facility
di: Rehemtulla, Nabeel, et al.
Pubblicazione: (2023)
di: Rehemtulla, Nabeel, et al.
Pubblicazione: (2023)
AstroQ: Automated Scheduling of Cadenced Astronomical Observations
di: Lubin, Jack, et al.
Pubblicazione: (2025)
di: Lubin, Jack, et al.
Pubblicazione: (2025)
In Search of the Unknown Unknowns: A Multi-Metric Distance Ensemble for Out of Distribution Anomaly Detection in Astronomical Surveys
di: Chaini, Siddharth, et al.
Pubblicazione: (2025)
di: Chaini, Siddharth, et al.
Pubblicazione: (2025)
Low-latency Forecasts of Kilonova Light Curves for Rubin and ZTF
di: Plestkova, Natalya, et al.
Pubblicazione: (2025)
di: Plestkova, Natalya, et al.
Pubblicazione: (2025)
Alignment for Honesty
di: Yang, Yuqing, et al.
Pubblicazione: (2023)
di: Yang, Yuqing, et al.
Pubblicazione: (2023)
AstroQ: Automated Scheduling of Cadenced Astronomical Observations
di: Lubin, Jack
Pubblicazione: (2025)
di: Lubin, Jack
Pubblicazione: (2025)
The MASK Benchmark: Disentangling Honesty From Accuracy in AI Systems
di: Ren, Richard, et al.
Pubblicazione: (2025)
di: Ren, Richard, et al.
Pubblicazione: (2025)
Deconvolution for Large Astronomical Surveys: A Study of the Scaled Gradient Projection Method on Zwicky Transient Facility Data
di: Gondhalekar, Yash, et al.
Pubblicazione: (2025)
di: Gondhalekar, Yash, et al.
Pubblicazione: (2025)
Nested Sampling for ARIMA Model Selection in Astronomical Time-Series Analysis
di: Naik, Ajinkya, et al.
Pubblicazione: (2025)
di: Naik, Ajinkya, et al.
Pubblicazione: (2025)
An Online Framework for Fitting Fast Transient Lightcurves
di: Barna, Tyler, et al.
Pubblicazione: (2024)
di: Barna, Tyler, et al.
Pubblicazione: (2024)
Pre-training vision models for the classification of alerts from wide-field time-domain surveys
di: Rehemtulla, Nabeel, et al.
Pubblicazione: (2025)
di: Rehemtulla, Nabeel, et al.
Pubblicazione: (2025)
Astro-MoE: Mixture of Experts for Multiband Astronomical Time Series
di: Cádiz-Leyton, Martina, et al.
Pubblicazione: (2025)
di: Cádiz-Leyton, Martina, et al.
Pubblicazione: (2025)
The Zwicky Transient Facility Bright Transient Survey. III. $\texttt{BTSbot}$: Automated Identification and Follow-up of Bright Transients with Deep Learning
di: Rehemtulla, Nabeel, et al.
Pubblicazione: (2024)
di: Rehemtulla, Nabeel, et al.
Pubblicazione: (2024)
Accuracy Is Not Honesty in AI Models: Human Agency and the Dynamics of Interaction
di: Matta, David (Daoud)
Pubblicazione: (2026)
di: Matta, David (Daoud)
Pubblicazione: (2026)
Instructing LLMs to Negotiate using Reinforcement Learning with Verifiable Rewards
di: Liu, Shuze Daniel, et al.
Pubblicazione: (2026)
di: Liu, Shuze Daniel, et al.
Pubblicazione: (2026)
Honesty over Accuracy: Trustworthy Language Models through Reinforced Hesitation
di: Mohamadi, Mohamad Amin, et al.
Pubblicazione: (2025)
di: Mohamadi, Mohamad Amin, et al.
Pubblicazione: (2025)
Temporal Stamp Classifier: Classifying Short Sequences of Astronomical Alerts
di: O., Daniel Neira, et al.
Pubblicazione: (2024)
di: O., Daniel Neira, et al.
Pubblicazione: (2024)
BOOM and Babamul: a real-time, multi-survey, optical alert broker system operating at scale
di: Laz, Theophile Jegou du, et al.
Pubblicazione: (2025)
di: Laz, Theophile Jegou du, et al.
Pubblicazione: (2025)
AstroVLM: Expert Multi-agent Collaborative Reasoning for Astronomical Imaging Quality Diagnosis
di: Han, Yaohui, et al.
Pubblicazione: (2026)
di: Han, Yaohui, et al.
Pubblicazione: (2026)
Separating Photospheric and Starspot Magnetic Fields in Pre-Main-Sequence Stars Using IGRINS Spectroscopy
di: Paolino, Facundo Pérez, et al.
Pubblicazione: (2025)
di: Paolino, Facundo Pérez, et al.
Pubblicazione: (2025)
AstroSURE: Learning to Remove Noise from Astronomical Images Without Ground Truth Data
di: Vaheb, Omid, et al.
Pubblicazione: (2026)
di: Vaheb, Omid, et al.
Pubblicazione: (2026)
PI-AstroDeconv: A Physics-Informed Unsupervised Learning Method for Astronomical Image Deconvolution
di: Ni, Shulei, et al.
Pubblicazione: (2024)
di: Ni, Shulei, et al.
Pubblicazione: (2024)
Honesty is the Best Policy: On the Accuracy of Apple Privacy Labels Compared to Apps' Privacy Policies
di: Ali, Mir Masood, et al.
Pubblicazione: (2023)
di: Ali, Mir Masood, et al.
Pubblicazione: (2023)
Doubly Optimal Policy Evaluation for Reinforcement Learning
di: Liu, Shuze Daniel, et al.
Pubblicazione: (2024)
di: Liu, Shuze Daniel, et al.
Pubblicazione: (2024)
Efficient Multi-Policy Evaluation for Reinforcement Learning
di: Liu, Shuze Daniel, et al.
Pubblicazione: (2024)
di: Liu, Shuze Daniel, et al.
Pubblicazione: (2024)
Efficient Policy Evaluation with Safety Constraint for Reinforcement Learning
di: Chen, Claire, et al.
Pubblicazione: (2024)
di: Chen, Claire, et al.
Pubblicazione: (2024)
Probabilistic Data-Driven Modelling of Astrophysical Transients: The Neural Process Family for Ultrafast and Class-Agnostic Light Curve Reconstruction with NightLANP
di: Chaini, Siddharth, et al.
Pubblicazione: (2026)
di: Chaini, Siddharth, et al.
Pubblicazione: (2026)
Ca2+ transient detection and segmentation with the Astronomically motivated algorithm for Background Estimation And Transient Segmentation (Astro-BEATS)
di: Fan, Bolin, et al.
Pubblicazione: (2026)
di: Fan, Bolin, et al.
Pubblicazione: (2026)
Your Outie Is a Wonderful Astronomer: Macrodata Refinement of the Astro-ph ArXiv Feed at Phermon Industries
di: Ting, Yuan-Sen
Pubblicazione: (2026)
di: Ting, Yuan-Sen
Pubblicazione: (2026)
Frabjous: Deep Learning Fast Radio Burst Morphologies
di: Kumar, Ajay, et al.
Pubblicazione: (2025)
di: Kumar, Ajay, et al.
Pubblicazione: (2025)
MoHoBench: Assessing Honesty of Multimodal Large Language Models via Unanswerable Visual Questions
di: Zhu, Yanxu, et al.
Pubblicazione: (2025)
di: Zhu, Yanxu, et al.
Pubblicazione: (2025)
The data for "The ZTF Source Classification Project: III. A Catalog of Variable Sources"
di: Healy, Brian F., et al.
Pubblicazione: (2020)
di: Healy, Brian F., et al.
Pubblicazione: (2020)
The data for "The ZTF Source Classification Project: III. A Catalog of Variable Sources"
di: Healy, Brian F., et al.
Pubblicazione: (2022)
di: Healy, Brian F., et al.
Pubblicazione: (2022)
The ZTF Source Classification Project: III. A Catalog of Variable Sources
di: Healy, Brian F., et al.
Pubblicazione: (2023)
di: Healy, Brian F., et al.
Pubblicazione: (2023)
Secular Excitation of Polar Neptune Orbits in Pure Disk-Planet Systems
di: Handley, Luke B., et al.
Pubblicazione: (2026)
di: Handley, Luke B., et al.
Pubblicazione: (2026)
Enrique Hugo Masés. El mundo de la niñez rural patagónica. Una historia de desigualdad. Prometeo, 2022, 336 páginas
di: Carolina Villar Laz
Pubblicazione: (2023)
di: Carolina Villar Laz
Pubblicazione: (2023)
La posición del PRI en la política mexicana
di: Philip Paolino
Pubblicazione: (2009)
di: Philip Paolino
Pubblicazione: (2009)
La dinámica sectorial y el desarrollo del PENCTI
di: C. Paolino
Pubblicazione: (2007)
di: C. Paolino
Pubblicazione: (2007)
DETERMINANTES SOCIALES DEL SEGUIMIENTO Y TRATAMIENTO DE MUJERES CON PAP ANORMAL EN AVELLANEDA, PROVINCIA DE BUENOS AIRES
di: Melisa Paolino
Pubblicazione: (2011)
di: Melisa Paolino
Pubblicazione: (2011)
Documenti analoghi
-
The automation of optical transient discovery and classification in Rubin-era time-domain astronomy
di: Rehemtulla, Nabeel, et al.
Pubblicazione: (2025) -
$\texttt{BTSbot}$: A Multi-input Convolutional Neural Network to Automate and Expedite Bright Transient Identification for the Zwicky Transient Facility
di: Rehemtulla, Nabeel, et al.
Pubblicazione: (2023) -
AstroQ: Automated Scheduling of Cadenced Astronomical Observations
di: Lubin, Jack, et al.
Pubblicazione: (2025) -
In Search of the Unknown Unknowns: A Multi-Metric Distance Ensemble for Out of Distribution Anomaly Detection in Astronomical Surveys
di: Chaini, Siddharth, et al.
Pubblicazione: (2025) -
Low-latency Forecasts of Kilonova Light Curves for Rubin and ZTF
di: Plestkova, Natalya, et al.
Pubblicazione: (2025)