Buchumschlag

Beyond Sight: Finetuning Generalist Robot Policies with Heterogeneous Sensors via Language Grounding

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Jones, Joshua, Mees, Oier, Sferrazza, Carmelo, Stachowicz, Kyle, Abbeel, Pieter, Levine, Sergey
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Robotics Artificial Intelligence
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Steering Your Generalists: Improving Robotic Foundation Models via Value Guidance
von: Nakamoto, Mitsuhiko, et al.
Veröffentlicht: (2024)

Body Transformer: Leveraging Robot Embodiment for Policy Learning
von: Sferrazza, Carmelo, et al.
Veröffentlicht: (2024)

RACER: Epistemic Risk-Sensitive RL Enables Fast Driving with Fewer Crashes
von: Stachowicz, Kyle, et al.
Veröffentlicht: (2024)

MOKA: Open-World Robotic Manipulation through Mark-Based Visual Prompting
von: Liu, Fangchen, et al.
Veröffentlicht: (2024)

MaxInfoRL: Boosting exploration in reinforcement learning through information gain maximization
von: Sukhija, Bhavya, et al.
Veröffentlicht: (2024)

Robust Finetuning of Vision-Language-Action Robot Policies via Parameter Merging
von: Yadav, Yajat, et al.
Veröffentlicht: (2025)

Autonomous Improvement of Instruction Following Skills via Foundation Models
von: Zhou, Zhiyuan, et al.
Veröffentlicht: (2024)

RLDG: Robotic Generalist Policy Distillation via Reinforcement Learning
von: Xu, Charles, et al.
Veröffentlicht: (2024)

The Ingredients for Robotic Diffusion Transformers
von: Dasari, Sudeep, et al.
Veröffentlicht: (2024)

HumanoidBench: Simulated Humanoid Benchmark for Whole-Body Locomotion and Manipulation
von: Sferrazza, Carmelo, et al.
Veröffentlicht: (2024)

Policy Adaptation via Language Optimization: Decomposing Tasks for Few-Shot Imitation
von: Myers, Vivek, et al.
Veröffentlicht: (2024)

Learning Sim-to-Real Humanoid Locomotion in 15 Minutes
von: Seo, Younggyo, et al.
Veröffentlicht: (2025)

FAST: Efficient Action Tokenization for Vision-Language-Action Models
von: Pertsch, Karl, et al.
Veröffentlicht: (2025)

Flow Policy Gradients for Robot Control
von: Yi, Brent, et al.
Veröffentlicht: (2026)

FastTD3: Simple, Fast, and Capable Reinforcement Learning for Humanoid Control
von: Seo, Younggyo, et al.
Veröffentlicht: (2025)

LeLaN: Learning A Language-Conditioned Navigation Policy from In-the-Wild Videos
von: Hirose, Noriaki, et al.
Veröffentlicht: (2024)

GaussGym: An open-source real-to-sim framework for learning locomotion from pixels
von: Escontrela, Alejandro, et al.
Veröffentlicht: (2025)

AutoEval: Autonomous Evaluation of Generalist Robot Manipulation Policies in the Real World
von: Zhou, Zhiyuan, et al.
Veröffentlicht: (2025)

Robotic Control via Embodied Chain-of-Thought Reasoning
von: Zawalski, Michał, et al.
Veröffentlicht: (2024)

Scaling Cross-Embodied Learning: One Policy for Manipulation, Navigation, Locomotion and Aviation
von: Doshi, Ria, et al.
Veröffentlicht: (2024)

SteerVLA: Steering Vision-Language-Action Models in Long-Tail Driving Scenarios
von: Gao, Tian, et al.
Veröffentlicht: (2026)

Octo: An Open-Source Generalist Robot Policy
von: Octo Model Team, et al.
Veröffentlicht: (2024)

Hand-Object Interaction Pretraining from Videos
von: Singh, Himanshu Gaurav, et al.
Veröffentlicht: (2024)

Multimodal Spatial Language Maps for Robot Navigation and Manipulation
von: Huang, Chenguang, et al.
Veröffentlicht: (2025)

mimic-video: Video-Action Models for Generalizable Robot Control Beyond VLAs
von: Pai, Jonas, et al.
Veröffentlicht: (2025)

Scaling Robot Policy Learning via Zero-Shot Labeling with Foundation Models
von: Blank, Nils, et al.
Veröffentlicht: (2024)

Posterior Behavioral Cloning: Pretraining BC Policies for Efficient RL Finetuning
von: Wagenmaker, Andrew, et al.
Veröffentlicht: (2025)

From LLMs to Actions: Latent Codes as Bridges in Hierarchical Robot Control
von: Shentu, Yide, et al.
Veröffentlicht: (2024)

Residual Off-Policy RL for Finetuning Behavior Cloning Policies
von: Ankile, Lars, et al.
Veröffentlicht: (2025)

Reinforcement Learning for Versatile, Dynamic, and Robust Bipedal Locomotion Control
von: Li, Zhongyu, et al.
Veröffentlicht: (2024)

Vision-Language Models Provide Promptable Representations for Reinforcement Learning
von: Chen, William, et al.
Veröffentlicht: (2024)

OmniRetarget: Interaction-Preserving Data Generation for Humanoid Whole-Body Loco-Manipulation and Scene Interaction
von: Yang, Lujie, et al.
Veröffentlicht: (2025)

Perceptive Humanoid Parkour: Chaining Dynamic Human Skills via Motion Matching
von: Wu, Zhen, et al.
Veröffentlicht: (2026)

Coarse-to-fine Q-Network with Action Sequence for Data-Efficient Reinforcement Learning
von: Seo, Younggyo, et al.
Veröffentlicht: (2024)

Training Strategies for Efficient Embodied Reasoning
von: Chen, William, et al.
Veröffentlicht: (2025)

DreamSmooth: Improving Model-based Reinforcement Learning via Reward Smoothing
von: Lee, Vint, et al.
Veröffentlicht: (2023)

A Vision-based Sensing Approach for a Spherical Soft Robotic Arm
von: Hofer, Matthias, et al.
Veröffentlicht: (2020)

Offline Imitation Learning Through Graph Search and Retrieval
von: Yin, Zhao-Heng, et al.
Veröffentlicht: (2024)

Precise and Dexterous Robotic Manipulation via Human-in-the-Loop Reinforcement Learning
von: Luo, Jianlan, et al.
Veröffentlicht: (2024)

A Taxonomy for Evaluating Generalist Robot Manipulation Policies
von: Gao, Jensen, et al.
Veröffentlicht: (2025)