Mastering Robot Manipulation with Multimodal Prompts through Pretraining and Multi-task Fine-tuning
Fuente:
arXiv
Salvato in:
| Autori principali: | Li, Jiachen, Gao, Qiaozi, Johnston, Michael, Gao, Xiaofeng, He, Xuehai, Shakiah, Suhaila, Shi, Hangjie, Ghanadan, Reza, Wang, William Yang |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2023
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
GROUNDHOG: Grounding Large Language Models to Holistic Segmentation
di: Zhang, Yichi, et al.
Pubblicazione: (2024)
di: Zhang, Yichi, et al.
Pubblicazione: (2024)
FG-CLTP: Fine-Grained Contrastive Language Tactile Pretraining for Robotic Manipulation
di: Ma, Wenxuan, et al.
Pubblicazione: (2026)
di: Ma, Wenxuan, et al.
Pubblicazione: (2026)
Hyperbolic Multiview Pretraining for Robotic Manipulation
di: Yang, Jin, et al.
Pubblicazione: (2026)
di: Yang, Jin, et al.
Pubblicazione: (2026)
Visual Robotic Manipulation with Depth-Aware Pretraining
di: Wang, Wanying, et al.
Pubblicazione: (2024)
di: Wang, Wanying, et al.
Pubblicazione: (2024)
Learning Manipulation Skills through Robot Chain-of-Thought with Sparse Failure Guidance
di: Zhang, Kaifeng, et al.
Pubblicazione: (2024)
di: Zhang, Kaifeng, et al.
Pubblicazione: (2024)
VLA-RL: Towards Masterful and General Robotic Manipulation with Scalable Reinforcement Learning
di: Lu, Guanxing, et al.
Pubblicazione: (2025)
di: Lu, Guanxing, et al.
Pubblicazione: (2025)
"Don't forget to put the milk back!" Dataset for Enabling Embodied Agents to Detect Anomalous Situations
di: Mullen Jr, James F., et al.
Pubblicazione: (2024)
di: Mullen Jr, James F., et al.
Pubblicazione: (2024)
MLM: Learning Multi-task Loco-Manipulation Whole-Body Control for Quadruped Robot with Arm
di: Liu, Xin, et al.
Pubblicazione: (2025)
di: Liu, Xin, et al.
Pubblicazione: (2025)
Learning Physics from Pretrained Video Models: A Multimodal Continuous and Sequential World Interaction Models for Robotic Manipulation
di: Song, Zijian, et al.
Pubblicazione: (2026)
di: Song, Zijian, et al.
Pubblicazione: (2026)
CoPa: General Robotic Manipulation through Spatial Constraints of Parts with Foundation Models
di: Huang, Haoxu, et al.
Pubblicazione: (2024)
di: Huang, Haoxu, et al.
Pubblicazione: (2024)
Autonomous Laparoscope Control through Unified Mechanics-Based Representation of Multimodal Intraoperative Information
di: Li, Xiaojian, et al.
Pubblicazione: (2026)
di: Li, Xiaojian, et al.
Pubblicazione: (2026)
OVAL-Prompt: Open-Vocabulary Affordance Localization for Robot Manipulation through LLM Affordance-Grounding
di: Tong, Edmond, et al.
Pubblicazione: (2024)
di: Tong, Edmond, et al.
Pubblicazione: (2024)
MOKA: Open-World Robotic Manipulation through Mark-Based Visual Prompting
di: Liu, Fangchen, et al.
Pubblicazione: (2024)
di: Liu, Fangchen, et al.
Pubblicazione: (2024)
Generative Artificial Intelligence in Robotic Manipulation: A Survey
di: Zhang, Kun, et al.
Pubblicazione: (2025)
di: Zhang, Kun, et al.
Pubblicazione: (2025)
Dexterous Cable Manipulation: Taxonomy, Multi-Fingered Hand Design, and Long-Horizon Manipulation
di: Zhaole, Sun, et al.
Pubblicazione: (2025)
di: Zhaole, Sun, et al.
Pubblicazione: (2025)
FOSP: Fine-tuning Offline Safe Policy through World Models
di: Cao, Chenyang, et al.
Pubblicazione: (2024)
di: Cao, Chenyang, et al.
Pubblicazione: (2024)
Subsecond 3D Mesh Generation for Robot Manipulation
di: Wang, Qian, et al.
Pubblicazione: (2025)
di: Wang, Qian, et al.
Pubblicazione: (2025)
Behavioral Mode Discovery for Fine-tuning Multimodal Generative Policies
di: Longhini, Alberta, et al.
Pubblicazione: (2026)
di: Longhini, Alberta, et al.
Pubblicazione: (2026)
SyncTwin: Fast Digital Twin Construction and Synchronization for Safe Robotic Manipulation
di: Huang, Ruopeng, et al.
Pubblicazione: (2026)
di: Huang, Ruopeng, et al.
Pubblicazione: (2026)
BifrostUMI: Bridging Robot-Free Demonstrations and Humanoid Whole-Body Manipulation
di: Yu, Chenhao, et al.
Pubblicazione: (2026)
di: Yu, Chenhao, et al.
Pubblicazione: (2026)
Kaiwu: A Multimodal Manipulation Dataset and Framework for Robot Learning and Human-Robot Interaction
di: Jiang, Shuo, et al.
Pubblicazione: (2025)
di: Jiang, Shuo, et al.
Pubblicazione: (2025)
Multimodal Spiking Neural Network for Space Robotic Manipulation
di: Zhang, Liwen, et al.
Pubblicazione: (2025)
di: Zhang, Liwen, et al.
Pubblicazione: (2025)
Data Scaling Laws in Imitation Learning for Robotic Manipulation
di: Hu, Yingdong, et al.
Pubblicazione: (2024)
di: Hu, Yingdong, et al.
Pubblicazione: (2024)
Robotic-CLIP: Fine-tuning CLIP on Action Data for Robotic Applications
di: Nguyen, Nghia, et al.
Pubblicazione: (2024)
di: Nguyen, Nghia, et al.
Pubblicazione: (2024)
CRAFT: Adapting VLA Models to Contact-rich Manipulation via Force-aware Curriculum Fine-tuning
di: Zhang, Yike, et al.
Pubblicazione: (2026)
di: Zhang, Yike, et al.
Pubblicazione: (2026)
Bayesian BIM-Guided Construction Robot Navigation with NLP Safety Prompts in Dynamic Environments
di: Amani, Mani, et al.
Pubblicazione: (2025)
di: Amani, Mani, et al.
Pubblicazione: (2025)
Beyond the Majority: Long-tail Imitation Learning for Robotic Manipulation
di: Zhu, Junhong, et al.
Pubblicazione: (2026)
di: Zhu, Junhong, et al.
Pubblicazione: (2026)
Fine Robotic Manipulation without Force/Torque Sensor
di: Shan, Shilin, et al.
Pubblicazione: (2023)
di: Shan, Shilin, et al.
Pubblicazione: (2023)
Learning Long-Horizon Robot Manipulation Skills via Privileged Action
di: Mao, Xiaofeng, et al.
Pubblicazione: (2025)
di: Mao, Xiaofeng, et al.
Pubblicazione: (2025)
Pretraining-finetuning Framework for Efficient Co-design: A Case Study on Quadruped Robot Parkour
di: Chen, Ci, et al.
Pubblicazione: (2024)
di: Chen, Ci, et al.
Pubblicazione: (2024)
3PoinTr: 3D Point Tracks for Robot Manipulation Pretraining from Casual Videos
di: Hung, Adam, et al.
Pubblicazione: (2026)
di: Hung, Adam, et al.
Pubblicazione: (2026)
3D-MVP: 3D Multiview Pretraining for Robotic Manipulation
di: Qian, Shengyi, et al.
Pubblicazione: (2024)
di: Qian, Shengyi, et al.
Pubblicazione: (2024)
Graph-Fused Vision-Language-Action for Policy Reasoning in Multi-Arm Robotic Manipulation
di: Li, Shunlei, et al.
Pubblicazione: (2025)
di: Li, Shunlei, et al.
Pubblicazione: (2025)
ManiGaussian: Dynamic Gaussian Splatting for Multi-task Robotic Manipulation
di: Lu, Guanxing, et al.
Pubblicazione: (2024)
di: Lu, Guanxing, et al.
Pubblicazione: (2024)
Sensor Fault Detection and Compensation with Performance Prescription for Robotic Manipulators
di: Ebrahimi, S. Mohammadreza, et al.
Pubblicazione: (2023)
di: Ebrahimi, S. Mohammadreza, et al.
Pubblicazione: (2023)
ACORN: Adaptive Contrastive Optimization for Safe and Robust Fine-Grained Robotic Manipulation
di: Zhou, Zhongquan, et al.
Pubblicazione: (2025)
di: Zhou, Zhongquan, et al.
Pubblicazione: (2025)
KaRMA: A Kinematic Metric for Fine Manipulation Ability in Robotic Hands
di: Peticco, Martin, et al.
Pubblicazione: (2026)
di: Peticco, Martin, et al.
Pubblicazione: (2026)
RoboHorizon: An LLM-Assisted Multi-View World Model for Long-Horizon Robotic Manipulation
di: Chen, Zixuan, et al.
Pubblicazione: (2025)
di: Chen, Zixuan, et al.
Pubblicazione: (2025)
Adversarial Fine-tuning in Offline-to-Online Reinforcement Learning for Robust Robot Control
di: Ayabe, Shingo, et al.
Pubblicazione: (2025)
di: Ayabe, Shingo, et al.
Pubblicazione: (2025)
Robotic Scene Cloning:Advancing Zero-Shot Robotic Scene Adaptation in Manipulation via Visual Prompt Editing
di: Huang, Binyuan, et al.
Pubblicazione: (2026)
di: Huang, Binyuan, et al.
Pubblicazione: (2026)
Documenti analoghi
-
GROUNDHOG: Grounding Large Language Models to Holistic Segmentation
di: Zhang, Yichi, et al.
Pubblicazione: (2024) -
FG-CLTP: Fine-Grained Contrastive Language Tactile Pretraining for Robotic Manipulation
di: Ma, Wenxuan, et al.
Pubblicazione: (2026) -
Hyperbolic Multiview Pretraining for Robotic Manipulation
di: Yang, Jin, et al.
Pubblicazione: (2026) -
Visual Robotic Manipulation with Depth-Aware Pretraining
di: Wang, Wanying, et al.
Pubblicazione: (2024) -
Learning Manipulation Skills through Robot Chain-of-Thought with Sparse Failure Guidance
di: Zhang, Kaifeng, et al.
Pubblicazione: (2024)