This&That: Language-Gesture Controlled Video Generation for Robot Planning
Fuente:
arXiv
Guardado en:
| Autores principales: | Wang, Boyang, Sridhar, Nikhil, Feng, Chao, Van der Merwe, Mark, Fishman, Adam, Fazeli, Nima, Park, Jeong Joon |
|---|---|
| Formato: | Preprint |
| Publicado: |
2024
|
| Materias: | |
| Acceso en línea: | |
| Etiquetas: |
Agregar Etiqueta
Sin Etiquetas, Sea el primero en etiquetar este registro!
|
Ejemplares similares
Estimating Deformable-Rigid Contact Interactions for a Deformable Tool via Learning and Model-Based Optimization
por: Van der Merwe, Mark, et al.
Publicado: (2025)
por: Van der Merwe, Mark, et al.
Publicado: (2025)
Simultaneous Extrinsic Contact and In-Hand Pose Estimation via Distributed Tactile Sensing
por: Van der Merwe, Mark, et al.
Publicado: (2025)
por: Van der Merwe, Mark, et al.
Publicado: (2025)
ViTaSCOPE: Visuo-tactile Implicit Representation for In-hand Pose and Extrinsic Contact Estimation
por: Lee, Jayjun, et al.
Publicado: (2025)
por: Lee, Jayjun, et al.
Publicado: (2025)
Cross-Sensor Touch Generation
por: Rodriguez, Samanta, et al.
Publicado: (2025)
por: Rodriguez, Samanta, et al.
Publicado: (2025)
RACER: Rich Language-Guided Failure Recovery Policies for Imitation Learning
por: Dai, Yinpei, et al.
Publicado: (2024)
por: Dai, Yinpei, et al.
Publicado: (2024)
In-Context Iterative Policy Improvement for Dynamic Manipulation
por: Van der Merwe, Mark, et al.
Publicado: (2025)
por: Van der Merwe, Mark, et al.
Publicado: (2025)
Vib2Move: In-Hand Object Reconfiguration via Fingertip Micro-Vibrations
por: Yi, Xili, et al.
Publicado: (2025)
por: Yi, Xili, et al.
Publicado: (2025)
Tactile-Driven Non-Prehensile Object Manipulation via Extrinsic Contact Mode Control
por: Oller, Miquel, et al.
Publicado: (2024)
por: Oller, Miquel, et al.
Publicado: (2024)
ViSA-Flow: Accelerating Robot Skill Learning via Large-Scale Video Semantic Action Flow
por: Chen, Changhe, et al.
Publicado: (2025)
por: Chen, Changhe, et al.
Publicado: (2025)
Hydrosoft: Non-Holonomic Hydroelastic Models for Compliant Tactile Manipulation
por: Oller, Miquel, et al.
Publicado: (2025)
por: Oller, Miquel, et al.
Publicado: (2025)
Visual-auditory Extrinsic Contact Estimation
por: Yi, Xili, et al.
Publicado: (2024)
por: Yi, Xili, et al.
Publicado: (2024)
Think Step by Step: Chain-of-Gesture Prompting for Error Detection in Robotic Surgical Videos
por: Shao, Zhimin, et al.
Publicado: (2024)
por: Shao, Zhimin, et al.
Publicado: (2024)
Evaluating Pointing Gestures for Target Selection in Human-Robot Collaboration
por: Sassali, Noora, et al.
Publicado: (2025)
por: Sassali, Noora, et al.
Publicado: (2025)
VLM See, Robot Do: Human Demo Video to Robot Action Plan via Vision Language Model
por: Wang, Beichen, et al.
Publicado: (2024)
por: Wang, Beichen, et al.
Publicado: (2024)
DexVLA: Vision-Language Model with Plug-In Diffusion Expert for General Robot Control
por: Wen, Junjie, et al.
Publicado: (2025)
por: Wen, Junjie, et al.
Publicado: (2025)
Tactile Neural De-rendering
por: Eyzaguirre, Jose A., et al.
Publicado: (2024)
por: Eyzaguirre, Jose A., et al.
Publicado: (2024)
Bimanual In-hand Manipulation using Dual Limit Surfaces
por: Dang, An, et al.
Publicado: (2024)
por: Dang, An, et al.
Publicado: (2024)
Gesture Recognition Robot via Kinect Sensor
por: Ismail Mohd Nazri
Publicado: (2016)
por: Ismail Mohd Nazri
Publicado: (2016)
Using Temperature Sampling to Effectively Train Robot Learning Policies on Imbalanced Datasets
por: Patil, Basavasagar, et al.
Publicado: (2025)
por: Patil, Basavasagar, et al.
Publicado: (2025)
VidBot: Learning Generalizable 3D Actions from In-the-Wild 2D Human Videos for Zero-Shot Robotic Manipulation
por: Chen, Hanzhi, et al.
Publicado: (2025)
por: Chen, Hanzhi, et al.
Publicado: (2025)
Touch2Touch: Cross-Modal Tactile Generation for Object Manipulation
por: Rodriguez, Samanta, et al.
Publicado: (2024)
por: Rodriguez, Samanta, et al.
Publicado: (2024)
GesVLA: Gesture-Aware Vision-Language-Action Model Embedded Representations
por: Guo, Wenxuan, et al.
Publicado: (2026)
por: Guo, Wenxuan, et al.
Publicado: (2026)
Gesture Controlled Robot For Human Detection
por: S, Athira T., et al.
Publicado: (2024)
por: S, Athira T., et al.
Publicado: (2024)
OpenFrontier: General Navigation with Visual-Language Grounded Frontiers
por: Padilla-Cerdio, Esteban, et al.
Publicado: (2026)
por: Padilla-Cerdio, Esteban, et al.
Publicado: (2026)
GrOMP: Grasped Object Manifold Projection for Multimodal Imitation Learning of Manipulation
por: Bogert, William van den, et al.
Publicado: (2025)
por: Bogert, William van den, et al.
Publicado: (2025)
GelSlim 4.0: Focusing on Touch and Reproducibility
por: Sipos, Andrea, et al.
Publicado: (2024)
por: Sipos, Andrea, et al.
Publicado: (2024)
Sound of Touch: Active Acoustic Tactile Sensing via String Vibrations
por: Yi, Xili, et al.
Publicado: (2026)
por: Yi, Xili, et al.
Publicado: (2026)
Neural Inverse Source Problems
por: Wi, Youngsun, et al.
Publicado: (2024)
por: Wi, Youngsun, et al.
Publicado: (2024)
RoboVIP: Multi-View Video Generation with Visual Identity Prompting Augments Robot Manipulation
por: Wang, Boyang, et al.
Publicado: (2026)
por: Wang, Boyang, et al.
Publicado: (2026)
Ultra-Range Gesture Recognition using a Web-Camera in Human-Robot Interaction
por: Bamani, Eran, et al.
Publicado: (2023)
por: Bamani, Eran, et al.
Publicado: (2023)
Large Video Planner Enables Generalizable Robot Control
por: Chen, Boyuan, et al.
Publicado: (2025)
por: Chen, Boyuan, et al.
Publicado: (2025)
Robotic Programmer: Video Instructed Policy Code Generation for Robotic Manipulation
por: Xie, Senwei, et al.
Publicado: (2025)
por: Xie, Senwei, et al.
Publicado: (2025)
Contact-Rich Robotic Assembly in Construction via Diffusion Policy Learning
por: Mozaffari, Salma, et al.
Publicado: (2025)
por: Mozaffari, Salma, et al.
Publicado: (2025)
QuaDreamer: Controllable Panoramic Video Generation for Quadruped Robots
por: Wu, Sheng, et al.
Publicado: (2025)
por: Wu, Sheng, et al.
Publicado: (2025)
FR-GESTURE: An RGBD Dataset For Gesture-based Human-Robot Interaction In First Responder Operations
por: Foteinos, Konstantinos, et al.
Publicado: (2026)
por: Foteinos, Konstantinos, et al.
Publicado: (2026)
Recognition of Dynamic Hand Gestures in Long Distance using a Web-Camera for Robot Guidance
por: Beeri, Eran Bamani, et al.
Publicado: (2024)
por: Beeri, Eran Bamani, et al.
Publicado: (2024)
RUMI: Rummaging Using Mutual Information
por: Zhong, Sheng, et al.
Publicado: (2024)
por: Zhong, Sheng, et al.
Publicado: (2024)
Interaction-Merged Motion Planning: Effectively Leveraging Diverse Motion Datasets for Robust Planning
por: Lee, Giwon, et al.
Publicado: (2025)
por: Lee, Giwon, et al.
Publicado: (2025)
Dynamic Gesture Recognition in Ultra-Range Distance for Effective Human-Robot Interaction
por: Beeri, Eran Bamani, et al.
Publicado: (2024)
por: Beeri, Eran Bamani, et al.
Publicado: (2024)
From Generated Human Videos to Physically Plausible Robot Trajectories
por: Ni, James, et al.
Publicado: (2025)
por: Ni, James, et al.
Publicado: (2025)
Ejemplares similares
-
Estimating Deformable-Rigid Contact Interactions for a Deformable Tool via Learning and Model-Based Optimization
por: Van der Merwe, Mark, et al.
Publicado: (2025) -
Simultaneous Extrinsic Contact and In-Hand Pose Estimation via Distributed Tactile Sensing
por: Van der Merwe, Mark, et al.
Publicado: (2025) -
ViTaSCOPE: Visuo-tactile Implicit Representation for In-hand Pose and Extrinsic Contact Estimation
por: Lee, Jayjun, et al.
Publicado: (2025) -
Cross-Sensor Touch Generation
por: Rodriguez, Samanta, et al.
Publicado: (2025) -
RACER: Rich Language-Guided Failure Recovery Policies for Imitation Learning
por: Dai, Yinpei, et al.
Publicado: (2024)