gr00t机器人数据录制,通过遥操作的方式,操作isaacsim录制仿真数据的方法,HDF5格式秒变LeRobot标准数据集(数据采集一)
下面两个介绍的项目都是基于 Isaac Sim
一,通过手柄操作isaacsim,然后用ros来录制数据:
How to Utilize LeRobot, Isaac Sim and ROS2
参考视频地址:
https://www.youtube.com/watch?v=eO5wMzw9LeQ&t=113s
github项目地址:
https://github.com/huggingface/lerobot.git
相关脚本以及完整项目地址:
https://drive.google.com/drive/folders/1eyh1GzMGnrjCnwW0_CWqEyVtDDd-0Sfe?usp=sharing
- 录制一个视角,
- 使用遥控器进行操作
- 数据采集、训练
- 采集到的LeRobot标准数据集,包括video和episode_*.parquet,但是还是缺一些task等脚本说明文档,可以通过项目中自带的一些脚本来进行转换生成
二、使用机械臂的主臂来操作,参考视频教程:
视频教程:
https://www.bilibili.com/video/BV1FuWqzLEgx/?spm_id_from=333.1387.0.0&vd_source=9b9f5070e3133751c9c3a968c87961d1
项目地址:
https://github.com/LightwheelAI/leisaac.git
文字教程:
https://cloud.tencent.