Isaac Sim- Isaac Sim / Isaac Lab 场景配置、机器人导入和 RGB 相机观测
- Oculus/键盘遥操作、动作记录和低维状态记录
项目2025.12
Isaac Lab 机械臂抓取仿真
仿真配置 / 遥操作数据采集 / 强化学习接口梳理
Isaac SimIsaac LabGymnasiumHDF5PyTorch
继续查看成果、技术栈、实现要点
项目概览
在 Isaac Sim/Lab 中复盘从仿真场景、遥操作数据到强化学习任务接口的完整链路。
围绕 Franka 类机械臂抓取任务，完成仿真场景配置、机器人导入、遥操作控制、RGB 相机观测、HDF5 数据记录和强化学习任务接口梳理。
成果摘要
本地码动未来材料包含赛道说明、TR4/夹爪 URDF 材料和演示 webm；简历记录 AI+具身智能赛道优秀奖。
职责仿真配置 / 遥操作数据采集 / 强化学习接口梳理
时间2025.12
核心栈Isaac Sim / Isaac Lab 场景配置、机器人导入和 RGB 相机观测 / Oculus/键盘遥操作、动作记录和低维状态记录 / Gymnasium 风格环境、观测项、奖励项、终止项与差分 IK/关节控制 / HDF5 数据写入与 OpenCV 视频导出
技术拆解
技术工作
- Gymnasium 风格环境、观测项、奖励项、终止项与差分 IK/关节控制
- HDF5 数据写入与 OpenCV 视频导出
- 获得 AI 杭州·码动未来 AI+具身智能赛道优秀奖。
- 形成可播放的 Isaac Lab 演示视频。
- 梳理从仿真到策略训练的工程接口。
- 记录 RGB 帧、动作、低维状态并组织为 HDF5 数据。
- 梳理末端帧配置、奖励设计和终止条件。
- 通过 demo 视频验证场景与控制链路可视化。
- 适合讨论机器人仿真、遥操作数据和强化学习环境设计。
- 可以延伸到 sim-to-real、数据格式和任务奖励设计。