灵巧操作是机器人作业的关键,也是类人形机器人的关键组成。手臂协同能够完成对物体的抓取、定位及复杂场景应用。通过视觉完 成对场景的理解与目标定位,控制机械臂与灵巧手实现对物体的精准定位与操作。基于视觉-语音-动作等模型,采用数据训练,实现 端到端的技能学习与稳健泛化,并结合操作精度实现精细调整,达到高精度应用。
开展仿人机械臂与灵巧手的运动控制、视觉引导定位、轨迹规划与运动控制、操作技能模仿学习等关键技术,研发臂手协同机器人、 人形机器人等,并结合医疗、工业与家居场景开展应用,探索基于国产底层架构的驱动开发。