发明名称 基于虚拟机器人与真实机器人集成的采摘系统及方法
摘要 本发明公开了基于虚拟机器人与真实机器人集成的采摘系统,包括视觉定位系统、真实机器人和虚拟机器人仿真系统,所述视觉定位系统完成采摘目标的定位,获得采摘目标的三维空间坐标信息后,指导真实机器人实时采摘,同时将获取的三维空间坐标信息通过数据传输线传递给虚拟机器人仿真系统,虚拟机器人实时模拟采摘过程。本发明的系统及方法,利用虚拟仿真技术与机器视觉技术相结合,基于视觉定位系统的计算数据,驱动虚拟环境下的机器人与真实机器人同时进行视觉定位与采摘行为,从而实现视觉定位精度的对比和采摘行为的有效性验证。
申请公布号 CN104067781B 申请公布日期 2016.05.18
申请号 CN201410268374.1 申请日期 2014.06.16
申请人 华南农业大学 发明人 熊俊涛;邹湘军;刘念;李博;林桂潮;孙宝霞
分类号 A01D46/30(2006.01)I 主分类号 A01D46/30(2006.01)I
代理机构 广州市华学知识产权代理有限公司 44245 代理人 黄磊
主权项 基于虚拟机器人与真实机器人集成的采摘系统,其特征在于:包括视觉定位系统、真实机器人和虚拟机器人仿真系统,所述视觉定位系统完成采摘目标的定位,获得采摘目标的三维空间坐标信息后,指导真实机器人实时采摘,同时将获取的三维空间坐标信息通过数据传输线传递给虚拟机器人仿真系统,虚拟机器人实时模拟采摘过程;所述的虚拟机器人仿真系统,包括机械手的结构设计模块、误差分析模块、机械手知识手册模块、双目立体视觉模块和机械手的运动仿真模块,所述的机械手的机构设计模块用于设计底座、机械臂和末端执行器,用户对机械手的各个零部件进行参数化设计,通过类型的选择和尺寸的确定,在该系统中应用VC与SolidWorks的相互通信,将SolidWorks中的模型转换成三维坐标,实现对设计图纸和设计方案进行实时修改并更新;误差分析模块从机构误差、视觉误差和关联误差三方面对采摘点的三维位置误差进行分析;机械手知识手册模块采用树形结构,用于用户查看公式的推导、数据分析结果的比较信息;双目立体视觉模块用来采集采摘水果的图像,通过图像分割、腐蚀与膨胀、立体匹配图像处理算法对果实进行三维重建和定位,从而为机械手提供果实空间位置坐标参数;机械手的运动仿真模块通过EON进行三维视景虚拟仿真,包括正运动和逆运动仿真:正运动仿真是根据用户所输入的参数来驱动机械手按照预定的参数值运动;逆运动仿真是根据用户所给定的待采摘果实空间位置坐标值,反求解各关节具体值来驱动机械手按照计算的参数值运动,系统通过VC与SolidWorks的通信接口,将模型转换为三维坐标,再将坐标导入EON工作平台,来实现对机械手的运动控制,从而完成虚拟的采摘过程。
地址 510642 广东省广州市天河区五山路483号