日期
07/24
2024
咨询
  • QQ扫一扫

  • Vision小助手
    (CMVU)

大象机器人&亚博智能联合出品,7自由度AI视觉协作机械臂
收藏
2024-07-24 10:31:11来源: 中国机器视觉网

近日, 亚博智能科技与大象机器人正式达成战略合作!携手发布「JetCobot」七自由度桌面级AI视觉协作机械臂;这不仅是双方在技术与创新理念上的深度交融,更是对智能教育与研究领域的一次探索与实践。

JetCobot的出现将为广大学子与科研人员提供一个强大而灵活的学习平台,结合TensorFlow与PyTorch两大深度学习框架,以及YOLOv5模型训练,我们提供了一套全面的视觉算法应用解决方案,非常适合用于教育、编程和开发等领域。

JetCobot搭载了myCobot280 7自由度协作机械臂与高清摄像头夹持系统,手眼臂合一,实现了机械臂、视觉与操控的无缝融合,能够精准识别颜色、人脸、人体姿态等对象。通过几何关系计算物体位置,可完成机械臂精准定位、抓取、追踪等动作。

搭载NVIDIA Jetson系列主控,通过集成ROS机器人操作系统和逆运动学算法简化了7 自由度机械臂复杂的运动控制,可实现机械臂坐标控制、运动规划、机械臂碰撞检测、夹取分拣等功能。

支持全新Jetson Orin

为了拓宽应用边界、提升用户体验并满足客户对高性能机器人的迫切需求,我们推出了全新一代Jetson Orin系列配置。

搭载强劲的Jetson Orin Nano(8GB)与Jetson Orin NX(16GB)主板,为JetCobot注入了更为强大的性能,使其在机械臂控制、视觉应用以及深度学习等多个领域都能展现出卓越的效能,响应速度也得到了显著提升。

微信截图_20240724103829.jpg

JetCobot搭载NVIDIA Jetson系列高性能主控,目前三款主控使用方法基本一致,不同主控仅影响JetCobot的性能表现我们提供的课程资料、产品功能玩法、控制软件等均一致。

强大的硬件配置

JetCobot搭载的高性能硬件配置,使得它在执行复杂任务时表现出色,无论是编程学习、科学研究、还是教育演示等领域,都能发挥其独特的优势。

微信截图_20240724103814.jpg

手&眼&臂 三合一,七自由度协作机械臂

JetCobot是一款面向用户自主编程开发的七轴协作机器人,体积小巧但功能强大,操作简单、能与人协同安全工作,最大有效臂展270mm(不含夹爪),374.5mm(含开模夹爪),重复定位精度 ±0.5mm。    

手眼臂三合一,无需外置摄像头或复杂校准,即可实现毫米级精度的定位与操作。

类UR机器人构型,流畅机身,刚柔并济,曲线优美,相比其他类型机械臂,活动范围更大,可达点位更多。

微信截图_20240724103759.jpg

深度学习 模型训练

(1) 深度学习 垃圾识别:JetCobot搭载的高清摄像头捕获垃圾物品的图像,这些图像随后被送入预训练的深度学习模型进行分析,基于提取的特征,JetCobot可判断垃圾属于哪个类别,如苹果核、废旧电池、书本或有害废物等。

(2) 垃圾分拣与堆叠:JetCobot准确识别出垃圾类型,机械臂立即根据分类结果执行分拣动作,将垃圾夹取到正确的回收点,或对相同类型垃圾进行堆叠。

AI视觉识别,目标追踪

通过高清摄像头,JetCobot能够理解和响应其周围环境,结合AI视觉识别与目标追踪等功能实现一系列复杂而精准的操作。

颜色识别分拣:JetCobot能够精确地区分不同颜色的木块并将其准确地放置到地图识别区域内的对应颜色位置。

标签识别分拣:JetCobot可以识别出不同的AprilTag标签码并判断出标签码方块的位置实现智能码垛堆叠

颜色识别追踪:除了标准颜色外JetCobot还可以提取自定义颜色进行机械臂颜色识别追踪实现眼随手动

人脸识别追踪:JetCobot能检测当前画面是否存在人脸根据人脸的位置变化自动调整自身姿态平滑地跟随人脸移动

MediaPipe开发

JetCobot机械臂通过集成MediaPipe机器学习框架,它不仅能够执行基础的抓取和放置任务,还能在更复杂的场景中展现出高度的智能和适应性;

为ROS教育和研究提供了一个强大且灵活的平台,极大地拓展了机器人学的教学和研究范围。

微信截图_20240724103729.jpg

MoveIt机械臂运动学

JetCobot支持Movelt仿真,可在虚拟环境中进行机械的控制及算法的验证,降低了对实验环境的要求,提高了实验效率;

让用户在真实操作之前,对机械臂的运动和任务执行进行详细的规划和测试,检测机械臂在运动过程中是否与环境中的其他物体发生碰撞,帮助用户避免物理损坏。

MoveIt仿真控制:JetCobot可直接控制机械臂的每个关节在虚拟环境中预览机械臂的运动,包括关节的伸缩和旋转和末端执行器的位置姿态。

微信图片_20240724103516.jpg

碰撞检测:在仿真界面创建障碍物,驱动机械臂完成随机运动,机械臂会在运动的同时做出躲避障碍物的动作。

微信图片_20240724103519.png

空间夹取:导入设置规划好的场景,驱动机械臂在场景中完成物块夹取、放置的动作,并对场景进行碰撞检测。

微信图片_20240724103522.png

跨平台互联遥控

JetCobot提供三种便捷的操控方式,确保用户可以轻松、精确地控制机械臂实现各种玩法,无论是初学者还是专业用户,都能找到适合自己的操作方法,从而充分发挥JetCobot的无限潜力!

手机APP遥控:通过手机APP的操控实现对每个关节的独立精准控制,简化了操作过程,还扩展了机械臂的应用场景。

微信图片_20240724103525.png

手柄遥控:除了手机APP外,还标配USB游戏手柄,体验多自由度与多键位的结合乐趣。

微信图片_20240724103529.png

网页控制:JetCobot也可以使用网页端控制,通过特定的函数调用来独立控制机械臂的每个关节实现精确的运动控制。

微信图片_20240724103531.png

丰富的开发资料

JetCobot配海量原创代码级开发资料,开放Python源码,并涵盖海量教学课程文档,课程由浅入深实训+理论帮助开发者全面掌握ROS机械臂开发。

微信图片_20240724103534.png

(文章来源于大象机器人,如有侵权,请联系删文)