概述

睿尔曼文档中心提供了RM机械臂结合AI的5个SDK详细说明、部署操作、示例Demo和二次开发资源下载，包含多模态识别、任意物品分割、任意物品姿态、任意物品追踪、机械臂视觉垂直抓取。使开发者可以全面了解RM机械臂与AI结合的能力，降低开发门槛，提高开发效率。

目标受众

1. 集成开发者或者机械臂应用开发者： 快速将机械臂结合视觉应用于生产线装配、仓储物流、书籍管理、电子产品组装及医疗设备操作等场景，提高自动化项目中的开发效率，减少开发周期。
2. 图像识别领域的开发工程师： 利用视觉识别模型进行创新项目和产品开发，旨在提升其产品的智能化和自动化水平。
3. 科研用户： 可以扩展基于视觉功能的算法开发，大模型应用等。
4. 教育用户： 设计机器人学、机器人操作系统、机器视觉、人工智能等相关课程的实验项目，使学生可以将理论知识进行实践应用。

主要内容

SDK 开发指南

多模态识别：是一种基于深度补偿的RGBD融合目标检测方法，主要使用RGB和深度双模态信息识别进行物品识别和物品分割。
任意物品分割：实现对画面内的任意物品分割，提取其轮廓信息。对SAM进行了封装与特异性适配，使用此功能，可不用训练，生成分割Mask，搭配姿态生成算法，可实现快速抓取任意物体。
任意物品姿态：能够根据物品的二维图像和深度信息来推断出物品在三维空间中的位置和方向。在自动化零售和物品抓取等领域，具有重要的实际应用价值。
任意物品追踪：采用阿特金森-希夫林记忆模型的长期视频对象分割技术，具有自动标注和高效分割功能，广泛应用于多领域的智能化视频处理。通常用于在连续视频帧或实时图像中追踪一个物体。
机械臂视觉垂直抓取：一种适用于RM机械臂结合视觉在桌面识别抓取物体的操作方法，最小能在桌面级抓取起小于等于1cm高度的物体。
视觉伺服：一种适用于RM机械臂结合视觉实现视觉伺服的功能。视觉伺服通过视觉反馈控制机械臂，实现精准定位和动态环境下的自动操作。

相关资源获取

提供了每个SDK的源码下载和训练的权重文件，方便用户进行敏捷部署。

联系方式和支持

1. 咨询RM机械臂和AI应用相关问题，请发送邮件至官方邮箱: sales@realman-robot.com。
2. RM机械臂和AI应用的最新资讯请关注：官方微信公众号。