科技计划：
成果形式：新技术
合作方式：其他
参与活动：
第二届江苏产学研合作对接大会
2023年高校院所服务苏北五市产学研合作对接活动
专利情况：
未申请专利
成果简介
综合介绍
许多动物(例如蛇、吸血蝙蝠)利用可见光谱之外的信息来构建描述附近物体的“热地图”；这使得他们能够检测到肉眼无法看到的特征。项目将开发一种智能感知系统，利用与节点相关的实时热数据计算点云，并在机械臂上进行应用测试，目标是为机器人提供高级热感测能力。
创新要点
采用Realsense D435可见光相机与Flir Lepton 3.5红外热相机组成视觉系统，设计制作了适用于两种相机的金属标定板，开发了相机在线标定软件，可应用于多种相机的快速标定；以Franka Emika机械臂搭建了实验平台，基于Eye-to-Hand组合模式建立手眼系统，完成了可见光与红外热图像的配准；提出一种抓取物体最小矩形框包围线的最长边中心处的方法，分别在有无光照条件下实现了对满足温度要求的物体的定位与抓取演示；在视觉系统中完成对人手的识别，实现了对于动态目标的跟踪试验以及人机传递物品。
技术指标
1）感知系统：每秒20帧的帧速率，组合多模式图像分辨率为640 x480像素，软件开发库完全兼容标准操作系统（例如Ubuntu）；
2）面部热伺服：最低速率25Hz；
3）人机协同传递：成功率 85%。
其他说明
完成人信息
姓名：对接成功后可查看
所在部门：对接成功后可查看
职务：对接成功后可查看
职称：对接成功后可查看
手机：对接成功后可查看
E-mail：对接成功后可查看
电话：对接成功后可查看
传真：对接成功后可查看
邮编：对接成功后可查看
通讯地址：对接成功后可查看
联系人信息
姓名：对接成功后可查看
所在部门：对接成功后可查看
职务：对接成功后可查看
职称：对接成功后可查看
手机：对接成功后可查看
E-mail：对接成功后可查看
电话：对接成功后可查看
传真：对接成功后可查看
邮编：对接成功后可查看
通讯地址：对接成功后可查看
黄磊与江苏省生产力促进中心创新平台管理与服务处对接成功
电话：025-85485967 QQ群：1035941228