(1)三维视觉成像技术及传感器方面 。现有的立体视觉法、结构光法和激光扫描法等三维视觉成像技术仍难以满足复杂的智能制造环境的要求,为此,以智能制造需求为导向,进一步研究与智能制造生产线相匹配的三维视觉成像技术并开发相应的三维视觉传感器 。
(2)三维视觉技术的鲁棒性问题 。由于智能制造环境中光照、阴影等因素的变化,这些将会对语义分割、三维特征提取、三维目标识别与定位、三维环境感知等的准确率和精度产生影响,为此,以智能制造需求为导向,进一步研究鲁棒的三维视觉处理方法 。
(3)视觉伺服智能控制问题 。由于智能制造设备的多样性,除了传统的六自由度关节式机器人,还有并联机器人、柔性机器人等,为此,需要研究视觉伺服智能控制,以满足不同智能制造设备的需求,实现高速高精度控制 。
(4)三维视觉系统的可移植性和适应性问题 。由于智能制造环境的复杂性及机器人装备的多样性,目前的三维视觉系统难以应用于多种制造环境,为此,需要进一步研究模块化、可重构的三维视觉平台,以提高智能制造装备对制造环境的可移植性和适应性 。
6 研究团队在三维视觉技术方面取得的成果
本课题组在三维点云数据获取、平面特征提取和三维目标定位等方面开展了一系列的工作,并将相关算法应用于产品质量检测、大型构件再制造和智能生产线等智能制造领域 。
第一,在三维视觉技术方面:提出了基于伪Huber函数的三维激光扫描仪的鲁棒标定算法,以获取机器人扫描场景的精确三维点云数据;提出了基于多维粒子群优化( Swarm ,PSO)的散乱点云无监督平面分割算法;提出了基于超二次曲面模型的三维目标位姿估计算法 。
第二,三维视觉技术在智能制造的应用方面,负责了西安市科技项目“面向智能生产线的工业机器人控制器研制”和苏州市科技项目“面向大型构件再制造的机器人三维感知与控制技术研究” 。主要完成了面向激光再制造的大型构件缺陷识别、零件损伤区域的三维特征提取、机器人修复路径的自动规划、机器人高速平稳运动控制工作,研制了面向智能生产线的工业机器人控制器 。本课题组研制的机器人控制器结构图如图7所示,缺陷识别定位的三维视觉系统如图8所示 。
图7 机器人控制器结构图
图8 缺陷识别定位的三维视觉系统
7 结语
机器人三维视觉技术应用到智能制造设备中,是智能制造装备实现高适应性和智能化作业的重要基础 。本文讨论了机器人三维视觉技术及其热点研究问题,并阐述了其在产品质量检测和视觉伺服控制等智能制造领域的应用 。对机器人三维视觉技术的鲁棒性和通用性等关键问题的突破,能够不断推动智能制造向高效、智能化发展 。
作者简介
汪霖(1983-),男,浙江杭州人,副教授,博士,现就职于西北大学信息科学与技术学院,研究方向为智能机器人环境感知、三维点云处理和群体智能优化 。
曹建福(1963-),男,陕西宝鸡人,教授,博士生导师,现任西安交通大学自动控制研究所所长、中国自动化学会建筑机器人专业委员会主任委员,研究方向为智能机器人、智能制造与智慧工厂 。
本文摘自《自动化博览》2020年2月刊
好消息!
小白学视觉知识星球
开始面向外开放啦
下载1:OpenCV-Contrib扩展模块中文版教程在「小白学视觉」公众号后台回复:扩展模块中文教程,即可下载全网第一份OpenCV扩展模块教程中文版,涵盖扩展模块安装、SFM算法、立体视觉、目标跟踪、生物视觉、超分辨率处理等二十多章内容 。下载2:Python视觉实战项目52讲在「小白学视觉」公众号后台回复:Python视觉实战项目,即可下载包括图像分割、口罩检测、车道线检测、车辆计数、添加眼线、车牌识别、字符识别、情绪检测、文本内容提取、面部识别等31个视觉实战项目,助力快速学校计算机视觉 。下载3:OpenCV实战项目20讲在「小白学视觉」公众号后台回复:OpenCV实战项目20讲,即可下载含有20个基于OpenCV实现20个实战项目,实现OpenCV学习进阶 。交流群欢迎加入公众号读者群一起和同行交流,目前有SLAM、三维视觉、传感器、自动驾驶、计算摄影、检测、分割、识别、医学影像、GAN、算法竞赛等微信群(以后会逐渐细分),请扫描下面微信号加群,备注:”昵称+学校/公司+研究方向“,例如:”张三 + 上海交大 + 视觉SLAM“ 。请按照格式备注,否则不予通过 。添加成功后会根据研究方向邀请进入相关微信群 。请勿在群内发送广告,否则会请出群,谢谢理解~
- 最新|移动机器人导航定位技术概述
- Abaqus纤维混凝土3D 泡沫混凝土 三维随机几何 三维混凝土细观 多面体骨料
- 机器人四大家族是如何炼成的?
- 来做一个聊天机器人吧[1]
- 计算机视觉的深度学习实战四:图像特征提取
- 5 视觉SLAM十四讲读书笔记P40-P52
- 基于Python实现机器人自动走迷宫【100011016】
- 十 ABB机器人学习笔记-ABB机器人常用指令详解(2)
- ABB机器人ProcCall调用例行程序指令
- PACS/RIS系统源码 支持专业三维影像后处理功能,支持海量数据存储、迁移管理