绑定手机号
获取验证码
确认绑定
提问
0/255
提问
订阅开课提醒需关注服务号
回答成功
知道了
扫码关注智东西公开课服务号登录
请使用微信扫描二维码
扫描二维码分享给微信好友
您已订阅成功,有新课程,我们将第一时间提醒您。
知道了
发送提问成功
回答可在
“我的——我的提问”中查看
知道了
失败
欢迎来智东西
关注我们
智东西
车东西
芯东西
智东西公开课
2.5D&3D视觉感知技术在室内机器人中的应用
2021/09/24 19:00:00
课程讲师
隋伟 地平线 4D标注技术负责人

博士毕业于中国科学院大学自动化研究所,有近10年三维视觉方向的研发经验。2019年初加入地平线,先后主导2.5D&3D视觉以及BEV静态感知相关技术的研发。目前主要负责4D标注项目的研发,解决高阶自动驾驶系统中BEV感知任务的真值生成问题。

隋伟
地平线 4D标注技术负责人

博士毕业于中国科学院大学自动化研究所,有近10年三维视觉方向的研发经验。2019年初加入地平线,先后主导2.5D&3D视觉以及BEV静态感知相关技术的研发。目前主要负责4D标注项目的研发,解决高阶自动驾驶系统中BEV感知任务的真值生成问题。

课程提纲
  • 室内自主机器人与汽车自动驾驶技术的关联
  • 2.5D&3D视觉感知技术解析
  • 机器人视觉感知对计算平台的要求及开发难点
  • 机器人纯视觉方案的未来前景
课程简介

作为当前最受关注的两个应用领域,机器人和汽车自动驾驶在底层的技术上有着很大的共性,都是由环境感知、行为决策、路径规划和运动控制四个方面构成。 其中环境感知作为机器人和汽车自动驾驶的智能决策的先决条件,其感知的精度、广度与速度都直接影响着智能决策的行驶安全。

基于单线激光雷达、TOF、RGBD等传感器的方案, 通过传感器直接获取空间的3D信息,用于感知或者规划。该方法的主要问题是成本高,且多传感器之间的融合需要需要大量的经验调试。

与之相对的就是成本低且实用的纯视觉感知方案。因为摄像头所获的图像数据与人眼感知的真实世界更为相似,高分辨率、高帧率的成像技术也使得感知到的环境信息更为丰富,因此视觉感知方案主要依靠摄像头拍摄画面,辅以毫米波雷达、超声波雷达等传感器捕捉数据并通过图像处理与机器学习的结合对周围环境进行计算与分析,最终指导机器人或汽车做出决策。

然而摄像头在黑暗环境中感知受限,精度及安全性有所下降。且由于视觉方案在硬件要求降低的背景下,其对软件的要求明显提高,即需要依靠强大的算法才能保证图像处理以及命令下达、处理的效率。因此,纯视觉感知方案也是当前最受争议的一种感知方案。

那么,纯视觉感知方案在机器人上应用有怎样的前景,以及会面临哪些挑战?9月24日晚7点,地平线开发者专场将在智东西公开课正式开讲,由地平线3D视觉资深工程师隋伟博士主讲,主题为《2.5D&3D视觉感知技术在室内机器人中的应用》。隋伟博士的研究方向为3D视觉、三维重建及SLAM,参与完成了多个3D视觉产品研发和项目落地。

隋伟博士将从室内机器人和自动驾驶技术的关联、2.5D&3D视觉感知技术及其对计算平台的要求与开发难点、机器人纯视觉方案的未来前景进行直播讲解。

本次开发者专场分为主讲与问答两个环节,讲师将以视频直播形式进行。目前主讲群也已开放申请,届时讲师将加入,欢迎感兴趣的开发者申请。

精彩问答
提问
提问
目前还没有问题,可以点击右侧的“提问按钮”提问
更多问题...