绑定手机号
获取验证码
确认绑定
提问
0/255
提问
订阅开课提醒需关注服务号
回答成功
知道了
扫码关注智东西公开课服务号登录
请使用微信扫描二维码
扫描二维码分享给微信好友
您已订阅成功,有新课程,我们将第一时间提醒您。
知道了
发送提问成功
回答可在
“我的——我的提问”中查看
知道了
失败
欢迎来智东西
关注我们
智东西
车东西
芯东西
智东西公开课
边缘端实时多人姿态估计架构Lite Pose
AI新青年讲座 2023/01/13 10:00:00
课程讲师

本科毕业于清华大学交叉信息研究院,曾在ICLR2021/CVPR2022发表一作论文;目前研究方向为计算机视觉及其应用。

本科毕业于清华大学交叉信息研究院,曾在ICLR2021/CVPR2022发表一作论文;目前研究方向为计算机视觉及其应用。

课程提纲
  • 典型的人体姿势估计模型解析
  • 2D多人姿态估计的瓶颈
  • HRNet系列多人姿态估计的计算冗余
  • 自下而上的单分支姿态估计架构LitePose
课程简介

姿态估计在以人为中心的视觉应用中起着关键作用。然而,由于计算成本高(每帧超过150 GMACs),很难在资源受限的边缘设备上部署SOTA的基于HRNet的姿态估计模型。

很多大模型上的结论和方法,在轻量模型的研究中并不适用,对大模型有显著帮助的trick在轻量模型上完全有可能掉点,模型性能也并不是随着计算量的增大而单调递增,其中存在很多的局部最优。因此,如何在有限的计算资源下设计出最优的模型结构,总结出一些最优的设计准则,是一个值得研究的话题。

MIT韩松老师组在研究了边缘端实时的多人姿态估计模型的高效架构设计后,通过通过渐进收缩(gradual shrinking)实验发现:HRNet的高分辨率分支对于低计算区域的模型是多余的,删除它们可以提高效率和性能。

在 CVPR 2022 上,来自清华、CMU 和 MIT 的团队最新提出了一种用于姿势估计的高效单分支结构LitePose。在移动平台上,LitePose在不牺牲性能的情况下将延迟降低了5倍,与现有的SOTA高效姿态估计模型相比,推动多人实时姿态估计模型在边缘端取得了突破性进展。

1月13日早10点,AI新青年讲座第191讲邀请到LitePose一作、普林斯顿大学在读博士王羿涵,主讲《边缘端实时多人姿态估计架构Lite Pose》。

精彩问答
提问
提问
目前还没有问题,可以点击右侧的“提问按钮”提问
更多问题...