- 课件下载
- 课程回放
- 超参数调优的价值
- 常见的调优算法
- 在深度学习网络中的应用举例
- AutoML-Suite:浪潮超参数调优的最佳实践
在传统行业应用与AI深度融合的趋势下,AI将不再是单点替代,而是真正融入到传统产业之中,推动传统产业的工艺、流程、流通、服务等核心业务的高效创新。但是,传统行业应用AI仍存在重大挑战,主要在于缺乏平台、应用程序开发,以及模型、算法调整方面的技术能力,产业AI化的实现需要生态力量的支撑。
为应对产业AI化的挑战、加速产业AI化的发展进程,浪潮在去年4月份提出了元脑生态计划,旨在连接左右手伙伴,即具备AI技术开发能力的科技公司及具备实施AI整体解决方案能力的SI、ISV伙伴,通过彼此的连接、共享与协同,共同为客户提供端到端的Al模型和方案。并聚焦当前阶段产业AI化的落地应用需求,将持续投入面向AI时代的计算力输出、服务能力优化及人才培养,促进生态伙伴的优势互补、强强联合,共同成就行业最终用户。目前,VMware、第四范式、睿沿科技、一览群智、鲲云科技、中铁信息、南天信息等合作伙伴已加入元脑生态。
浪潮与合作伙伴共享AI计算、资源与算法三大核心平台能力,助力行业用户开发并部署属于自己的“行业大脑”,加速推进产业AI化落地。其中AI计算平台包括业界最全的人工智能加速芯片、AI服务器系列;AI资源平台AIStaiton致力于构建开放的AI创新生态,无缝对接行业ISV,赋能生态伙伴,兼容各AI应用和场景,已在交通银行、国家电网、太平人寿等多个行业用户实现部署,并与百度合作共建AIStation与飞桨联合方案;在AI算法工具平台方面,浪潮推出了领先的自动机器学习平台AutoML -Suite和全球首个完整方案的FPGA高效AI计算框架TF2开源项目,已在智慧城市、铁道巡检等场景率先应用。
在元脑生态计划加速推进之际,浪潮元脑在智东西公开课开设了浪潮元脑专场。浪潮元脑专场定位于面向各行业AI开发者讲解人工智能前沿技术趋势、行业前沿应用等干货内容的系列线上公开课。浪潮元脑专场由前沿AI趋势分享和明星合作伙伴最新实践两个版块组成,共计10讲。其中前沿AI趋势分享版块涉及到智算中心算力聚合、多模态识别、异构算力加速等主题;明星伙伴最新实践则是通过各行业元脑伙伴的技术、合作方案、应用案例的分享,讲解AI在各行业中的落地实践。
8月26日,浪潮元脑专场将正式开启,第1讲为深度学习超参数优化公开课。这一讲将由浪潮AI算法优化高级专家于彤主讲,主题为《超参数优化算法在深度学习模型应用中的“暴力美学”》。
超参数,一般是指一个算法模型中无法使用常规优化手段直接优化的部分,例如XGBoot中的n_estimators、逻辑回归的正则化系数等。
在近年来的深度学习网络设计领域出现了两个趋势:一是模型结构搜索(NAS)技术被广泛地用于深度学习网络结构的设计,新网络模型的诞生速度比以往更快。而超参数的设置则强依赖于专家的手动优化经验,对于依靠NAS技术搜索出的网络结构,专家经验的欠缺使得超参数自动调优的技术变得更加必要;二是各行业AI化升级转型提速,深度学习网络在越来越多的行业落地应用。但现实情况是在大部分行业专家缺少深度学习网络优化经验。因此,为特定的行业应用场景设计更加敏捷、高效的超参数调优算法和自动化的调优工具变得尤为重要。
那么现阶段的超参数优化到底有哪些价值呢?常见的超参数优化算法又有哪些呢?在深度学习中的模型中又有哪些应用呢?在这一讲中,于彤老师将从超参数优化的价值出发,深入讲解常见的超参数优化算法及其在深度学习中的应用案例,最后还会重点介绍基于AutoML-Suite的超参数调优最佳实践。相信届时通过于彤老师1个小时的讲解,可以让大家深刻理解超参数优化算法在深度学习模型应用中的“暴力美学”。感兴趣的朋友不要错过呀!