加入收藏 | 设为首页 | 会员中心 | 我要投稿 湖南网 (https://www.hunanwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 云计算 > 正文

Horovod成绩漫衍式深度进修金尺度

发布时间:2019-08-15 03:20:16 所属栏目:云计算 来源:中国IDC圈
导读:大大都人对Uber在人工智能规模的认知也许都来自于自动驾驶,但现实上Uber在人工智能底层技能上也有卓越的孝顺,其开源的漫衍式深度进修框架Horovod是天下上最优越的人工智能实习加快框架之一,数以万计的人工智能开拓者和组织从中受益。8月28日,在北京举

大大都人对Uber在人工智能规模的认知也许都来自于自动驾驶,但现实上Uber在人工智能底层技能上也有卓越的孝顺,其开源的漫衍式深度进修框架Horovod是天下上最优越的人工智能实习加快框架之一,数以万计的人工智能开拓者和组织从中受益。8月28日,在北京进行的2019人工智能计较大会(AICC2019)上,Uber深度进修平台司理宁旭将在大会主论坛上分享怎样更好的行使Horovod加快AI模子实习。

1

Horovod风行的背后是AI算力需求的急剧增进

Horovod实质上是Uber开拓并开源的一套先辈的漫衍式体系,它并不依靠于某个框架,而是回收今朝业界普及承认的基于环形All-reduce通讯的同步SGD算法,通过计较与通讯异步、梯度归并、梯度压缩等装备间通讯优化本领,完成allreduce、allgather等集团操纵通讯事变。这一特征使得Horovod可以很是利便地与主流深度进修框架TensorFlow、PyTorch、MXNet等举办匹配,在大局限GPU集群上的实习机能远高于原生框架的实习机能,提供很是高效的漫衍式实习机能加快。Horovod的另一大利益在于其提供的接口极为简朴,用户只需修改几行代码,就可实现明显的实习机能晋升。

Horovod之以是受到越来越多AI开拓者与研究机构的青睐,其背后的缘故起因在于越来越多的呆板进修模子对数据和计较手段需求急剧增进。在大部门环境下,AI模子可以在单个或多GPU平台的处事器上运行,但跟着数据集的增大和实习时刻的增添,偶然实习必要一周乃至更长时刻。因此,AI开拓者们不得不寻求漫衍式实习要领来收缩模子实习的时刻。

Uber分享Horovod的“独家秘籍”

Uber今朝已经将深度进修应用到了许多公司营业中,从自动驾驶搜刮蹊径到防止诓骗等。Uber深度进修平台司理宁旭以为,实习当代伟大的深度进修模子必要大量的计较。将计较扩展到多个GPU面对两大挑衅:低本钱、高效的GPU间通讯库,以及用户代码也许会呈现较大的变动。而Horovod乐成地办理了这两浩劫题。

在AICC2019上,宁旭将带来《操作Horovod举办漫衍式深度进修》的主题演讲,不只将现场分享怎样通过Horovod在TensorFlow、Keras、PyTorch和MXNet中实现更快、更轻松的漫衍式实习,讲授Horovod的操纵要领,同时也将披露Uber最近在橡树岭国度尝试室举办的一项案例研究,报告Horovod活着界上最快的超等计较机上实现百亿亿级计较。

宁旭曾教育Uber大数据和基本办法规模的团队认真一些开源项目,在呆板进修、深度进修、大数据和大局限计较、收集、存储题目方面有富厚的履历。在插手Uber之前,宁旭曾在Facebook、Akamai和Microsoft以及几家初创公司事变。

AICC2019出色纷呈

本届AICC 2019可谓出色纷呈,焦点板块为主论坛与自动驾驶、财富AI创新、AI计较与基准测试、AI+视觉计较、AI+创投五大主题论坛,个中主论坛高朋云集了来自中国工程院、英国皇家工程院、百度、中国新一代人工智能成长计谋研究院、海潮、Facebook等机构的AI产学研顶尖专家学者,共聚一堂解读AI财富趋势,分享前沿AI计较技能。大会同期进行的AI千人实习营将约请百度、安全科技、海潮的资深AI工程师讲授最新AI计较技能与应用,辅佐学员从零入门AI。

2

AICC2019主论坛高朋声势

与此同时,AICC2019大会时代还将重磅宣布《2019-2020中国AI计较力成长陈诉》,发布中国AI计较力都市榜单与热力漫衍等重要研究成就,为AI投资、创业与就业提供科学指导。

AICC大会由中国工程院信息与电子工程学部主办,海潮团体承办,旨在环绕人工智能的财富需求研讨AI计较,促进AI技能创新、相助成长与人才作育。今朝,AICC大会已成为AI计较规模最具分量的前沿技能交换平台,每年城市吸引数千名AI财富与技能首脑、顶级AI专家和AI开拓者等参加。

(编辑:湖南网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    热点阅读