加入收藏 | 设为首页 | 会员中心 | 我要投稿 湖南网 (https://www.hunanwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 大数据 > 正文

GPU完美信息处理赏罚速率,降本增效节能首选

发布时间:2021-06-12 11:48:19 所属栏目:大数据 来源:互联网
导读:陪伴着计较力、算法和数据量的庞大前进,人工智能迎来第三次成长飞腾,开始了各行业的落地试探。然而,在大数据鼓起的同时,数据分手的环境也加倍现显,数据孤岛

陪伴着计较力、算法和数据量的庞大前进,人工智能迎来第三次成长飞腾,开始了各行业的落地试探。然而,在“大数据”鼓起的同时,数据分手的环境也加倍现显,“数据孤岛”征象普及存在。跟着政策礼貌的逐渐完美和公家隐私掩护意识的增强,隐私安详、数据掩护等缘故起因限定着数据不能等闲互通,如安在掩护数据隐私的条件下实现行业协作与协同管理,是大数据期间人工智能行业应用的一浩劫题。

 

多方获益,联邦进修破解“数据孤岛”困难

 

“联邦进修”(Federated Learning)指的是在满意隐私掩护和数据安详的条件下,计一律个呆板进修框架,使各个机构在不互换数据的环境下举办协作,晋升呆板进修的结果。其焦点就是办理数据孤岛和数据隐私掩护的题目,通过成立一个数据“联邦”,让参加各方都获益,敦促技能整体一连前进。大会上,来自微众银行AI部分的高级算法工程师黄启军也为观众展示了联邦进修的落地案例之一——视觉横向联邦进修体系。

 

黄启军提到,在方针检测规模,已标注数据长短常贵重的资源,各家公司一样平常都有各自差异场景的标注数据,但这些数据相对狼藉,如想操作其余公司已标注好的数据模子来成立更优模子,只能通过拷贝聚拢数据,但这种举动不切合GDPR、《数据安详打点步伐》等法令类型。而引入横向联邦进修机制往后,个别可以在当地装备中直接标注数据,无需上传。当地模子的实习数据标注完成后,客户端将自动插手联邦,守候举办实习,当有两台装备进入到守候实习状态时,则开始举办联邦进修实习模式。这一案例真实揭示了联邦进修技能的代价,对比于单点模子,联邦进修使适合地装备的mAP大幅晋升,同时Lossless越发不变。mAP均匀晋升15%的数据表现,整体上联邦进修远比单点模子结果更佳。

 

深度创新,GPU加快联邦进修再进级

 

作为一门具有远景的新兴技能,联邦进修为了完成隐私掩护下的呆板进修,行使了许多与传统呆板进修纷歧样的要领,也因此迎来了诸多新挑衅。在会上,黄启军也分享了微众银行AI部分联袂星云Clustar打破的联邦进修计较三浩劫题:

 

起首就是大整数运算题目,传统呆板进修一样平常行使的是32-bit的根基运算,这些根基运算一样平常都有芯片指令的直接支持,而联邦进修中的Paillier/RSA算法依靠的是1024或2048-bit 乃至更长的大整数运算,但实际环境是,GPU流处理赏罚器并不直接支持大整数运算。面临这一环境,两边基于分治头脑做元素级并行,通过递归将大整数乘法解析成可并行计较的小整数乘法,从而实现“化繁为简”,间接完成GPU流处理赏罚器的大整数运算。

(编辑:湖南网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    热点阅读