倒计时24小时开课|StuQ大数据说明平台小班课(仅剩10个名额)
清华大学计较机硕士,2008 年至 2014 年就职于百度大数据部,接受百度用户数据客栈 (BUDW) 技能认真人,资深研发工程师,参加数据网络与传输、数据建模、海量数据处理赏罚、数据应用、数据说明、ID-mapping 等各个环节的数据处理赏罚事变。2014年4月—2015年4月就职于北京极科极客科技有限公司(极路由)任数据总监职务,2015 年 4 月至今作为神策数据首创人并接受 CTO 职务。 Sensors Data(神策数据) 首创人兼首席架构师 结业于北京理工大学软件工程专业,2008 年至 2013 年时代历任百度新产物研发部、网页搜刮部、基本架构部工程师,2013 年 9 月至 2014 年8月接受豌豆荚 SearchPA 后端研发工程师,2014 年9月至 2015 年4月接受黄款子包研发部技能合资人,今朝接受神策数据连系首创人及首席架构师。 大数据说明概述 (By 桑文锋) 大数据的观念 数据驱动的观念 数据处理赏罚流程 数据平台总体架构 思索:实行罗列每个子体系在市面上的开源或贸易选型 百度大数据平台演进 (By 桑文锋) 日记统计平台 用户数据客栈 数据源打点 百度大数据平台架构 思索:百度在数据处理赏罚所面对的题目和学员自己地址公司的题目有何异同? 数据收罗与传输 (By 曹犟) 数据收罗与埋点 数据传输体系 开源传输体系先容(kafka、flume、scribe) 思索:kafka可以或许担保数据不丢不重吗? 数据建模与存储 (By 曹犟) 数据模子 数据ETL 数据存储打点(包罗元数据、hadoop) 调治器(包罗开源调治器oozie、azkaban) 思索:为什么在大数据平台上,要把元数据独立出来? 查询引擎计划 (By 付力力) 查询引擎架构 开源查询引擎说明(包罗impala、spark SQL、hive等) 思索:漫衍式查询体系和MySQL在计划上,有哪些出格的点? 数据可视化 (By 桑文锋) 数据可视化概述 可视化器材先容 数据说明要领 运营说明实践 大数据说明总结 思索:团结地址公司的近况,计一律张大数据说明平台架构图。 (编辑:湖南网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |