MapReuce中对大数据处理赏罚最吻合的数据名目是什么？
发布时间：2018-09-21 21:45:03 所属栏目：教程 来源：赵钰莹
导读：【新品产上线啦】51CTO播客，随时随地，碎片化进修 在本章的第一章节先容中，我们简朴相识了Mapreduce数据序列化的观念，以及其对付XML和JSON名目并不友爱。本节作为《Hadoop从入门到能干》大型专题的第三章第二节将教各人如安在Mapreduce中行使XML和JSON两
|
Protocol Buffers 已被Google大量用于互操纵，其上风在于其版本支持二进制名目。弱点是MapReduce(或任何第三方软件)缺乏对读取Protocol Buffers 序列化天生的文件支持。可是，Elephant Bird可以在容器文件中行使Protocol Buffers序列化。 Thrift Thrift是Facebook内部开拓的数据序列化和RPC框架，在当地数据序列化名目中不支持MapReduce，但可以支持差异的wire-level数据暗示，包罗JSON和各类二进制编码。 Thrift还包罗具有各类范例处事器的RPC层。本章将忽略RPC成果，并专注于数据序列化。 Avro Avro名目是Doug Cutting建设的，旨在辅佐补充SequenceFile的不敷。 Parquet （编辑：湖南网） 【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容! |
站长推荐
热点阅读