|
hadoop
Hadoop 是一个可以或许对大量数据举办漫衍式处理赏罚的软件框架。可是 Hadoop 是以一种靠得住、高效、可伸缩的方法举办处理赏罚的。Hadoop 是靠得住的，由于它假计划较元素和存储会失败，因此它维护多个事变数据副本，确保可以或许针对失败的节点从头漫衍处理赏罚。Hadoop 是高效的，由于它以并行的方法事变，通过并行处理赏罚加速处理赏罚速率。Hadoop 照旧可伸缩的，可以或许处理赏罚 PB 级数据。另外，Hadoop 依靠于社区处事器，因此它的本钱较量低，任何人都可以行使。
Hadoop是一个可以或许让用户轻松架构和行使的漫衍式计较平台。用户可以轻松地在Hadoop上开拓和运行处理赏罚海量数据的应用措施。它首要有以下几个利益：
高靠得住性。Hadoop按位存储和处理赏罚数据的手段值得人们相信。
高扩展性。Hadoop是在可用的计较机集簇间分派数据并完成计较使命的，这些集簇可以利便地扩展到数以千计的节点中。
高效性。Hadoop可以或许在节点之间动态地移动数据，并担保各个节点的动态均衡，因此处理赏罚速率很是快。
高容错性。Hadoop可以或许自动生涯数据的多个副本，而且可以或许自动将失败的使命从头分派。
Hadoop带有效 Java 说话编写的框架，因此运行在 Linux 出产平台上长短常抱负的。Hadoop 上的应用措施也可以行使其他说话编写，好比 C++。
Storm
Storm是自由的开源软件，一个漫衍式的、容错的及时计较体系。Storm可以很是靠得住的处理赏罚复杂的数据流，用于处理赏罚Hadoop的批量数据。Storm很简朴，支持很多种编程说话，行使起来很是风趣。Storm由Twitter开源而来，其余知名的应用企业包罗Groupon、淘宝、付出宝、阿里巴巴、乐元素、 Admaster等等。
Storm有很多应用规模：及时说明、在线呆板进修、不断顿的计较、漫衍式RPC(远进程挪用协议，一种通过收集从长途计较机措施上哀求处事)、 ETL(Extraction-Transformation-Loading的缩写，即数据抽取、转换和加载)等等。Storm的处理赏罚速率惊人：经测试，每个节点每秒钟可以处理赏罚100万个数据元组。Storm是可扩展、容错，很轻易配置和操纵。
然而Storm远比Hadoop来的简朴，由于用它处理赏罚大数据不会带来新老技能的瓜代。
转自：http://www.csdn.net/article/2014-04-11/2819267-Cloud-BigData
（编辑：湖南网）
【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!
|
