加入收藏 | 设为首页 | 会员中心 | 我要投稿 湖南网 (https://www.hunanwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 大数据 > 正文

百分点大数据评测报告:开源OLAP引擎综评(HAWQ、Presto、ClickHouse)

发布时间:2020-01-24 12:13:59 所属栏目:大数据 来源:至顶网至顶Labs频道
导读:副问题#e# 谈到大数据就会遐想到Hadoop、Spark整个生态的技能栈。各人都知道开源大数据组件种类浩瀚,个中开源OLAP引擎包括Hive、SparkSQL、Presto、HAWQ、ClickHouse、Impala、Kylin等。当前企业对大数据的研究与应用日趋理性,那么,怎样按照营业特点,选

Presto的综合手段比拟其他SQLon Hadoop引擎照旧较量突出的。我们在测试进程中发明,单节点的扫描速率达5000WRow/S。Presto是完全基于内存的并行计较,对内存有必然的要求。只装载数据到内存一次,其他都是通过内存、收集IO来处理赏罚,以是在慢速收集下是不得当的,以是它对收集要求也是很高。Presto只是查询引擎,不认真数据的底层耐久化、装载计策。Presto支持富厚的大都据源,可跨多个数据源查询。其它,在我们测试的版本上没有当地数据读取优化计策,开源社区里在新版本上是支持的。 

ClickHouse作为战斗民族的开源神器,是今朝全部开源MPP计较框架中速率最快的。比拟测试的功效表白,ClickHouse在单表的查询中机能异常优秀。对多表的关联说明场景,查询其他陈诉并不异常抱负,本次测试并不涉及,不做评述。ClickHouse机能很洪流平上依靠于体系缓存。对完全非缓存,举办磁盘扫描的场景,机能也不黑白常突出,二者也稀有目级的机能差距。这也是我们在行使进程中的优化点。 最后,以上回收MPP架构的OLAP引擎,跟着并发的进步,查询机能都呈现了线性降落,Presto在这个题目上的尤为明明。CK因为单次查询速率快,以是必然水平上袒护了这个题目。因此,各人在将来的营业中举办OLAP评估时,也必要将并爆发为一个重要的思量身分。

(编辑:湖南网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读