百分点大数据评测报告:开源OLAP引擎综评(HAWQ、Presto、ClickHouse)
Presto的综合手段比拟其他SQLon Hadoop引擎照旧较量突出的。我们在测试进程中发明,单节点的扫描速率达5000WRow/S。Presto是完全基于内存的并行计较,对内存有必然的要求。只装载数据到内存一次,其他都是通过内存、收集IO来处理赏罚,以是在慢速收集下是不得当的,以是它对收集要求也是很高。Presto只是查询引擎,不认真数据的底层耐久化、装载计策。Presto支持富厚的大都据源,可跨多个数据源查询。其它,在我们测试的版本上没有当地数据读取优化计策,开源社区里在新版本上是支持的。 ClickHouse作为战斗民族的开源神器,是今朝全部开源MPP计较框架中速率最快的。比拟测试的功效表白,ClickHouse在单表的查询中机能异常优秀。对多表的关联说明场景,查询其他陈诉并不异常抱负,本次测试并不涉及,不做评述。ClickHouse机能很洪流平上依靠于体系缓存。对完全非缓存,举办磁盘扫描的场景,机能也不黑白常突出,二者也稀有目级的机能差距。这也是我们在行使进程中的优化点。 最后,以上回收MPP架构的OLAP引擎,跟着并发的进步,查询机能都呈现了线性降落,Presto在这个题目上的尤为明明。CK因为单次查询速率快,以是必然水平上袒护了这个题目。因此,各人在将来的营业中举办OLAP评估时,也必要将并爆发为一个重要的思量身分。 (编辑:湖南网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |