Impala presto SparkSql性能测试对比

发表于:2017-8-11 15:24  作者:thinker1017   来源:51Testing软件测试网采编

字体: | 上一篇 | 下一篇 | 打印 |我要投稿 | 推荐标签: 性能测试 软件测试技术

  目标是为测试impala presto SparkSql谁的性能更佳,以下结果底层查询的都是普通textfile snappy压缩后数据,规模为15台机器,若以orcfile、parquet速度能快数倍
  impala与presto性能相当,SparkSql逊色不少。
  目前看presto相比impala
  1、与hive实时共享元数据,impala需要用另外定时任务广播元数据,新生成的数据,用impala不能立即查询。
  2、没有出现操作大数据集有时挂掉的情况
  3、presto与hive都由fackbook开源,兼容性应该会更好点
  测试过程比较简单,分为四个场景sql查询:
  测试结果对比如下:

评 论

论坛新帖

顶部 底部


建议使用IE 6.0以上浏览器,800×600以上分辨率,法律顾问:上海瀛东律师事务所 张楠律师
版权所有 上海博为峰软件技术股份有限公司 Copyright©51testing.com 2003-2017, 沪ICP备05003035号
投诉及意见反馈:webmaster@51testing.com; 业务联系:service@51testing.com 021-64471599-8017

沪公网安备 31010102002173号

51Testing官方微信

51Testing官方微博

扫一扫 测试知识全知道