Impala presto SparkSql性能测试对比

发表于:2017-8-11 15:24

字体: | 上一篇 | 下一篇 | 我要投稿

 作者:thinker1017    来源:51Testing软件测试网采编

  目标是为测试impala presto SparkSql谁的性能更佳,以下结果底层查询的都是普通textfile snappy压缩后数据,规模为15台机器,若以orcfile、parquet速度能快数倍
  impala与presto性能相当,SparkSql逊色不少。
  目前看presto相比impala
  1、与hive实时共享元数据,impala需要用另外定时任务广播元数据,新生成的数据,用impala不能立即查询。
  2、没有出现操作大数据集有时挂掉的情况
  3、presto与hive都由fackbook开源,兼容性应该会更好点
  测试过程比较简单,分为四个场景sql查询:
  测试结果对比如下:
《2023软件测试行业现状调查报告》独家发布~

关注51Testing

联系我们

快捷面板 站点地图 联系我们 广告服务 关于我们 站长统计 发展历程

法律顾问:上海兰迪律师事务所 项棋律师
版权所有 上海博为峰软件技术股份有限公司 Copyright©51testing.com 2003-2024
投诉及意见反馈:webmaster@51testing.com; 业务联系:service@51testing.com 021-64471599-8017

沪ICP备05003035号

沪公网安备 31010102002173号