Hadoop中MapReduce作业流程图

发表于:2017-5-25 09:59

字体: | 上一篇 | 下一篇 | 我要投稿

 作者:透明1190    来源:博客园

#
hadoop
#
Hadoop
分享:
  MapReduce的流程分为11个步骤,4个实体
  1、客户端:编写MapReduce的代码,配置作业,提交作业
  2、JobTracker:初始化作业,分配作业,与TaskTracker通信,协调整个作业的执行
  3、TaskTracker:保持JobTracker的通信,在分配的数据段上执行Map和Reduce任务,一个Hadoop中可以包含多个TaskTracker
  4、HDFS:保存作业的数据、配置信息等,保存作业结果。
《2023软件测试行业现状调查报告》独家发布~

关注51Testing

联系我们

快捷面板 站点地图 联系我们 广告服务 关于我们 站长统计 发展历程

法律顾问:上海兰迪律师事务所 项棋律师
版权所有 上海博为峰软件技术股份有限公司 Copyright©51testing.com 2003-2024
投诉及意见反馈:webmaster@51testing.com; 业务联系:service@51testing.com 021-64471599-8017

沪ICP备05003035号

沪公网安备 31010102002173号