MapReduce提交到Yarn上大体执行流程

MapReduce提交到Yarn上大体执行流程

创新互联建站-云计算及IDC服务提供商,涵盖公有云、IDC机房租用、电信内江机房、等保安全、私有云建设等企业级互联网基础服务,服务电话:18980820575

  1. 启动申请提交一个job(wordcount.jar和程序中的配置参数和数据切片规划文件)运行进程为runjar

  2. ResouceManager 会在一台节点NodeManager上先启动客户提交的wordcount.jar的主管进程MRAppMasster

  3. 由主管进程(MRAppMasster)根据启动规则启动mapTask任务(yarnChild进程).如果所有mapTask任务运行结束.MRAppMasster进程会启动Reduce Task任务(yarnChild进程)


当前文章:MapReduce提交到Yarn上大体执行流程
网页网址:http://scjbc.cn/article/jgdhge.html

其他资讯