MapReduce提交到Yarn上大体执行流程

MapReduce提交到Yarn上大体执行流程

创新互联建站-云计算及IDC服务提供商,涵盖公有云、IDC机房租用、电信内江机房、等保安全、私有云建设等企业级互联网基础服务,服务电话:18980820575

  1. 启动申请提交一个job(wordcount.jar和程序中的配置参数和数据切片规划文件)运行进程为runjar

  2. ResouceManager 会在一台节点NodeManager上先启动客户提交的wordcount.jar的主管进程MRAppMasster

  3. 由主管进程(MRAppMasster)根据启动规则启动mapTask任务(yarnChild进程).如果所有mapTask任务运行结束.MRAppMasster进程会启动Reduce Task任务(yarnChild进程)


标题名称:MapReduce提交到Yarn上大体执行流程
URL链接:http://www.hxwzsj.com/article/jgdhge.html

其他资讯

Copyright © 2025 青羊区翔捷宏鑫字牌设计制作工作室(个体工商户) All Rights Reserved 蜀ICP备2025123194号-14
友情链接: 成都网站设计 教育网站设计方案 成都网站制作 成都h5网站建设 响应式网站建设 古蔺网站建设 成都网站建设 成都网站制作 响应式网站设计 成都网站建设 上市集团网站建设 移动手机网站制作 成都网站设计 成都网站设计 成都企业网站建设公司 达州网站设计 成都网站建设 网站设计 成都网站建设 外贸网站建设 品牌网站建设 专业网站建设