2023学年完整公开课版Application生命周期

Application生命周期2学习任务Yarn的执行流程YarnApplication3知识目标了解Yarn的执行流程。了解YarnApplication的用途。01能力目标学会YarnApplication命令的用法。学会编写Yarn上运行的程序。02学习目标4目录01Yarn的执行流程02YarnApplication的命令03编写Yarn上运行的程序Yarn的执行流程5YarnApplication命令6-list：列出所有Application信息。

示例：yarn

application–list-appStates<States>：跟-list一起使用，用来筛选不同状态的application，多个用“,”分隔；

所有状态：ALL,NEW,NEW_SAVING,SUBMITTED,ACCEPTED,RUNNING,FINISHED,FAILED,KILLED

示例：yarn

application-list-appStates

RUNNING-appTypes<Types>：跟-list一起使用，用来筛选不同类型的application，多个用“,”分隔；

如MAPREDUCE

示例：yarn

application-list-appTypes

MAPREDUCEYarnApplication命令7-kill<ApplicationID>：杀死一个application，需要指定一个

ApplicationID

。

示例：yarn

application-killapplication_1526100291229_206393-status<ApplicationID>：列出某个application的状态

示例：yarn

application-status

application_1526100291229_206393-movetoqueue<ApplicationID>

：移动application到其他的queue，不能单独使用。-queue<QueueName>：与movetoqueue命令一起使用，指定移动到哪个queue。

示例：yarn

application-movetoqueueapplication_1526100291229_206393-queueother编写Yarn上运行的程序-client设计8客户端通过RPC与ResourceManager通信获取appId和可分配的资源等信息。客户端通过RPC将ApplicationMaster提交到ResourceManager。客户端将启动ApplicationMaster所需要的信息打包到ApplicationSubmisionContext中。主要包括application_id、name、priority、queue、user、unmanagered_am等。也需要提供ApplicationClient接口实现，以供返回信息，包括集群信息、节点信息、kill信息、运行状态。当然这些程序可以使用Java的RPC进行编程，Yarn提供了YarnClient类的封装编程库，使用maven载入。编写Yarn上运行的程序-ApplicationMaster设计9ApplicationMaster通过RPC向ResourceManager注册注册成功后收到一个RegisterApplicationMasterResponse返回值，主要信息有maximumCapability最大可用资源、client_to_am_token_master_key等信息。ApplicationMaster通过RPC向ResourceManager申请资源。ApplicationMaster调用后会收到AllocationResponse类型返回信息。主要包括reponse_id、allocated_containers、limit、状态等信息。Applicati