Yarn简介及Capacity & Fair Scheduler Yarn简介 Yarn(Yet Another Resource Negotiator)是hadoop2中引入的一个集群资源管理系统。 在YARN中,有两种核心服务:一个是ResourceManager,一个是NodeManager。前者每个集群有一个,用来管理集群上资源的使用;后者则是每个节点拥有一个,用来负责启动和监控Container。其中Container是一个拥有一定资源(cpu, mem, network等)的特殊进程。 在mapreduce1中application的调度和监控...