大数据问题

想问下大哥们
大数据问题:
一个mapreduce任务里面假如需要 5个maptask 结果yarn只能提供三个container这个还能跑起来
全部评论
个人观点,这是可以运行的,不管有多少个maptask,都会进入到resourcemanager的任务队列里边儿,然后等待调度器的调度运行,每个maptask运行的相关信息都会被mrappmaster记录下来,虽然只能开启3个容器,但是并不会导致无法运行,它可以先执行3个maptask,再执行2个maptask,然后再执行reduce task,只是说运行得相对久一点而已
1 回复 分享
发布于 2022-07-16 11:42
可以的
点赞 回复 分享
发布于 2022-07-15 09:41
老哥,建个大数据的群,以后可以讨论
点赞 回复 分享
发布于 2022-08-22 19:25 广东

相关推荐

评论
1
5
分享

创作者周榜

更多
牛客网
牛客企业服务