大数据问题

想问下大哥们
大数据问题:
一个mapreduce任务里面假如需要 5个maptask 结果yarn只能提供三个container这个还能跑起来
全部评论
个人观点,这是可以运行的,不管有多少个maptask,都会进入到resourcemanager的任务队列里边儿,然后等待调度器的调度运行,每个maptask运行的相关信息都会被mrappmaster记录下来,虽然只能开启3个容器,但是并不会导致无法运行,它可以先执行3个maptask,再执行2个maptask,然后再执行reduce task,只是说运行得相对久一点而已
1 回复 分享
发布于 2022-07-16 11:42
老哥,建个大数据的群,以后可以讨论
点赞 回复 分享
发布于 2022-08-22 19:25 广东
可以的
点赞 回复 分享
发布于 2022-07-15 09:41

相关推荐

06-10 21:15
门头沟学院 Java
宁阿:好多这种没🧠的公司,他们估计都不知道毕业的人不能给安排实习岗
实习吐槽大会
点赞 评论 收藏
分享
评论
1
5
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务