大数据问题

想问下大哥们
大数据问题：
一个mapreduce任务里面假如需要 5个maptask 结果yarn只能提供三个container这个还能跑起来
全部评论
个人观点，这是可以运行的，不管有多少个maptask，都会进入到resourcemanager的任务队列里边儿，然后等待调度器的调度运行，每个maptask运行的相关信息都会被mrappmaster记录下来，虽然只能开启3个容器，但是并不会导致无法运行，它可以先执行3个maptask，再执行2个maptask，然后再执行reduce task，只是说运行得相对久一点而已
1 回复 分享
发布于 2022-07-16 11:42
老哥，建个大数据的群，以后可以讨论
点赞 回复 分享
发布于 2022-08-22 19:25 广东
可以的
点赞 回复 分享
发布于 2022-07-15 09:41

相关推荐

07-28 16:10
门头沟学院 Java
虾皮提前批挂
连笔试都没有就直接挂了 这是学历厂吗两段大厂实习一段中厂一点机会都没有吗真的很难绷
xiaolihuam...：校招挂了，然后反手给我捞了个社招
投递虾皮信息等公司10个岗位
点赞 评论 收藏
分享
07-29 14:51
西安电子科技大学 Java
字节一面：你负责的业务系统，流量突然提升100倍QPS，你怎么办？
前言大家好，我是田螺。分享一道字节面试场景题：假设你负责的业务系统，流量突增，比如QPS暴增100倍，你要怎么处理？有些伙伴一听完题目，就不假思索回答，那就加机器呀、扩容什么的。当然，这个不能算错，但是你只得其中一小点的分数，肯定不及格的。作为一名优秀的后端开发程序员，我们应当从多个维度去思考这个问题，尽可能回答完整、正确。紧急响应阶段：快速止血冷静分析：为什么？暴增的流量合理嘛健壮设计，增强系统身体素质压力测试，测试系统抗压能力1.紧急响应阶段：快速止血如果我们负责的系统，突发流量洪峰来了，超过系统的承载能力，为了保护我们的系统，需要快速止血!1.1 限流我们可以采取限流方案。其实就是保护系...
字节跳动一面1279人在聊
点赞 评论 收藏
分享
06-20 08:56
长安大学 产品经理
点赞 评论 收藏
分享
07-25 12:35
The University of Melbourne Java
点赞 评论 收藏
分享
08-01 18:13
门头沟学院 运营
教大家如何舔回offer
发了一直都没回复我
牛客48325473...：不回就是默拒了
点赞 评论 收藏
分享
评论
1
5
分享

全站热榜

更多

创作者周榜

更多
正在热议
更多
# 工作中哪个瞬间让你想离职 #
64474次浏览 575人参与
# 秋招被确诊为…… #
164951次浏览 765人参与
# 中兴秋招 #
206390次浏览 2302人参与
# 和同事相处最忌讳的是__ #
25161次浏览 248人参与
# 找工作如何保持松弛感？ #
92013次浏览 1112人参与
# 如何快速融入团队？ #
17641次浏览 210人参与
# 虾皮求职进展汇总 #
250016次浏览 1873人参与
# 计算机专业还有必要去大厂卷吗 #
38556次浏览 183人参与
# Offer比较，你最看重什么？ #
194027次浏览 1313人参与
# 26届的你，投了哪些公司？ #
47476次浏览 507人参与
# 你最希望上岸的公司是？ #
135503次浏览 706人参与
# 简历上的经历如何包装 #
30816次浏览 838人参与
# 投格力的你，拿到offer了吗？ #
87113次浏览 584人参与
# 我对___祛魅了 #
50089次浏览 447人参与
# 你遇到最难的面试题目是_ #
17054次浏览 204人参与
# 柠檬微趣工作体验 #
6808次浏览 40人参与
# 你跟室友的关系怎么样？ #
7594次浏览 116人参与
# 通信硬件岗投递时间线 #
18861次浏览 69人参与
# 什么样的背景能拿SSP? #
39713次浏览 232人参与
# 你最讨厌面试问你什么？ #
29047次浏览 319人参与
# 地平线求职进展汇总 #
52726次浏览 370人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务