大数据问题

想问下大哥们
大数据问题：
一个mapreduce任务里面假如需要 5个maptask 结果yarn只能提供三个container这个还能跑起来
全部评论
个人观点，这是可以运行的，不管有多少个maptask，都会进入到resourcemanager的任务队列里边儿，然后等待调度器的调度运行，每个maptask运行的相关信息都会被mrappmaster记录下来，虽然只能开启3个容器，但是并不会导致无法运行，它可以先执行3个maptask，再执行2个maptask，然后再执行reduce task，只是说运行得相对久一点而已
2 回复 分享
发布于 2022-07-16 11:42
老哥，建个大数据的群，以后可以讨论
点赞 回复 分享
发布于 2022-08-22 19:25 广东
可以的
点赞 回复 分享
发布于 2022-07-15 09:41

相关推荐

11-08 13:16
中南大学 Java
入互联网是我学生涯做过最错误的选择
作为一个刚入职不久的25届职场人，真心想给后来者一句劝：如果你不是能接受无底线内耗，或者对互联网红利还抱有不切实际的幻想，传统行业或许是比互联网更稳的选择。互联网真的卷到窒息，行业环境早就不如从前。随便打开一个招聘 APP，互联网岗位 JD 里 “能接受 996”“抗压能力强”“有大厂实习经历” 已经是基础要求。2024 年互联网岗位简历投递量是传统行业核心岗位的 6-8 倍，很多岗位百里挑一，拿到面试邀请都算幸运。就算侥幸进了面试，笔试要刷遍行业题库，面试要背完上百道八股，还要现场手撕代码、模拟业务场景。不少应届生吐槽：“面个基础岗，要求堪比资深员工，既要懂技术又要会运营，还得接受降薪入职。...
Java抽象小篮子：byd油盐不进非要去是吧
互联网没坑了，还能去哪里...
点赞 评论 收藏
分享
头像
11-11 14:43
三峡大学 Java
某小厂--Java高级开发--社招
​ 2025.11.11，时隔大半年又回来了，心累，上周提离职了，希望有个好结果[TOC]🔥1. 线下一面​ 面的高级Java开发岗位，没自我介绍，直接开始介绍业务流程，从业务难点讲到业务流程，业务特色之类的，然后让我讲业务难点，介绍了下架构设计和GC调优，限流，消息队列，总的流程都差不多，没了以前那种八股文​ 然后就是算法题，我没复习，手撕了个冒泡排序，然后DP动态规划简单介绍了下思路之类的。（这里感觉都交流了半小时左右，技术总监很有耐心，我也没有直接说不会，介绍了思路后面也想出来了）​ 后面就是反问公司业务，组织架构之类的。🔥2.总结​ 很有纪念意义，之前面试都是八股文，架构乱扯，感觉...
点赞 评论 收藏
分享
09-28 19:15
景德镇陶瓷大学 C++
献祭华为😈😈
迷茫的大四🐶：💐孝子启动失败，改为启动咏鹅
点赞 评论 收藏
分享
10-10 19:11
华东交通大学 Java
大伙帮忙看看这合同能不能签？
😢😢😢Java
给个offer灞：校友 是不是金die
点赞 评论 收藏
分享
昨天 11:32
OPPO_软件开发部_IT开发工程师(准入职员工)
海康威视内推，海康威视内推码
岗位：武汉 嵌入式开发timeline：8.30 测评，10.9 一面，10.11 二面一面技术：自我介绍讲下实习经历平常怎么debug项目中有没有遇到什么问题，怎么解决的介绍一下学校经历了解数据结构吗？基本的数据结构？查找搜索效率？有什么方法可以提高效率？具体围绕数据结构问了很多RTOS，多任务操作反问：做存储固件的，具体的进来再分二面HR：北京线下，地点在北京研发中心，具体内容就是唠家常，一些HR面的基本问题销售工程师工作体验，总结累但成长很多。1.大家最先关注的就是HIK的工作压力，只能说体面厂没有辜负盛名！名不虚传！我来这边是销售岗，基本上每天都要差不多11点下班。因为销售不仅需要对接...
点赞 评论 收藏
分享
评论
1
5
分享

全站热榜

更多

创作者周榜

更多
正在热议
更多
# 第一次找实习，我建议__ #
3673次浏览 55人参与
# 实习期间如何提升留用概率？ #
193358次浏览 1618人参与
# 联影求职进展汇总 #
92695次浏览 428人参与
# 你听到的“最没用”的秋招建议 #
9548次浏览 119人参与
# 小红书取消大小周 #
77056次浏览 177人参与
# 秋招暂停，我将对以下公司做出处罚__ #
8776次浏览 35人参与
# 360集团校招 #
56714次浏览 190人参与
# 军工所铁饭碗 vs 互联网高薪资，你会选谁 #
1673次浏览 16人参与
# 从mentor身上学到了__ #
5288次浏览 62人参与
# 2025秋招体验点评 #
29929次浏览 302人参与
# 工作以后，你父母对你啥态度 #
4355次浏览 56人参与
# 第一份工作应该选择高薪还是大平台 #
168358次浏览 927人参与
# 实习心态崩了 #
89611次浏览 476人参与
# 面试反问你会问什么 #
131800次浏览 1527人参与
# 薪资要看总包还是月薪？ #
9637次浏览 114人参与
# 机械人值得去的半导体企业 #
29668次浏览 179人参与
# 什么样的公司千万别去 #
6892次浏览 59人参与
# 面试太紧张了怎么办？ #
203430次浏览 1643人参与
# 双11，我的offer购物车开箱啦 #
5903次浏览 44人参与
# 你在职场上见过哪些“水货”同事 #
10544次浏览 94人参与
# 非技术岗简历怎么写 #
257116次浏览 3086人参与
# 联想求职进展汇总 #
311764次浏览 2201人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务