大数据开发

#大数据开发# 这个简历是不是项目太烂了啊，烂的话之后换一个什么项目好呢？还有今天找到一个小厂实习，月薪三千要去吗？（武汉数据岗感觉有点少）

一面：自我介绍hdfs架构，读写流程mr的shuffle，mr和spark的区别sqoop和flume的应用场景项目数仓分层，各层干了什么维度建模理论了解调优吗数据倾斜两道sql，连续登录和好友数量反问二面：自我介绍拷打项目建模理论sql，分组topk，行转列窗口函数介绍排序方式了解哪些，order by有几个reduce文件存储格式反问感恩脉脉，我要为脉脉当牛做马#面经##大数据开发#

大数据开发暑期实习总结 这篇文章总结了美团近30篇面经的题目，想着大家可能也需要答案，于是我根据自己的理解以及网上的一些答案进行了梳理，如果有不对的地方，大家可以评论区留言讨论哦（别喷我~~~）Java写一个多线程代码 class RunnableDemo implements Runnable { private String threadName; public RunnableDemo(String name) { threadName = name; } @Override public void run() { ...

接下来这几道题，算是所有面经里面出现频率最高的（仅限牛客大数据开发面经分享），有的公司甚至一二面都常有重复的题（比如美团~）。 公众号：旧时光大数据 一、Hadoop部分 一、HDFS文件写入和读取过程 可灵活回答： 1）HDFS读写原理（流程） 2）HDFS上传下载流程 3）讲讲（介绍下）HDFS 4）HDFS存储机制 问过的一些公司： 阿里×3，阿里社招，腾讯x2，字节x2，百度，拼多多x2，浩鲸云，小米，流利说，顺丰，网易云音乐×2，有赞×2，祖龙娱乐，360×2，商汤...

双非硕，求各位佬帮忙看看简历有哪些问题，主打听劝#大数据开发##实习岗位前的准备##简历被挂麻了，求建议##最后再改一次简历##春招还有救吗#

大三  找大数据开发暑假实习 #大数据开发实习生#    投了很久还没收到一个面试求大佬指导😭😭😭 #数据开发工程师实习# #大数据开发# #25届暑期实习#

面试时间：1h 10min自我介绍实习工作的一些问题项目相关的一些问题Java基本数据类型？String为什么不是基本数据类型？能不能继承？如果需要频繁地拼接字符串用什么？为什么？StringBuffer、StringBuilder 的区别？Java的集合类了解吗？都有那些？它们的继承关系是怎么的？讲讲HashMap？HashMap多线程下怎么办？多线程的HashMap它的原理？并发编程的问题，听的有点懵，说不会，他又换了一个，还是不会，尴尬JVM内存结构？类加载机制？线程池了解吗？介绍一下设计模型用过那些？在哪里用过？线程和进程的区别？我看你学过python，python里面的协程和进程线程有什么区别吗？MapReduce原理？Spark为什么比MaReduce快？现在还有用MapReduce的吗？比起Spark，MapReduce的应用场景？Spark任务执行的流程？宽窄依赖？HDFS是如何保证数据可靠的？机房断网，造成脑裂怎么办？Flume构成？你在项目里是怎么用的？Kafka的构成？多个partition，怎么能保证全局有序？回答可以设置一个partition，不知道其他方法，反问面试官。他说这是别人问他的，他也不知道，问问看我能不能知道....数据库和数据仓库区别？数仓为什么要分层？星型模型和雪花模型区别？维度表和事实表，介绍一下？SQL：给了一张用户登陆表，求每个日期用户的活跃数、7日留存用户、7日活跃留存率好像最后时间不够了，我还没写完，就让我说了一下思路反问：部门业务是什么实习生都做什么工作对实习生有什么要求总结：- 问了很多项目相关的问题，很细，我开始以为一面只会问八股，没怎么准备，猝不及防- 面试官说他不是这个部门的，似乎是后端开发的，问了不少Java 的八股，Java集合的内容很久没复习，忘得差不多了；并发编程是都没研究过- 第一次面试，有些紧张，NameNode和DateNode、线程和进程 这些嘴瓢都说乱了，面试官人挺好的，还在安慰我别紧张#我的实习求职记录##美团##大数据开发#

面试内容一面（乙方）：1、聊一下熟悉的数据库，关系型，非关系型都说一下？2、介绍一下clickhouse，为什么用它？3、说一下简历上项目，数仓的分层架构，每一层的作用？4、入库做数据清洗吗？还是后续在数仓中过滤？说一下实际的做法5、数据同步是怎么做的？你在项目中的角色？（说了kafka）6、你这个是离线的数仓吗？你觉得什么需要做数仓？7、为什么用flinkcdc？8、spark了解吗？说几个常用的算子？9、spark和hive的区别？10、你对实时数据有什么想法吗？为什么用实时？ （答：和业务相关，数据有时效性，数据价值） （面试官：你说的这个时效性我不是很认同，前一段时间的数据...

🕒 岗位/笔试时间个人背景：安徽理工大学本科 CUGB硕士 无竞赛 无项目 无实习1.快手——（数仓方向）一面凉经八股：spark shffule spark内存模型 RDD五大特性 MR流程  数仓理论sql ：相互关注(没写出来) 分组TopN总结：基本上 按照简历和自我介绍问的 八股都没有深挖 2.百度健康部门——（数据中台）一面凉经八股：没有八股 不看简历  问的题目太杂了 都不难 偏向后端sql: 常规sql   不难   有点绕总结：自己基础知识 太差 3. 货拉拉——（数据平台）—一面凉经八股：全是后端基础八股 还有 spring八股 sql: 无总结  ：答得不好 后端八股 全忘了4.字节 懂车帝——数仓方向—自己取消了面试（抑郁了）5. 美团——数据平台开发（前端方向）——一面挂了总结：没问前端，按照简历问的。答的还可以，最后挂了。6.网易杭州——数仓方向—拿到offer一面：聊天 写sql(求员工的全勤人数) 二面： HR面 （聊的很不好，问的都是职场情景题）总结：不知道为啥发Offer了 ，口头offer 到正式 offer 四天时间7.脉脉——数仓方向—拿到offer一面：八股：按照简历问的 很基础 sql:连续三天登录 求好友数量（leetcode原题）二面：问了培训机构的项目   还有 hive八股  （常用的排序 order by sort by ...区别）sql :行列转换  分组topN后面 百度和快手的其它部门 又约面了 最后都拒了（评论区留言就行，都会回复的） #大数据开发# #大数据面经#

#牛客解忧铺##牛客在线求职答疑中心##你觉得今年春招回暖了吗##面经##大数据开发#附加信息：211本+985硕（非计算机），笔试4出头的分数，面了90分钟，面试官人超好，奈何本人过菜1、部门介绍2、自我介绍3、项目介绍，在项目中承担什么角色，如何完成工作大数据相关：4、对大数据开发的理解5、知道什么常用的大数据开发组件6、谈谈MapReduce的原理7、谈谈shuffle的实现方法8、对spark有什么理解？为什么Spark的运行速度快MySQL相关：9、对索引的理解10、索引的数据结构是什么？有什么好处？11、数据库设计三范式12、常用的数据引擎有什么？InnDB有哪些优势？13、sql题：计算排名14、sql题：用户净增长15、sql题：用户留存率16、sql题：表格转置17、反问

Spark作为大数据计算平台后起之秀，在2014年打破了Hadoop保持的基准排序记录，使用206个节点在23分钟里完成了100TB数据的排序，而Hadoop则是使用2000个节点在72分钟的时间里完成同样数据的排序。也就是说，Spark仅用了十分之一的计算资源，获得了比Hadoop快3倍的速度。为什么速度如此之快？让我们首先探讨一下Spark的底层架构设计，揭示其中的精妙之处。一、Spark架构设计面试官：你知道Spark架构吗？标准答案：我知道的，Spark架构包括控制节点Driver，以及工作节点Executor和集群资源管理器。其中，Diver是整个架构的老大，主要负责资源申请以及任务...

    2023年4月，大数据开发面试笔记V3.0发布，过去已经两个月，V4.0终于来了，这次主要新增了企业级调优手法以及数据湖基础等内容。如今面试越来越难，常常会被问到大数据的前沿知识比如数据湖，以及企业级调优手段有哪些等，于是我结合自己在大厂的工作经历进行了补充，最终汇聚成一份全面的大数据开发面试笔记。    此笔记包含大数据开发、Java、计算机基础、数仓理论、常考SQL、大数据开发场景题、大厂面经合集、大厂SQL真题、企业级调优手法、数据湖基础等十大模块，并且所有内容会持续更新。第一部分 大数据开发HDFS...

是不是寄了，上周五三面的 #暑期实习# #大数据开发# #腾讯#

最近有点迷茫了，背景双非本硕，目前研二在读，自己读研的初衷就是为了想毕业进厂找工作不走科研这条路，本科java学的也不精，读研了在想还要不要走java后端，当时网上都说java卷 僧多粥少。所以后面就b站大学跟着sgg那一条大数据开发的学习路线，感觉路线很清晰，就跟着学了 到现在越来越发现项目很浅，离线实时电商项目 数据也是模拟的，没有实际的海量数据经验，只是熟悉了一下组件的使用和写写sql。而且数开这个岗位hc也很少，还有大部分简历都是这俩项目。目前陆陆续续的中大厂都已经开暑期实习了，我自己还没准备好投简历。或者有没有前辈已经投了有面试的？现在在纠结想要不要回去搞java后端 毕竟hc多至少能兜个底（虽然好多人都是这么想的，好多人也都是java的）但毕竟硕士能稍微好一点点点点点吧？最重要的是 再加上java项目也挺多的，不至于简历雷同那么严重，而且往后学各种组件微服务等等还有上升空间吧…最近很迷茫，各位前辈给点建议吧！ #大数据#  #java#  #面经#  #大数据开发#    #数据开发#  #后端#  #数据分析#

推荐阅读文章列表：大数据开发面试笔记V4.0 || 面试聊数仓第一 || 小白大数据学习路线 全文1.5w字，题目比较多，请耐心阅读！！！一、前言原文链接：https://www.nowcoder.com/share/jump/1689088775835之前发过一篇字节跳动面经汇总的帖子，但是当时答案并没有更新完全，最近在字节开了提前批后，我立马更新了所有的题目答案，发出来供大家面试参考！！！赶紧投递！！！赶紧投递！！！赶紧投递！！！二、面经汇总Hadoop篇1.介绍一下Hadoop hadoop是什么Hadoop是一个由Apache基金会所开发的分布式系统基础架构，主要解决海...