首页
题库
公司真题
专项练习
面试题库
在线编程
面试
面试经验
AI 模拟面试
简历
求职
学习
基础学习课
实战项目课
求职辅导课
专栏&文章
竞赛
搜索
我要招人
发布职位
发布职位、邀约牛人
更多企业解决方案
AI面试、笔试、校招、雇品
HR免费试用AI面试
最新面试提效必备
登录
/
注册
牛客337150445号
华南师范大学 Java
发布于广东
关注
已关注
取消关注
@来杯冰可乐叭:
大数据岗位选择(小白向)
烫
楼主是23届985本(末流)科,专业是“数据科学与大数据技术”,学了几年说实话一点都没明白毕业了到底能做什么岗位[笑cry]。去年也是这个时候着急忙慌的春招找暑期实习,可是实际上连能做什么岗位都不知道,就直接在招聘官网搜“数据”,然后看到了大数据开发工程师。实际上我压根不了解具体的工作内容,面试中也因此吃了很多亏。现在经过了史上最冷的”寒冬“[牛泪],也有一定的实习经历,给大家伙简单说说我了解到的”数据“相关的岗位,一方面有利于大家根据自身情况选择方向,另一方面也可以在面试中避免信息差[等offer][抱大腿]技术向一般的企业招聘岗位在大数据相关的岗位都是直接称为”大数据开发工程师“(但是不同的公司也会有区别,例如阿里的是:数据研发,腾讯的是:数据工程),这里面实际会包含到以下提到的多个不同方向岗位,需要大家在面试的时候和面试官确认(之前我在面试京东,面试官是大数据平台开发的直接给我问蒙蔽了),或者也可以通过JD来判断是否是自己的目标岗位1.数仓开发数仓开发分离线和实时,大数据开发中最常见的岗位,也是目前相对而言hc数量最多的岗位。楼主现在也是属于这个岗位。数仓开发是一个技术性和业务性结合的岗位,需要在会技术的同时有业务的敏感度,因为大部分时候数仓的需求都需要深入的去了解业务。数仓开发的日常工作总结一下就是:熟悉业务逻辑;使用大数据组件;分层建模。需要的技能大概是:SQL;数仓建模;离线的话 Hive、Spark 的原理以及调优,数据倾斜处理;实时的话 Flink 的原理;MapReduce 原理。对业务敏感。简单来说就是 SQL boy[老人手机]。2.大数据平台开发公司一般都要给数据研发同学提供一站式数据开发平台。比如操作 Hive 或者 HDFS,是在开源的组件里那种难用的黑框框里写 SQL 或者 Shell 脚本吗?No!公司都有一站式数据开发平台,具体内容是:开发数据研发同学需要的开发工具,统一的前端页面,可以对 SQL 进行语法校验、格式化代码等功能,让数仓的同学开发更轻松;能够可视化 CPU、内存等资源的使用情况。开发数据可视化的工具(BI 工具)。需要的技能大概是:Java、Scala 语言,包括 JVM、类装载、线程、并发、IO资源管理、网络 ;微服务架构;Web 后端技术栈;熟悉数仓开发流程(知道数仓开发的同学要用到什么,才能开发出好的一站式开发套件);熟悉 hadoop / flink / spark 等。类似于 Java 后端开发。但是同时也需要非常了解大数据组件的底层原理,面试中会兼顾大数据与后端开发的内容在企业招聘中也可能会单独招聘”大数据平台开发“或”JAVA开发(大数据)“。3.基础组件开发大公司一般不会把开源框架直接来使用,一般是会二次开发,实现一些定制化功能,比如把 ClickHouse 魔改一下突破性能瓶颈;对 Flink 二次开发优化;开发新的大数据存储系统、查询系统。上面只是举例,具体就不一一枚举了,需要的技能大概是:熟悉 Flink、Spark 等一种或多种大数据组件的原理和源码;Java、Scala、C++ 等编程语言要熟练;存储系统经验等;设计模式。可能类似于 java 中间件开发?或者基础设施开发。4.数据测试数仓开发的 SQL 也是有 测试人员写 case 测试的,测试完才能上线。要求和数仓开发差不多,但要会测试相关的知识。这也是我认为未来有扩张趋势的岗位PS:在以上的岗位中,从个人角度来看数仓目前的就业情况较好,因为现在在平台和组件开发中各个公司基本都完成了,平台开发的同学大部分时候是类似于运维的功能。但是,从职业前景而言,大数据平台开发跨后端开发以及数仓,应对行业风险的能力更强。业务向业务向的岗位我了解不多只做简单描述。1.数据分析师数据分析师在互联网公司中会分为两种,一是传统的数分,二是我们称为商业数据分析(商分),二者的工作内容相差不大,但是商分的一般会直接向大老板汇报。数分会较多考察数学能力和一些分析归因的能力。当然还有一些分析工具的使用,从Python到Excel,不同的职位有不同的要求。岗位数量很多,无论大公司还是小公司,都有相关岗位。更加适合不喜欢写代码,但又想从事数据相关工作的同学。但是目前在互联网公司里,数分卷的程度不亚于产品,基本都是985硕+大厂实习,对业务的敏感性也要求比较高日常工作:看大盘数据和数仓掰扯数据异常问题写分析报告给老板汇报(PPT)2.数据产品目前数据产品也是大数据领域内较新的一个岗位,看名字也知道主要的职能类似于产品经理,只不过主要是服务于数据方面的,包括数据服务、数据应用等工具的产品设计日常工作:数据产品经理的日常工作主要包括以下几个方面:产品规划和设计:负责整个数据产品的规划和设计需求调研和分析:通过市场调研、用户反馈等方式(其实主要是数仓的使用反馈)产品开发和管理:负责整个数据产品的开发和管理工作,产品营销和推广:负责数据产品的推广和营销胡思乱想最后分享以下个人的一些看法:岗位的选择主要是个人喜好和自身能力的综合考虑,有人喜欢做业务,有人喜欢做基础架构。如果抛开个人喜好:业务:好的地方在于比较实际,更贴近一线,后期发展更好点(领导大多是做业务技术出身的)。不好的地方在于要看运气,如果碰上快速发展的业务,能够快速成长。如果业务不咋地,可能就进步缓慢。基础:好的地方在于技术方面的成长比较快。不好的地方在于后期发展受限,如果没有技术上特牛逼,可能就是个高级别员工了。这些只是我基于我们部门观察的结果,可能不同部门不同公司情况就很大不同,仅供参考。PS:因为我也是从小白入门,经过春招找暑期实习,秋招各种面试的过程,基本上能踩的坑都踩了个遍,中间的痛苦与迷茫都不说了,希望我写的这点东西能帮到大家吧。
点赞 107
评论 81
全部评论
推荐
最新
楼层
暂无评论,快来抢首评~
相关推荐
03-25 09:52
吉林农业大学 算法工程师
滴滴 AI Agent开发 一面
1. 自我介绍2. 项目拷打3. 什么是 AI Agent?AI Agent 是一种以目标驱动的智能系统,不只是根据输入生成文本,而是能够围绕任务目标进行理解、规划、调用工具、获取外部信息、根据反馈调整行为并完成任务。它的核心组成一般包括大模型、记忆、规划、工具系统和执行控制。和普通聊天模型相比,普通模型更偏向一问一答,Agent 更强调任务闭环。比如查询订单、生成报表、分析异常、调用接口、触发流程,这些都更接近 Agent 的典型工作方式。4. Agent 和普通 RAG 的区别是什么?RAG 的核心是检索增强生成,重点解决模型知识不足、知识过时和领域知识缺失的问题。流程一般是先检索,再把检...
AI-Agent面试实战...
点赞
评论
收藏
分享
03-12 15:40
门头沟学院 运营
刚加上这个hr,结果是个广子,发完第一句话就被封号了微信
点赞
评论
收藏
分享
03-11 18:30
福建师范大学 Java
27届java简历求拷打
找日常或暑期实习 投了好多基本已读不回,是项目太拉了嘛还是什么问题😭😭
点赞
评论
收藏
分享
03-24 09:30
吉林农业大学 算法工程师
大模型常考面试题100道(第1~25道)
这份题不是随便凑出来的 100 道,而是从大量面经和题目里 筛出来的高频题。我整理了上百套校招、实习、校招的大模型相关面试题,又结合公开平台上反复出现的问题,把那些 出现次数最多、覆盖岗位最广、面试最容易问到 的内容统一收拢,最后形成这套 大模型常考面试题100道1. Transformer 的整体结构是什么?答:Transformer 最早是 Encoder-Decoder 结构。Encoder 每层主要是多头自注意力和前馈网络,Decoder 每层除了 masked self-attention 和前馈网络,还多了一个 cross-attention,用来关注 Encoder 的输出。不过...
AI-Agent面试实战...
点赞
评论
收藏
分享
评论
点赞成功,聊一聊 >
点赞
收藏
分享
评论
提到的真题
返回内容
全站热榜
更多
1
...
双非选手的求职的感悟
4637
2
...
美团暑期实习一面
4545
3
...
快手暑期实习3.25发offer啦
3860
4
...
阿里笔试竟然考了AI提示词。。。
3570
5
...
面试官视角聊聊:如何避免成为“AI工具人”
3527
6
...
网申助手用了三周,说说真实感受(不是广告)
3446
7
...
双非两段大厂实习0offer,我做对了什么
2494
8
...
暑期结束,拥抱腾讯了
2411
9
...
携程3.25Java开发二面面经
2269
10
...
OpenAI关停Sora,这就不玩了?
2044
创作者周榜
更多
正在热议
更多
#
AI面会问哪些问题?
#
21152次浏览
433人参与
#
投递几十家公司,到现在0offer,大家都一样吗
#
338541次浏览
2151人参与
#
厦门银行科技岗值不值得投
#
6883次浏览
166人参与
#
你的实习产出是真实的还是包装的?
#
17140次浏览
316人参与
#
通信硬件2023笔面经
#
50425次浏览
304人参与
#
一张图晒出你司的标语
#
3270次浏览
62人参与
#
米连集团26产品管培生项目
#
12605次浏览
284人参与
#
蔚来求职进展汇总
#
117073次浏览
794人参与
#
找AI工作可以去哪些公司?
#
6032次浏览
146人参与
#
从事AI岗需要掌握哪些技术栈?
#
6171次浏览
192人参与
#
你做过最难的笔试是哪家公司
#
24924次浏览
149人参与
#
春招至今,你的战绩如何?
#
54464次浏览
492人参与
#
沪漂/北漂你觉得哪个更苦?
#
8289次浏览
176人参与
#
聊聊这家公司值得去吗
#
914758次浏览
4736人参与
#
AI时代,哪个岗位还有“活路”
#
9611次浏览
297人参与
#
长得好看会提高面试通过率吗?
#
20273次浏览
236人参与
#
阿里笔试
#
172757次浏览
1267人参与
#
HR最不可信的一句话是__
#
4966次浏览
98人参与
#
春招你拿到offer了吗
#
827426次浏览
9972人参与
#
学历对求职的影响
#
661140次浏览
4232人参与
#
应届生初入职场,求建议
#
318303次浏览
2895人参与
#
实习的你做了哪些离谱的工作
#
38755次浏览
253人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务