走数分还是大数据开发

目前两段数分经历，但都挂靠在业务部门sql,python熟练，学过java（只是学过的水平）背景商科建议数分深入下去，还是探索探索数开呢😢

来自同事的数开面经，速速发出来供大家参考自我介绍了解实习经历针对实习项目，问数据层次怎么分层数据分层的作用针对具体实习项目，说明业务逻辑说明实习项目的“订单量”这个指标从源头到产出的ETL过程针对实习项目，复盘后最大的难点是什么复盘之后有什么收获你刚才说复盘收获是处理小文件，那么spark怎么处理小文件的？处理小文件有哪些方法，举例子hive冷热分离的方法你刚才提到了组里有做ec存储，你了解ec存储吗暑期实习有什么感受，转正了吗 15分钟了解spark的semi join吗，他是干嘛的了解spark的AQE，这是什么你刚才讲AQE提到了广播机制，这个在spark中很重要，讲讲广播过程呢了解网络...

1、项目自我介绍2、hive的读写流程，底层用的是啥，Hadoop生态分几个部分3、你用过几个数据库，详细讲述项目中遇到的问题4、用过spark没？他跟hive有什么区别，出现数据倾斜你是怎么解决的6、有没有接触机器学习，聚类算法的原理是怎么样的7、数据同步后你是怎么校验数据的，有没有了解过spark3.0出现什么新的原理基本都答上来了，也过了，后面说岗位缩减，放鸽子了。还有就是底层原理还是差了点

工作体验： 由于是平台性质的研发，日常的工作感觉并没有非常的卷。大家基本10点前到岗，11点半就组团吃午饭去了，下午14点开始工作，17点半晚饭，晚上20点后陆续开始下班，当然下班时间因人因时而有差异。21点半可以打车后基本人都走光了。 但是也因为是平台性质，所以不可避免有客服&&运维压力，客服来源于内部RD，一般是平台使用问题，运维是7*24小时保障系统正常运行（当然会有轮班）。 组内氛围： 不得不说组内氛围还是非常不错的，老板很赞，不会很Push进度，大家遇到问题也是互帮互助，这也是我能待这么久很大的原因之一。 福利： 美团素有“开水团”的称号，日常唯一的福利就是白开水免费...