2023秋招-好未来-数据开发工程师-二面

公司：好未来

岗位：数据开发工程师

形式：视频面试

视频面试平台：牛客

时长：49分钟

流程：

1、自我介绍。

2、挑一个你比较熟悉的项目详细介绍一下。你主要是做ETL相关的工作吗？预测用的什么算法？LightGBM和XGBoost的使用场景

有什么不一样？

3、做ETL的时候遇到过数据倾斜吗？小文件呢？

4、做ETL主要是用SQL还是Spark还是其他的？

5、SQL题：已知成绩表和学生表，查询各科成绩前三名的记录。写完讲述思路。如果成绩表很大，学生表比较小，怎么去优化SQL性能？排序相关的窗口函数除了rank还有什么？

6、Hive SQL优化性能的原则是什么？你一般是从哪方面入手？

7、count distinct有办