9.17-迅雷-笔试

📍 公司：虾皮（Shopee）💼 岗位：大数据开发工程师📅 面试时间线：7.30 一面8.4 二面8.8 收到感谢信（未通过）面试问题记录请介绍你实习中负责的数仓数据流向及核心业务场景。详细说明一个具体业务模块，包括所用技术栈与上下游用户。针对问题2中的业务，如何处理并发场景下的“不可重复读”问题？大数据技术栈掌握情况？重点提问 Spark 的使用经验。如何优化实际 Spark 任务？请举例（如数据倾斜、Shuffle 优化）。描述快速排序算法的基本思想（穿插在数据倾斜优化中考察基础）。是否遇到过数据写错的情况？若数仓数据写入 Kafka 错误，如何修复？➤ 进一步追问：HDFS 数据已错，但 Kafka → 业务表已生效，如何保证一致性与服务可用性？若需从某个 Kafka Topic 消费数据并入库数仓，你会如何设计流程？（开放性问题）🙌 面试感悟虽为实习经历深挖，但问题贴近真实生产场景，尤其关注高可用、数据一致性、容错与恢复机制；对数据链路的闭环理解要求较高，需清楚“从出错到修复”的全链路影响；建议提前准备：✅ 典型数据倾斜解决方案（如加盐、两阶段聚合）✅ Kafka 重放与幂等写入策略✅ 数仓分层中各层容灾与回溯能力设计📌 C端业务对数据质量与系统稳定性要求高，面试更倾向考察“出问题后怎么办”的应急思维。

✨入职感受 ①公司环境很好 我在讯飞小镇办公，园区外部环境、就餐环境、办公环境都不很不错，园区内还有卡旺卡、瑞幸、罗森、药房、轻食店等，购物方便 ②福利待遇也不错 工资2多，每个月有200餐补，可以申请免费宿舍，打车可以用内部ai拼（乘客免费，司机有补贴） ③饭不太好吃 中午吃的排骨麻辣香锅，味道有点一般，排骨有点腥，炸猪皮个人感觉有点腻，吃了一点实在吃不下了 ④工作氛围比较轻松 带我的两个姐姐都很好，说话很温柔，其中一个只比我大一点点，相处起来很轻松，主动带我吃饭、跟我介绍园区，还请我喝了东西 ⑤通勤有点麻烦 学校离讯飞小镇太远了，班车在学校南门，我宿舍在西门，坐班车不方便。而且班车7点多出...

拼尽全力无法战胜。。

十一点开始面试，先甩了我一个word来做笔试题，写了快一个小时才开始面试。都是Ai整理的，可能有错误。为什么要写高性能网关？问：你为什么会去写高性能的网关系统？这是你自己的项目吗？答：想把学到的技术落到一个“完整且有意义”的产品化开源项目上。观察到 Nginx 性能强但链路和配置较复杂，于是用 Go 在高并发场景做一个可复用的高性能网关。属于自研，参考了常见架构模式后自己实现。 JWT / OAuth 相关问：你用的 JWT 是哪个版本？（面试官口误/写法混乱，实际意图：所用 JWT 库版本）答：具体库版本记不清。系统里实现的是无状态鉴权（候选人口中混用了“JWT / OAuth 2.0”的说...