秋招简历大佬看看 怎么修改
先自报家门:暑期在数据部门实习,参与了基于大模型的 Spark 任务诊断系统开发(慢任务 + 报错任务分析方向),目前第一版已上线,正在推进迭代。因为是部门新立项的方向,从 0 到 1 踩了不少坑,现在准备秋招,简历写了部分产出,但总觉得不够突出,想请各位大佬帮忙看看怎么优化,也想和做过类似诊断系统的前辈交流下经验~
最大的卡点是Spark 日志数据量太大(单任务日志动辄几十 MB 到 GB 级),直接喂给大模型会导致 token 爆炸、响应超时,而且冗余信息太多反而影响诊断准确率。所以第一版只能聚焦高频问题(如数据倾斜、SQL 笛卡尔积),通过筛选关键日志片段来实现分析。
做过大数据任务诊断系统(尤其是结合大模型)的大佬,能不能分享下经验?
RAG 知识库的搭建?
第一次做从 0 到 1 的项目,感觉还有很多没吃透的地方,秋招想往大模型应用方向走,真心求指点!欢迎评论区交流,也可以私戳我细聊~
#秋招投递攻略##简历##实习##秋招投递攻略#
最大的卡点是Spark 日志数据量太大(单任务日志动辄几十 MB 到 GB 级),直接喂给大模型会导致 token 爆炸、响应超时,而且冗余信息太多反而影响诊断准确率。所以第一版只能聚焦高频问题(如数据倾斜、SQL 笛卡尔积),通过筛选关键日志片段来实现分析。
做过大数据任务诊断系统(尤其是结合大模型)的大佬,能不能分享下经验?
RAG 知识库的搭建?
第一次做从 0 到 1 的项目,感觉还有很多没吃透的地方,秋招想往大模型应用方向走,真心求指点!欢迎评论区交流,也可以私戳我细聊~
#秋招投递攻略##简历##实习##秋招投递攻略#
全部评论
相关推荐
08-07 22:37
门头沟学院 Java 点赞 评论 收藏
分享
点赞 评论 收藏
分享