大佬们好，我问个八股呗，求解答。

嗯就是那种很大文件的那种的，然后就比如一个大文件然后取中位数啥的，然后还有两个大文件取交集，或者文件去重等等搞得我好懵😂，太菜了哈哈，希望大家能够帮助一下，让我对这些八股能够有很好的应对方法。
全部评论
昨天面百度，问了200亿个url，10个kv数据库，怎么检索？
1 回复 分享
发布于 2023-08-04 22:00 浙江
大文件一般是内存不够，所以需要考虑分而治之，处理一部分或者将流式处理再将结果进行按序的放在磁盘文件中。第一个大文件取中位数，问题在于进行计数，可以先一部分一部分的读，然后计数，然后再从头计数，取对应的中位数，文件去重，可以考虑对文件做hash，然后保存在一个map里，文件不同，hash不同这样来去重
1 回复 分享
发布于 2023-08-04 00:27 四川
可以用mmap映射读取部分数据吗
点赞 回复 分享
发布于 2023-08-05 00:29 浙江
我昨天面试被问到 但是面试官就问我 怎么把大文件拆分成小文件在读入呢
点赞 回复 分享
发布于 2023-08-04 17:32 天津
俺会了。分而治之。先分，在对每小块进行处理，再合并。基本思路是这些。嗯多搜搜，然后问问chatGPT再就可以了，哈哈。
点赞 回复 分享
发布于 2023-08-04 15:14 河南

相关推荐

07-18 17:32
门头沟学院 Java
点赞 评论 收藏
分享
07-23 14:25
湖南大学
面试真的是在拼运气吗？
这个问题，我想你一定也问过自己 在经历几轮秋招面试后，我曾一度陷入怀疑：  我明明准备了，也答得不差，为什么没过？ 同学裸面字节却过了，我全流程准备却挂？ 面试太玄学了，是不是真的拼运气？  我后来沉下心来复盘，整理完这份面试题以及面经清单后，才真正看清了所谓“运气”背后的真相，目前不到一周已经快有250 stars了。  面试 ≠ 纯靠运气，但一定是“有准备的人更容易抓住机会” 我们不妨把面试分解下，会发现这样一张图：    面试要素 是否可控？ 说明     面试官风格 ❌ 不可控 A 面佛系、B 面压人型   题目是否准备过 ❌ 部分可控 面试官自定题库，你无法预测   回答质量  可控...
面试问题记录
点赞 评论 收藏
分享
06-26 22:13
华北理工大学 人力资源专员/助理
什么样的简历收到 offer 无数？
人一到了大三下.....想找个实习就这么难吗？
人力小鱼姐：实习经历没有什么含金量，咖啡店员迎宾这种就别写了，其他两段包装一下 想找人力相关的话，总结一下个人优势，结合校园经历里有相关性的部分，加一段自我评价
点赞 评论 收藏
分享
06-23 10:26
佳木斯大学 Java
点赞 评论 收藏
分享
不愿透露姓名的神秘牛友
07-21 17:59
点赞 评论 收藏
分享
评论
点赞
25
分享

全站热榜

更多

创作者周榜

更多
正在热议
更多
# 哪些公司开提前批了？ #
18097次浏览 206人参与
# 你投递的公司有几家约面了？ #
108158次浏览 770人参与
# 校招阶段，学历VS技术哪个更重要？ #
14224次浏览 165人参与
# 实习如何「偷」产出？ #
39752次浏览 908人参与
# Offer比较，你最看重什么？ #
191034次浏览 1299人参与
# 除了主业以外，你还有哪些其他收入？ #
9215次浏览 162人参与
# 正在实习的碎碎念 #
1453327次浏览 13466人参与
# 不卡学历的大厂有哪些？ #
21940次浏览 164人参与
# 你的秋招第一面感觉怎么样 #
74579次浏览 574人参与
# 风评不好的公司，你会去吗？ #
49060次浏览 363人参与
# 职场新人体验 #
19297次浏览 181人参与
# 实习打杂，要跑路吗 #
15938次浏览 191人参与
# 腾讯音乐求职进展汇总 #
97631次浏览 566人参与
# 校园里的破防时刻 #
8955次浏览 104人参与
# 社恐入职新公司如何融入团队 #
11429次浏览 62人参与
# 实习时，大家都怎么称呼自己的mentor？ #
43518次浏览 273人参与
# 面试中，你被问过哪些奇葩问题？ #
70484次浏览 802人参与
# 摸鱼被leader发现了怎么办 #
61064次浏览 371人参与
# 软开人，秋招你打算投哪些公司呢 #
107932次浏览 978人参与
# 金融财经春招备战日记 #
23089次浏览 135人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务