两个月打磨：前端AI项目利器- RAG知识库助手（搜索推荐机制版）

最近读了腾讯写的文章，简单自己做了下总结和理解，又有了新的输入，不愧是腾讯👍 一、学到的核心知识 1. 大模型推理的两大基石  Continuous Batching（连续批处理）：传统批处理要求一个 batch 内所有请求"同时开始、同时结束"，但 LLM 输出长度不可预测，会浪费 GPU。vLLM 把调度粒度从 request level 下沉到 token level——每一步看哪些请求"差几个 token"，就调度几个 token，把短请求填进 batch 的空隙里。 Paged Attention：传统做法一次为请求申请全部显存，碎片严重；P...

1、这群人晚上 11 点发朋友圈："凌晨 11 点，三环的灯还亮着。" 实际下班时间：19:30。2、什么是嘉豪呀？我最近在字节实习，没什么时间上网3、同龄人：学校社团、酒吧蹦迪；我：acm、字节/腾讯实习4、别人朋友圈发：“今天不想上课”；我朋友圈发：“今天的班就上到这里啦”，定位：字节跳动5、别人的朋友圈都是到处旅游的定位，我的朋友圈天天都是“字节定位”，还一定要是在【公司的健身房】里拍张照片，实际只练了10分钟，其中凹造型5分钟6、mentor布置任务的时候，别人都是：”好的收到“，我：”是不是要xxxx，xxxx这么做也可以吧，这个技术方案会不会更好些“7、别人书包里装的：王道408、轻薄本、四六级真题。我书包里面装的：显存24GB4090独显gpu（24小时开机运行，屏幕上贴着“字节/腾讯等贴纸”）、速效救心丸（代码报错用）、电棍（熬夜写代码困了用），就很……你们懂吧8、入职大厂第一件事：发朋友圈、发小红书，晒工牌，985计算机硕｜字节实习生｜可以接咨询｜有偿改简历，9、别人的社交软件简介：25岁｜男｜希望遇见有趣的灵魂；嘉豪的社交软件简介：25岁｜程序员｜字节跳动工程师｜一张佩戴工牌的自拍照大厂嘉豪标配：1. 挂胸前的工牌（地铁里只挂不收，怕你看不见 logo）2. 降噪耳机（不放音乐也戴着，避免别人跟自己说话）3. 印 logo 的电脑包（字节红 / 腾讯蓝 / 阿里橙 / 美团黄）4. 手表（最好显示心率，午饭后必发"步数已破 6,000"）

大学上的好迷茫 怎么找实习啊  

一些自己在网上搜刮的面经题目路过的牛爷爷可以试着答一答，附上自己的答案，如果有更好的答案也可以拷打我，如果有别的比较好的题目也可以评论里发一发。 Agent是什么？一个 Agent 系统一般由哪些模块组成？ Agent是具备规划、记忆、工具调用、自我执行能力的系统 Tool 是什么？什么样的功能应该做成 Tool？ tool是提供给Agent的函数，大语言模型不能独立完成的任务以及需要实时性的能力应该做成Tool Memory 分几种？Short-term / Long-term memory 怎么实现？ 最基本的记忆分为短期记忆记忆长期记忆，在此基础上又扩展出了指令记忆以及工作记忆  指令记...