许愿

最近读了腾讯写的文章，简单自己做了下总结和理解，又有了新的输入，不愧是腾讯👍 一、学到的核心知识 1. 大模型推理的两大基石  Continuous Batching（连续批处理）：传统批处理要求一个 batch 内所有请求"同时开始、同时结束"，但 LLM 输出长度不可预测，会浪费 GPU。vLLM 把调度粒度从 request level 下沉到 token level——每一步看哪些请求"差几个 token"，就调度几个 token，把短请求填进 batch 的空隙里。 Paged Attention：传统做法一次为请求申请全部显存，碎片严重；P...

作为有租房经验的老手，要租房首先打开租房软件，看想租的地段，交通怎么样，平均租金是多少，比如近郊合租1800-2800元，地铁独卫2500-3500元，核心二居3500-4500元。任何低于市场价30%的房源，可能是虚假引流。找中介，记住三砍。 第一砍房租中介手里的托管房都有议价空间，找毛病、谈长租、打感情牌，通常能再降10%。第二砍中介费——标准是百分之80，签约前必须看房产证原件+房东身份证，转租房必须有原房东书面同意书，否则钱房两空（第三点看我的的评论，有点阴）。找物业，才是真正的省钱杀招。 很多房东懒得自己挂房，直接委托小区物业出租，具体操作：锁定目标小区后，直接去物业前台问&quot...