最近读了腾讯写的文章，简单自己做了下总结和理解，又有了新的输入，不愧是腾讯👍 一、学到的核心知识 1. 大模型推理的两大基石  Continuous Batching（连续批处理）：传统批处理要求一个 batch 内所有请求"同时开始、同时结束"，但 LLM 输出长度不可预测，会浪费 GPU。vLLM 把调度粒度从 request level 下沉到 token level——每一步看哪些请求"差几个 token"，就调度几个 token，把短请求填进 batch 的空隙里。 Paged Attention：传统做法一次为请求申请全部显存，碎片严重；P...

学院本进不了开发岗吗

华为这一块还是权威👍

在这里奉劝大家一句，一个人如何，是看他在你低谷时是怎么对你的，而不要看他在你辉煌时是怎么对你的。 曾经我讲过我的故事，但有人说我是编的，我当然理解，毕竟人生而不同，有人家庭美满，有人家道中落，有人原生家庭，当然还有人没有父母。共情能力不是谁都有的，而且我奉劝大家，不要跟没有共情能力的人交朋友，他们只在乎自己。 每当看见一些帖子，一些短视频，在说自己的父母有多好，有多关心自己的时候，我都会很心酸，我多么希望我也可以有这样的温情，我多么希望那个人可以是我。 我甚至不能说，不能提，因为家丑不可外扬，因为说自己父母就如同说自己家庭不行一样，舆论、孝道、传统、脸面，难道这些东西就是为了让我打碎牙往肚子里...