AI Infra 学这些可以吗?

想做 AI Infra / LLM 推理系统 方向。 身边没有同方向的朋友能问,自己摸着石头过河整理了一份学习路线,越整理越虚——感觉知识点又多又散 alt alt alt alt alt alt alt

我自己总结的核心路线就一句话:

先理解模型前向 → 再理解单请求生成 → 最后再看多请求 / 多卡 / 多实例下的系统优化

把 Decoder 模型和最小推理框架先跑通,再去看工业级系统,应该很多设计会自然浮出来——这个思路对吗?

想和大家多多交流!

#如何成为1个AI工程师?#
全部评论
也在自学AI Infra方向,跟佬蹲一波路线
1 回复 分享
发布于 05-14 19:01 上海
学AI Infra C++要到啥程度啊
点赞 回复 分享
发布于 05-14 19:04 北京
先跑通最小推理demo再看vllm,思路没问题
点赞 回复 分享
发布于 05-14 18:57 陕西
decoder最小推理跟的哪本资料
点赞 回复 分享
发布于 05-14 11:06 陕西
整理完更虚是真的
点赞 回复 分享
发布于 05-14 11:00 陕西
同想做infra,蹲大佬指路
点赞 回复 分享
发布于 05-14 10:51 北京

相关推荐

评论
8
7
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务