AIAI infra · 推理侧
工作版 · 推理侧 · 2026

从一次请求
到一台服务

模型没变,变的是工作负载。先把算力、显存容量、显存带宽这三笔账算清楚,再谈引擎和参数。

工作负载→瓶颈→机制→取舍→度量
开始读第 1 章 → 已写 11 / 11 章 · 约 28 分钟一章
100% 完成

目录

按顺序读;每章先做“先备检查”,再读正文,最后闭卷做题。

怎么读

三件事,决定这本书对你有没有用。

先算账,再换框架

看到慢,先分清首字慢、出字慢还是 OOM;算力、带宽、容量三堵墙,定位错了,换引擎只是搬家。

每章都先闭卷

先做章首检查,再读正文;读完做练习,答案在题下,但先别展开。错题要归因,不要只看分数。

用项目验证

每章至少一个能跑/能改的小实验;先写预测,再测。书里的数字都是手算,实测才算你的。