视觉语言模型推理引擎工程实战：从 vLLM 到 SGLang 的架构演进
深入解析视觉语言模型(VLM)推理引擎的核心工程挑战与解决方案，涵盖视觉编码器优化、KV Cache异构管理、两阶段调度策略、CUDA Graph兼容性以及生产部署中的显存建模与长视频Token预算管理。
推理引擎
Rust 实现深度学习推理引擎：从计算图到异构硬件加速
从零构建Rust深度学习推理引擎：张量抽象、计算图拓扑排序、算子融合优化、内存Arena规划、CUDA/Metal多后端调度，以及Flash Attention与PagedAttention的工程实践。
TensorRT-LLM 深度工程实践：从模型到生产级推理服务
深度剖析 TensorRT-LLM 架构设计哲学、编译-运行时协作模式、跨算子融合、请求调度、KV Cache 管理与并行策略优化，含与 vLLM 对比及生产级部署实践。
