KNOWLEDGE & PRACTICE

文章

从部署教程、模型评测到行业观察,把复杂问题整理成可执行的路径。

1
篇文章
4
内容板块

FEATURED · 精选文章

部署教程

12GB 显卡跑 125B 大模型:真实速度 9-40 tok/s,hugepages 和 PCIe 校准两个坑一次讲完

Strata 把 125B 的门槛定在 12GB 起步:3500 Ada 12GB 实测 decode 9-10 tok/s 是'能用级',但加内存、跑 calibrate、配 hugepages 三步做完速度明显提升。两个坑:nr_hugepages 给小了系统静默退化成 4K 页不报错,PCIe 启动探测读数漂移 3 倍必须手动校准。附 12GB 完整配置和选型建议。

阅读全文

LATEST ARTICLES · 其余文章