上手指南
1 篇文章
- 上手篇:把 V4.1-Flash 跑起来从零到发出第一个请求的完整清单:镜像只能选 nightly、环境变量照抄哪几行、启动参数逐条拆解、验证为什么必须发两条请求(正确答案 323)、thinking 默认开着会把小 max_tokens 的请求变成空回复、四个性能旋钮、内核生态速查(FlashInfer/CuTeDSL/DeepGEMM/AITER/MFMA/gfx942/gfx950/CUDA graph/torch.compile)、硬件选型与 KV cache offloading。