正在加载陈远的个人网站

教程

Baseten 优化 Qwen3-ASR 1.7B 批量转写,吞吐达原版 vLLM 的 7 倍

Baseten 工程博客(网页)

导读

Baseten 优化了 Qwen3-ASR 1.7B 的批量转写部署,在 64 并发下吞吐比原生 vLLM 高 7 倍以上,成本降至每音频小时约 $0.0013,比闭源提供商低约 277 倍。