美格智能 MeiG
大语言模型

SNM982 × Qwen2.5-3b

QNN · · 测试环境:qnn_linux · NPU_W4A16

Qwen2.5-3b @ SNM982 QNN/HTP 30.43 tok/s

初始化
1.51 ms
推理指标
30.43 tok/s
内存占用
3.27 GB
CPU max
5.01 %
CPU avg
4.54 %
GPU max
NPU
98.14%

结论

关联信息

模型
Qwen2.5-3b
芯片平台
SNM982
芯片
QCS8625
推理框架
QNN
量化精度
测试日期
2026-08-28