美格智能 MeiG
大语言模型

SRM965 × Qwen2.5-7b

QNN · · 测试环境:qnn_android · NPU_W4A16

Qwen2.5-7b @ SRM965 QNN/HTP 12.11 tok/s

初始化
14.50 ms
推理指标
12.11 tok/s
内存占用
6.45 GB
CPU max
45.00 %
CPU avg
40.75 %
GPU max
NPU
98.61 %

结论

关联信息

模型
Qwen2.5-7b
芯片平台
SRM965
芯片
QCM8538
推理框架
QNN
量化精度
测试日期
2026-08-28