MeiG Intelligent Network Dashboard

大语言模型

SRM965 × Llama2-7b

QNN · — · 测试环境：autoqnn_android · NPU_W4A16

Llama2-7b @ SRM965 QNN/HTP 12.03 tok/s

初始化

8.26 ms

推理指标

12.03 tok/s

内存占用

4.47 GB

CPU max

32.5 %

CPU avg

24.50 %

GPU max

—

NPU

92.47 %

结论

查看模型详情查看平台详情

关联信息

模型: Llama2-7b
芯片平台: SRM965
芯片: QCM8538
推理框架: QNN
量化精度: —
测试日期: 2026-08-28