MeiG Intelligent Network Dashboard

大语言模型

SNM980 × Llama2-7b

QNN · — · 测试环境：qnn_android · NPU_W4A16

Llama2-7b @ SNM980 QNN/HTP 18.49 tok/s

初始化

1.44 ms

推理指标

18.49 tok/s

内存占用

4.49 GB

CPU max

34 %

CPU avg

28 %

GPU max

—

NPU

99 %

结论

查看模型详情查看平台详情

关联信息

模型: Llama2-7b
芯片平台: SNM980
芯片: SM8750P (Snapdragon 8 Elite)
推理框架: QNN
量化精度: —
测试日期: 2026-08-28