MeiG Intelligent Network Dashboard

大语言模型

SNM970 × Llama2-7b

QNN · — · 测试环境：qnn_android · NPU_W4A16

Llama2-7b @ SNM970 QNN/HTP 11.00 tok/s

初始化

1.83 ms

推理指标

11.00 tok/s

内存占用

4.6GB

CPU max

34 %

CPU avg

30 %

GPU max

—

NPU

99 %

结论

查看模型详情查看平台详情

关联信息

模型: Llama2-7b
芯片平台: SNM970
芯片: QCS8550 / QCM8550 (Snapdragon 8 Gen 2)
推理框架: QNN
量化精度: —
测试日期: 2026-08-28