MeiG Intelligent Network Dashboard

大语言模型

SNM983 × Llama2-7b

QNN · — · 测试环境：qnn_ubuntu · NPU_W4A16

Llama2-7b @ SNM983 QNN/HTP 12.61 tok/s

初始化

4.90 ms

推理指标

12.61 tok/s

内存占用

5.05 GB

CPU max

36.36 %

CPU avg

35.22 %

GPU max

—

NPU

—

结论

查看模型详情查看平台详情

关联信息

模型: Llama2-7b
芯片平台: SNM983
芯片: QCS9075 / QCS9100 (SA8775P)
推理框架: QNN
量化精度: —
测试日期: 2026-08-28