美格智能 MeiG
大语言模型

SNM983 × Deepseek-llm-7b

QNN · · 测试环境:qnn_linux · NPU_W4A16

Deepseek-llm-7b @ SNM983 QNN/HTP 12.15 tok/s

初始化
11.13 ms
推理指标
12.15 tok/s
内存占用
5.89 GB
CPU max
33.60 %
CPU avg
17.29 %
GPU max
NPU
98.79 %

结论

关联信息

模型
Deepseek-llm-7b
芯片平台
SNM983
芯片
QCS9075 / QCS9100 (SA8775P)
推理框架
QNN
量化精度
测试日期
2026-08-28