模型排行榜硬件市场评测训练租用ProAPI文档
语言
Lucebox Hub campaign banner

模型

95 个模型组 · 共 337 个

Qwen3.6-27B

Qwen / Qwen3.6-27B

28B
Qwenimage-text-to-text共 283 个基准测试
transformerssafetensorsqwen3_5image-text-to-text
最佳255 tok/s
中位数42.7 tok/s
最低1.6 tok/s
查看基准测试 →

Qwen3.6-35B-A3B

Qwen / Qwen3.6-35B-A3B

36B
Qwenimage-text-to-text共 164 个基准测试
transformerssafetensorsqwen3_5_moeimage-text-to-text
最佳260 tok/s
中位数75.2 tok/s
最低6.4 tok/s
查看基准测试 →

MiniMax-M2.7

MiniMaxAI / MiniMax-M2.7

229B
Minimaxtext-generation共 117 个基准测试
transformerssafetensorsminimax_m2text-generation
最佳496 tok/s
中位数32.2 tok/s
最低0.5 tok/s
查看基准测试 →

Qwen3.5-27B

Qwen / Qwen3.5-27B

28B
Qwenimage-text-to-text共 60 个基准测试
transformerssafetensorsqwen3_5image-text-to-text
最佳287 tok/s
中位数30.9 tok/s
最低2.2 tok/s
查看基准测试 →

Qwen3.5-9B-Base

Qwen / Qwen3.5-9B-Base

10B
Qwenimage-text-to-text共 53 个基准测试
transformerssafetensorsqwen3_5image-text-to-text
查看基准测试 →

gemma-4-E4B

google / gemma-4-E4B

8B
Gemmaany-to-any共 34 个基准测试
transformerssafetensorsgemma4image-text-to-text
查看基准测试 →

Ornstein3.6-27B-MTP-NSC-ACE-SABER

GestaltLabs / Ornstein3.6-27B-MTP-NSC-ACE-SABER

27B
Qwenimage-text-to-text共 33 个基准测试
transformerssafetensorsqwen3_5image-text-to-text
查看基准测试 →

Qwen3.5-35B-A3B-Base

Qwen / Qwen3.5-35B-A3B-Base

36B
Qwenimage-text-to-text共 31 个基准测试
transformerssafetensorsqwen3_5_moeimage-text-to-text
查看基准测试 →

gemma-4-26B-A4B

google / gemma-4-26B-A4B

27B
Gemmaimage-text-to-text共 28 个基准测试
transformerssafetensorsgemma4image-text-to-text
查看基准测试 →

gemma-4-31B

google / gemma-4-31B

33B
Gemmaimage-text-to-text共 25 个基准测试
transformerssafetensorsgemma4image-text-to-text
查看基准测试 →

Qwen2.5-14B

Qwen / Qwen2.5-14B

15B
Qwentext-generation共 22 个基准测试
safetensorsqwen2text-generationconversational
查看基准测试 →

Qwen3.5-122B-A10B

Qwen / Qwen3.5-122B-A10B

125B
Qwenimage-text-to-text共 22 个基准测试
transformerssafetensorsqwen3_5_moeimage-text-to-text
最佳27.3 tok/s
中位数26.1 tok/s
最低3.2 tok/s
查看基准测试 →

Qwen3-Coder-30B-A3B-Instruct

Qwen / Qwen3-Coder-30B-A3B-Instruct

31B
Qwentext-generation共 22 个基准测试
transformerssafetensorsqwen3_moetext-generation
最佳101 tok/s
中位数84.3 tok/s
最低79.8 tok/s
查看基准测试 →

LFM2.5-8B-A1B-Base

LiquidAI / LFM2.5-8B-A1B-Base

8B
text-generation共 20 个基准测试
transformerssafetensorslfm2_moetext-generation
查看基准测试 →

Qwen3.5-4B-Base

Qwen / Qwen3.5-4B-Base

5B
Qwenimage-text-to-text共 16 个基准测试
transformerssafetensorsqwen3_5image-text-to-text
查看基准测试 →

Qwen3-Coder-Next

Qwen / Qwen3-Coder-Next

80B
Qwentext-generation共 16 个基准测试
transformerssafetensorsqwen3_nexttext-generation
最佳80.8 tok/s
中位数55.8 tok/s
最低51.2 tok/s
查看基准测试 →

Llama-3.1-8B

meta-llama / Llama-3.1-8B

8B
Llamatext-generation共 15 个基准测试
transformerssafetensorsllamatext-generation
查看基准测试 →

gemma-4-12B

google / gemma-4-12B

12B
Gemmaany-to-any共 14 个基准测试
transformerssafetensorsgemma4_unifiedimage-text-to-text
最佳25.8 tok/s
中位数25.8 tok/s
最低25.8 tok/s
查看基准测试 →

Nemotron-3-Nano-Omni-30B-A3B-Reasoning-BF16

nvidia / Nemotron-3-Nano-Omni-30B-A3B-Reasoning-BF16

33B
any-to-any共 13 个基准测试
transformerssafetensorsNemotronH_Nano_Omni_Reasoning_V3image-feature-extraction
最佳107 tok/s
中位数90.6 tok/s
最低57.9 tok/s
查看基准测试 →

Qwen2.5-7B

Qwen / Qwen2.5-7B

8B
Qwentext-generation共 12 个基准测试
transformerssafetensorsqwen2text-generation
最佳1.4k tok/s
中位数1.4k tok/s
最低1.4k tok/s
查看基准测试 →

gpt-oss-20b

openai / gpt-oss-20b

22B
Gpttext-generation共 12 个基准测试
transformerssafetensorsgpt_osstext-generation
最佳991 tok/s
中位数87.1 tok/s
最低12.0 tok/s
查看基准测试 →

gemma-4-E2B

google / gemma-4-E2B

5B
Gemmaany-to-any共 11 个基准测试
transformerssafetensorsgemma4image-text-to-text
查看基准测试 →

gpt-oss-120b

openai / gpt-oss-120b

120B
Gpttext-generation共 11 个基准测试
transformerssafetensorsgpt_osstext-generation
最佳223 tok/s
中位数70.7 tok/s
最低62.7 tok/s
查看基准测试 →

gemma-3-12b-pt

google / gemma-3-12b-pt

12B
Gemmaimage-text-to-text共 10 个基准测试
transformerssafetensorsgemma3image-text-to-text
查看基准测试 →

Qwen3.6-27B-DFlash

z-lab / Qwen3.6-27B-DFlash

2B
Qwentext-generation共 10 个基准测试
transformerssafetensorsqwen3image-feature-extraction
最佳215 tok/s
中位数39.2 tok/s
最低26.9 tok/s
查看基准测试 →

Nex-N2-mini

nex-agi / Nex-N2-mini

35B
Qwentext-generation共 9 个基准测试
transformerssafetensorsqwen3_5_moeimage-text-to-text
最佳107 tok/s
中位数104 tok/s
最低40.5 tok/s
查看基准测试 →

DeepSeek-V4-Flash

deepseek-ai / DeepSeek-V4-Flash

158B
Deepseektext-generation共 9 个基准测试
transformerssafetensorsdeepseek_v4text-generation
最佳45.7 tok/s
中位数19.7 tok/s
最低18.6 tok/s
查看基准测试 →

GLM-4.7-Flash

zai-org / GLM-4.7-Flash

31B
text-generation共 9 个基准测试
transformerssafetensorsglm4_moe_litetext-generation
最佳212 tok/s
中位数176 tok/s
最低92.9 tok/s
查看基准测试 →

DeepSeek-R1-Distill-Qwen-7B

deepseek-ai / DeepSeek-R1-Distill-Qwen-7B

8B
Deepseek-R1text-generation共 8 个基准测试
transformerssafetensorsqwen2text-generation
最佳144 tok/s
中位数69.0 tok/s
最低38.1 tok/s
查看基准测试 →

Ling-2.6-flash

inclusionAI / Ling-2.6-flash

107B
text-generation共 8 个基准测试
safetensorsbailing_hybridtext-generationconversational
最佳94.9 tok/s
中位数86.2 tok/s
最低82.3 tok/s
查看基准测试 →

Qwen2.5-72B

Qwen / Qwen2.5-72B

73B
Qwentext-generation共 8 个基准测试
transformerssafetensorsqwen2text-generation
查看基准测试 →

Nemotron-Cascade-2-30B-A3B

nvidia / Nemotron-Cascade-2-30B-A3B

32B
text-generation共 8 个基准测试
transformerssafetensorsnemotron_htext-generation
最佳141 tok/s
中位数95.4 tok/s
最低89.8 tok/s
查看基准测试 →

Qwen3.5-0.8B-Base

Qwen / Qwen3.5-0.8B-Base

1B
Qwenimage-text-to-text共 7 个基准测试
transformerssafetensorsqwen3_5image-text-to-text
最佳2.7k tok/s
中位数2.7k tok/s
最低2.7k tok/s
查看基准测试 →

Mistral-Medium-3.5-128B

mistralai / Mistral-Medium-3.5-128B

128B
Mistral共 7 个基准测试
safetensorsmistral3vLLMen
最佳7.4 tok/s
中位数6.6 tok/s
最低6.2 tok/s
查看基准测试 →

Qwen3-30B-A3B-Base

Qwen / Qwen3-30B-A3B-Base

31B
Qwentext-generation共 7 个基准测试
transformerssafetensorsqwen3_moetext-generation
查看基准测试 →

DeepSeek-Coder-V2-Lite-Instruct

deepseek-ai / DeepSeek-Coder-V2-Lite-Instruct

MoE16B
Deepseek-Codertext-generation共 6 个基准测试
transformerssafetensorsdeepseek_v2text-generation
最佳150 tok/s
中位数87.0 tok/s
最低39.0 tok/s
查看基准测试 →

NVIDIA-Nemotron-3-Nano-30B-A3B-BF16

nvidia / NVIDIA-Nemotron-3-Nano-30B-A3B-BF16

32B
text-generation共 5 个基准测试
transformerssafetensorsnemotron_htext-generation
最佳313 tok/s
中位数286 tok/s
最低117 tok/s
查看基准测试 →

Qwen3-14B-Base

Qwen / Qwen3-14B-Base

15B
Qwentext-generation共 5 个基准测试
transformerssafetensorsqwen3text-generation
查看基准测试 →

Mistral-Small-3.1-24B-Base-2503

mistralai / Mistral-Small-3.1-24B-Base-2503

24B
Mistral共 5 个基准测试
vllmsafetensorsmistral3mistral-common
查看基准测试 →

gemma-3-1b-pt

google / gemma-3-1b-pt

1B
Gemmatext-generation共 5 个基准测试
transformerssafetensorsgemma3_texttext-generation
查看基准测试 →

Qwen3.5-2B-Base

Qwen / Qwen3.5-2B-Base

2B
Qwenimage-text-to-text共 5 个基准测试
transformerssafetensorsqwen3_5image-text-to-text
查看基准测试 →

Qwen2.5-1.5B

Qwen / Qwen2.5-1.5B

2B
Qwentext-generation共 5 个基准测试
transformerssafetensorsqwen2text-generation
查看基准测试 →

Qwen3-8B-Base

Qwen / Qwen3-8B-Base

8B
Qwentext-generation共 5 个基准测试
transformerssafetensorsqwen3text-generation
查看基准测试 →

NVIDIA-Nemotron-3-Super-120B-A12B-NVFP4

nvidia / NVIDIA-Nemotron-3-Super-120B-A12B-NVFP4

67B
Opttext-generation共 5 个基准测试
transformerssafetensorsnemotron_htext-generation
最佳262 tok/s
中位数175 tok/s
最低49.6 tok/s
查看基准测试 →

LFM2.5-1.2B-Base

LiquidAI / LFM2.5-1.2B-Base

1B
text-generation共 4 个基准测试
transformerssafetensorslfm2text-generation
查看基准测试 →

granite-4.0-h-micro

ibm-granite / granite-4.0-h-micro

3B
text-generation共 4 个基准测试
transformerssafetensorsgranitemoehybridtext-generation
最佳68.6 tok/s
中位数45.2 tok/s
最低45.0 tok/s
查看基准测试 →

LFM2-8B-A1B

LiquidAI / LFM2-8B-A1B

MoE1B 活跃 / 8B 总计
text-generation共 4 个基准测试
transformerssafetensorslfm2_moetext-generation
最佳18.3 tok/s
中位数18.3 tok/s
最低9.9 tok/s
查看基准测试 →

DeepSeek-R1-Distill-Qwen-14B

deepseek-ai / DeepSeek-R1-Distill-Qwen-14B

15B
Deepseek-R1text-generation共 4 个基准测试
transformerssafetensorsarxiv:2501.12948license:mit
最佳24.4 tok/s
中位数24.4 tok/s
最低24.4 tok/s
查看基准测试 →

gemma-3n-E4B

google / gemma-3n-E4B

8B
Gemmaimage-text-to-text共 4 个基准测试
transformerssafetensorsgemma3nimage-text-to-text
查看基准测试 →

MiniMax-M2

MiniMaxAI / MiniMax-M2

229B
Minimaxtext-generation共 4 个基准测试
transformerssafetensorsminimax_m2text-generation
最佳493 tok/s
中位数398 tok/s
最低303 tok/s
查看基准测试 →

GLM-5.1

zai-org / GLM-5.1

754B
text-generation共 4 个基准测试
transformerssafetensorsglm_moe_dsatext-generation
查看基准测试 →

granite-4.1-30b

ibm-granite / granite-4.1-30b

29B
text-generation共 4 个基准测试
transformerssafetensorsgranitetext-generation
最佳17.9 tok/s
中位数16.4 tok/s
最低15.6 tok/s
查看基准测试 →

Gemopus-4-26B-A4B-it

Jackrong / Gemopus-4-26B-A4B-it

27B
Gemmatext-generation共 4 个基准测试
safetensorsgemma4gemmainstruction-tuned
最佳64.3 tok/s
中位数55.0 tok/s
最低45.7 tok/s
查看基准测试 →

phi-4

microsoft / phi-4

15B
Phitext-generation共 3 个基准测试
transformerssafetensorsphi3text-generation
最佳77.0 tok/s
中位数36.0 tok/s
最低36.0 tok/s
查看基准测试 →

NVIDIA-Nemotron-3-Super-120B-A12B-BF16

nvidia / NVIDIA-Nemotron-3-Super-120B-A12B-BF16

124B
text-generation共 3 个基准测试
transformerssafetensorsnemotron_htext-generation
查看基准测试 →

Qwen3-32B

Qwen / Qwen3-32B

33B
Qwentext-generation共 3 个基准测试
transformerssafetensorsqwen3text-generation
最佳79.3 tok/s
中位数22.9 tok/s
最低22.8 tok/s
查看基准测试 →

MiniMax-M2.5

MiniMaxAI / MiniMax-M2.5

229B
Minimaxtext-generation共 3 个基准测试
transformerssafetensorsminimax_m2text-generation
最佳504 tok/s
中位数419 tok/s
最低334 tok/s
查看基准测试 →

Step-3.7-Flash

stepfun-ai / Step-3.7-Flash

MoE201B
image-text-to-text共 2 个基准测试
transformerssafetensorsstep3p7text-generation
查看基准测试 →

NVIDIA-Nemotron-Nano-12B-v2-Base

nvidia / NVIDIA-Nemotron-Nano-12B-v2-Base

12B
text-generation共 2 个基准测试
transformerssafetensorsnvidiapytorch
查看基准测试 →

Qwen3-4B-Base

Qwen / Qwen3-4B-Base

4B
Qwentext-generation共 2 个基准测试
transformerssafetensorsqwen3text-generation
查看基准测试 →

Kimi-K2.5

moonshotai / Kimi-K2.5

1.1T
image-text-to-text共 2 个基准测试
transformerssafetensorskimi_k25image-feature-extraction
最佳74.0 tok/s
中位数74.0 tok/s
最低74.0 tok/s
查看基准测试 →

Llama-3.2-3B-Instruct

meta-llama / Llama-3.2-3B-Instruct

3B
Llamatext-generation共 2 个基准测试
transformerssafetensorsllamatext-generation
最佳79.9 tok/s
中位数65.4 tok/s
最低50.9 tok/s
查看基准测试 →

MiniMax-M2.1

MiniMaxAI / MiniMax-M2.1

229B
Minimaxtext-generation共 2 个基准测试
transformerssafetensorsminimax_m2text-generation
最佳499 tok/s
中位数416 tok/s
最低333 tok/s
查看基准测试 →

Qwen3-VL-30B-A3B-Instruct

Qwen / Qwen3-VL-30B-A3B-Instruct

31B
Qwenimage-text-to-text共 2 个基准测试
transformerssafetensorsqwen3_vl_moeimage-text-to-text
最佳56.6 tok/s
中位数52.2 tok/s
最低47.7 tok/s
查看基准测试 →

Ministral-3-3B-Base-2512

mistralai / Ministral-3-3B-Base-2512

4B
Mistral共 2 个基准测试
vllmsafetensorsmistral3mistral-common
查看基准测试 →

Llama-3.1-70B

meta-llama / Llama-3.1-70B

71B
Llamatext-generation共 2 个基准测试
transformerssafetensorsllamatext-generation
查看基准测试 →

GLM-5.2

zai-org / GLM-5.2

753B
text-generation共 1 个基准测试
transformerssafetensorsglm_moe_dsatext-generation
查看基准测试 →

Qwen2.5-3B

Qwen / Qwen2.5-3B

3B
Qwentext-generation共 1 个基准测试
safetensorsqwen2text-generationconversational
查看基准测试 →

GPT-OSS-20B-Uncensored-HauhauCS-Aggressive

HauhauCS / GPT-OSS-20B-Uncensored-HauhauCS-Aggressive

20B
Gpt共 1 个基准测试
ggufuncensoredabliteratedmxfp4
最佳66.8 tok/s
中位数66.8 tok/s
最低66.8 tok/s
查看基准测试 →

UncensoredLM-DeepSeek-R1-Distill-Qwen-14B

uncensoredai / UncensoredLM-DeepSeek-R1-Distill-Qwen-14B

14B
Deepseek-R1共 1 个基准测试
safetensorsqwen2license:apache-2.0region:us
最佳27.0 tok/s
中位数27.0 tok/s
最低27.0 tok/s
查看基准测试 →

Qwen3.5-9B-Red_Team

LuisPPB16 / Qwen3.5-9B-Red_Team

9B
Qwen共 1 个基准测试
ggufqwen3_5llama.cppunsloth
最佳35.9 tok/s
中位数35.9 tok/s
最低35.9 tok/s
查看基准测试 →

rwkv-7-world

BlinkDL / rwkv-7-world

Starcodertext-generation共 1 个基准测试
pytorchtext-generationcausal-lmrwkv
查看基准测试 →

LFM2.5-350M-Base

LiquidAI / LFM2.5-350M-Base

0M
text-generation共 1 个基准测试
transformerssafetensorslfm2text-generation
查看基准测试 →

MiniCPM3-4B

openbmb / MiniCPM3-4B

4B
text-generation共 1 个基准测试
transformerspytorchminicpm3text-generation
最佳6.1 tok/s
中位数6.1 tok/s
最低6.1 tok/s
查看基准测试 →

North-Mini-Code-1.0

CohereLabs / North-Mini-Code-1.0

30B
Coheretext-generation共 1 个基准测试
transformerssafetensorscohere2_moetext-generation
最佳258 tok/s
中位数258 tok/s
最低258 tok/s
查看基准测试 →

Qwen3.5-0.8B-Q8_0.gguf

Manojb / Qwen3.5-0.8B-Q8_0.gguf

1B
Qwen共 1 个基准测试
ggufendpoints_compatibleregion:usconversational
最佳346 tok/s
中位数346 tok/s
最低346 tok/s
查看基准测试 →

MiniCPM5-1B-GGUF

openbmb / MiniCPM5-1B-GGUF

1B
Llamatext-generation共 1 个基准测试
transformersggufminicpmminicpm5
最佳126 tok/s
中位数126 tok/s
最低126 tok/s
查看基准测试 →

Qwen3.6-35B-A3B-4bit-DWQ

mlx-community / Qwen3.6-35B-A3B-4bit-DWQ

35B
Qwentext-generation共 1 个基准测试
mlxsafetensorsqwen3_5_moetext-generation
最佳78.9 tok/s
中位数78.9 tok/s
最低78.9 tok/s
查看基准测试 →

MiMo-V2.5

XiaomiMiMo / MiMo-V2.5

311B
共 1 个基准测试
safetensorsmimo_v2multimodalvision-language
查看基准测试 →

Qwen3.5-122B-A10B-GPTQ-Int4

Qwen / Qwen3.5-122B-A10B-GPTQ-Int4

125B
Qwenimage-text-to-text共 1 个基准测试
transformerssafetensorsqwen3_5_moeimage-text-to-text
最佳49.1 tok/s
中位数49.1 tok/s
最低49.1 tok/s
查看基准测试 →

Llama-2-7b

meta-llama / Llama-2-7b

7B
Llamatext-generation共 1 个基准测试
facebookmetapytorchllama
最佳110 tok/s
中位数110 tok/s
最低110 tok/s
查看基准测试 →

Qwen2.5-32B

Qwen / Qwen2.5-32B

33B
Qwentext-generation共 1 个基准测试
safetensorsqwen2text-generationconversational
查看基准测试 →

Qwen3-VL-8B-Instruct

Qwen / Qwen3-VL-8B-Instruct

9B
Qwenimage-text-to-text共 1 个基准测试
transformerssafetensorsqwen3_vlimage-text-to-text
最佳95.9 tok/s
中位数95.9 tok/s
最低95.9 tok/s
查看基准测试 →

Ternary-Bonsai-8B-unpacked

prism-ml / Ternary-Bonsai-8B-unpacked

8B
Qwen共 1 个基准测试
safetensorsqwen3prismmlbonsai
查看基准测试 →

Qwen3.5-35B-A3B-4bit

mlx-community / Qwen3.5-35B-A3B-4bit

6B
Qwenimage-text-to-text共 1 个基准测试
transformerssafetensorsqwen3_5_moeimage-text-to-text
最佳105 tok/s
中位数105 tok/s
最低105 tok/s
查看基准测试 →

gemma-3-4b-pt

google / gemma-3-4b-pt

4B
Gemmaimage-text-to-text共 1 个基准测试
transformerssafetensorsgemma3image-text-to-text
查看基准测试 →

GLM-5

zai-org / GLM-5

754B
text-generation共 1 个基准测试
transformerssafetensorsglm_moe_dsatext-generation
查看基准测试 →

LFM2-24B-A2B

LiquidAI / LFM2-24B-A2B

24B
text-generation共 1 个基准测试
transformerssafetensorsliquidlfm2
最佳161 tok/s
中位数161 tok/s
最低161 tok/s
查看基准测试 →

DeepSeek-V4-Flash-2bit-DQ

mlx-community / DeepSeek-V4-Flash-2bit-DQ

284B
Deepseektext-generation共 1 个基准测试
mlxsafetensorstext-generationen
最佳17.0 tok/s
中位数17.0 tok/s
最低17.0 tok/s
查看基准测试 →

Qwen3-VL-2B-Instruct

Qwen / Qwen3-VL-2B-Instruct

2B
Qwenimage-text-to-text共 1 个基准测试
transformerssafetensorsqwen3_vlimage-text-to-text
最佳27.9 tok/s
中位数27.9 tok/s
最低27.9 tok/s
查看基准测试 →

Qwen3-30B-A3B-Instruct-2507

Qwen / Qwen3-30B-A3B-Instruct-2507

31B
Qwentext-generation共 1 个基准测试
transformerssafetensorsqwen3_moetext-generation
查看基准测试 →

Gemopus-4-26B-A4B-it-GGUF

Jackrong / Gemopus-4-26B-A4B-it-GGUF

26B
Gemmatext-generation共 1 个基准测试
ggufgemma4gemmainstruction-tuned
最佳94.5 tok/s
中位数94.5 tok/s
最低94.5 tok/s
查看基准测试 →

Qwen2-VL-7B

Qwen / Qwen2-VL-7B

8B
Qwenimage-text-to-text
transformerssafetensorsqwen2_vlimage-text-to-text
查看基准测试 →

Qwen3.5-9B-NSC-ACE-SABER-GGUF

GestaltLabs / Qwen3.5-9B-NSC-ACE-SABER-GGUF

9B
Qwen
ggufqwen3_5nsc-acesaber
查看基准测试 →

LFM2-24B-A2B-GGUF

lmstudio-community / LFM2-24B-A2B-GGUF

24B
ggufendpoints_compatibleregion:usconversational
查看基准测试 →