Created bymario-alka.dePowered bygodcore.denoob2claw.detricoma.de
MiniMax

minimax-m2-awq230B

Benchmarkprofil und veröffentlichte Ergebnisse.

MoE230B
Einordnung im Feld

Bestwerte im Vergleich

Beste Messwerte dieses Modells gegen Minimum, Durchschnitt und Maximum aller veröffentlichten Systeme.

Generation547,9 tok/s
Min 0,0Ø 248,3Max 2.491,2
Ueber dem Durchschnitt · 3969 Systeme im Feld
Prefill4.819 tok/s
Min 4Ø 4.741Max 55.260
Ueber dem Durchschnitt · 3969 Systeme im Feld
Time to First Token972 ms
Min 20Ø 33.962Max 535.235
Ueber dem Durchschnitt · 3967 Systeme im Feld
Performanceprofil

Durchsatz nach Hardware & Engine

Jede Blase steht für eine GPU, CPU bzw. Engine – die Position zeigt Prompt-Verarbeitung (X) und Ausgabe-Geschwindigkeit (Y), die Blasengröße die Anzahl der Messläufe.

GPUnach Grafikkarte

7115333551780,001.6053.2104.815Prefill (tok/s)Generation (tok/s)NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition - 547,9 tok/s Generation, 3.894 tok/s Prefill, TTFT 9.312 ms (3 Laufe)NVIDIA RTX PRO 6000 B...NVIDIA GeForce RTX 5070 Ti - 17,0 tok/s Generation, 100 tok/s Prefill, TTFT 162.821 ms (3 Laufe)NVIDIA GeForce RTX 50...NVIDIA RTX PRO 6000 Blackwell Workstation Edition - 8,7 tok/s Generation, 80 tok/s Prefill, TTFT 91.651 ms (3 Laufe)NVIDIA RTX PRO 6000 B...
NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition 547,9 tok/sNVIDIA GeForce RTX 5070 Ti 17,0 tok/sNVIDIA RTX PRO 6000 Blackwell Workstation Edition 8,7 tok/s

CPUnach Prozessor

7115333551780,001.6053.2104.815Prefill (tok/s)Generation (tok/s)AMD Ryzen Threadripper PRO 9965WX 24-Cores - 547,9 tok/s Generation, 3.894 tok/s Prefill, TTFT 9.312 ms (3 Laufe)AMD Ryzen Threadrippe...AMD Ryzen Threadripper PRO 5975WX 32-Cores - 17,0 tok/s Generation, 100 tok/s Prefill, TTFT 162.821 ms (3 Laufe)AMD Ryzen Threadrippe...AMD Ryzen 9 9950X 16-Core Processor - 8,7 tok/s Generation, 80 tok/s Prefill, TTFT 91.651 ms (3 Laufe)AMD Ryzen 9 9950X 16-...
AMD Ryzen Threadripper PRO 9965WX 24-Cores 547,9 tok/sAMD Ryzen Threadripper PRO 5975WX 32-Cores 17,0 tok/sAMD Ryzen 9 9950X 16-Core Processor 8,7 tok/s

ENGnach Engine

6035755485204931.2761.3311.3851.439Prefill (tok/s)Generation (tok/s)llama.cpp - 547,9 tok/s Generation, 1.358 tok/s Prefill, TTFT 87.928 ms (9 Laufe)llama.cpp
llama.cpp 547,9 tok/s
Durchsatz & Latenz

Performancebenchmark

Messwert:
#Modell / HerstellerMesswerteParallelGPU / CPU / RAMRuntime
1minimax-m2-awq230BMiniMax PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
547,88 tok/s TG
Prefill 4.819 · TTFT 20.318 ms
10×3x NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation EditionAMD Ryzen Threadripper PRO 9965WX 24-Cores · 125 GB RAMllama.cppgodclawUD-Q4_K_M
2minimax-m2-awq230BMiniMax PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
310,36 tok/s TG
Prefill 4.459 · TTFT 6.645 ms
5×3x NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation EditionAMD Ryzen Threadripper PRO 9965WX 24-Cores · 125 GB RAMllama.cppgodclawUD-Q4_K_M
3minimax-m2-awq230BMiniMax PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
112,64 tok/s TG
Prefill 2.405 · TTFT 972 ms
1×3x NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation EditionAMD Ryzen Threadripper PRO 9965WX 24-Cores · 125 GB RAMllama.cppgodclawUD-Q4_K_M
4minimax-m2-awq230BMiniMax PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
16,95 tok/s TG
Prefill 113 · TTFT 190.982 ms
5×NVIDIA GeForce RTX 5070 TiAMD Ryzen Threadripper PRO 5975WX 32-Cores · 247 GB RAMllama.cppgodclawUD-Q4_K_M
5minimax-m2-awq230BMiniMax PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
13,28 tok/s TG
Prefill 120 · TTFT 263.391 ms
10×NVIDIA GeForce RTX 5070 TiAMD Ryzen Threadripper PRO 5975WX 32-Cores · 247 GB RAMllama.cppgodclawUD-Q4_K_M
6minimax-m2-awq230BMiniMax PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
10,53 tok/s TG
Prefill 67 · TTFT 34.091 ms
1×NVIDIA GeForce RTX 5070 TiAMD Ryzen Threadripper PRO 5975WX 32-Cores · 247 GB RAMllama.cppgodclawUD-Q4_K_M
7minimax-m2-awq230BMiniMax PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
8,67 tok/s TG
Prefill 86 · TTFT 121.821 ms
5×NVIDIA RTX PRO 6000 Blackwell Workstation EditionAMD Ryzen 9 9950X 16-Core Processor · 92 GB RAMllama.cppgodclawUD-Q4_K_M
8minimax-m2-awq230BMiniMax PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
7,51 tok/s TG
Prefill 98 · TTFT 111.122 ms
10×NVIDIA RTX PRO 6000 Blackwell Workstation EditionAMD Ryzen 9 9950X 16-Core Processor · 92 GB RAMllama.cppgodclawUD-Q4_K_M
9minimax-m2-awq230BMiniMax PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
5,22 tok/s TG
Prefill 55 · TTFT 42.011 ms
1×NVIDIA RTX PRO 6000 Blackwell Workstation EditionAMD Ryzen 9 9950X 16-Core Processor · 92 GB RAMllama.cppgodclawUD-Q4_K_M
Agent- & Chat-Bewertung

Harnessbenchmark

Noch keine Harnessbenchmarks fuer dieses Modell.