Created bymario-alka.dePowered bygodcore.denoob2claw.detricoma.de
NVIDIA

Nemotron-Cascade-2-30B-A3B

Performancebenchmark · gemessen am 23.07.2026 02:44

Benchmark-IDrun-20260723-031252-286996
Timebench 3 - Kombi (Prefill + Generation)MoE30BRuntime: godclaw
Generation270,39tok/s
Prefill5.684,30tok/s
Time to First Token3.915,00ms
Gesamtdauer17,81s
Concurrency10parallel
Einordnung im Feld
13von 239 Systemen

Performancebenchmark · Leitmetrik: Generation-Speed (tok/s)

Dieser Lauf ist besser als 95 % aller vergleichbaren Systeme.
Generation 270,4 tok/s
+181 % vs Ø 96,3
Prefill 5.684,3 tok/s
+62 % vs Ø 3.518,1
Time to First Token 3.915 ms
-76 % vs Ø 16.050
Verteilung im Feld0 – 1.295 tok/s
Ø 96 Median Dieser Lauf

Wie schlägt sich dieser Benchmark?

Hardware

GPU: 3x AMD Radeon AI PRO R9700 · 32 GB VRAM
CPU: 32x AMD Ryzen Threadripper PRO 7955WX 16-Cores
RAM: 184 GB
Mainboard: ASUSTeK COMPUTER INC. Pro WS WRX90E-SAGE SE

Setup

Runtime: godclaw
Quantisierung: -
Betriebssystem: Ubuntu 26.04 LTS (Kernel 7.0.0-27-generic)
Modell: Nemotron-Cascade-2-30B-A3B

Alle Benchmarks dieses Modells Zum Leaderboard