Created bymario-alka.dePowered bygodcore.denoob2claw.detricoma.de
NVIDIA

Nemotron-3-Nano-Omni-30B-A3B-Reasoning

Performancebenchmark · gemessen am 23.07.2026 02:48

Benchmark-IDrun-20260723-031253-e2aa7d
Timebench 3 - Kombi (Prefill + Generation)MoE30BRuntime: godclaw
Generation268,74tok/s
Prefill5.448,42tok/s
Time to First Token4.050,00ms
Gesamtdauer18,66s
Concurrency10parallel
Einordnung im Feld
6von 218 Systemen

Performancebenchmark · Leitmetrik: Generation-Speed (tok/s)

Dieser Lauf ist besser als 98 % aller vergleichbaren Systeme.
Generation 268,7 tok/s
+299 % vs Ø 67,4
Prefill 5.448,4 tok/s
+102 % vs Ø 2.695,8
Time to First Token 4.050 ms
-76 % vs Ø 17.187
Verteilung im Feld0 – 341 tok/s
Ø 67 Median Dieser Lauf

Wie schlägt sich dieser Benchmark?

Hardware

GPU: 3x AMD Radeon AI PRO R9700 · 32 GB VRAM
CPU: 32x AMD Ryzen Threadripper PRO 7955WX 16-Cores
RAM: 184 GB
Mainboard: ASUSTeK COMPUTER INC. Pro WS WRX90E-SAGE SE

Setup

Runtime: godclaw
Quantisierung: -
Betriebssystem: Ubuntu 26.04 LTS (Kernel 7.0.0-27-generic)
Modell: Nemotron-3-Nano-Omni-30B-A3B-Reasoning

Alle Benchmarks dieses Modells Zum Leaderboard