Created bymario-alka.dePowered bygodcore.denoob2claw.detricoma.de
Qwen (Alibaba)

Qwen3-Coder-30B-A3B-Instruct

Performancebenchmark · gemessen am 21.07.2026 15:14

Benchmark-IDrun-20260722-165907-73bd06
Timebench 3 - Kombi (Prefill + Generation)MoE30BRuntime: godclawQuantisierung: Q4_K_M
Generation75,66tok/s
Prefill1.816,66tok/s
Time to First Token2.000,50ms
Gesamtdauer31,70s
Concurrency1parallel
Einordnung im Feld
24von 135 Systemen

Performancebenchmark · Leitmetrik: Generation-Speed (tok/s)

Dieser Lauf ist besser als 83 % aller vergleichbaren Systeme.
Generation 75,7 tok/s
+78 % vs Ø 42,5
Prefill 1.816,7 tok/s
-37 % vs Ø 2.885,5
Time to First Token 2.001 ms
+19 % vs Ø 1.685
Verteilung im Feld2 – 148 tok/s
Ø 42 Median Dieser Lauf

Wie schlägt sich dieser Benchmark?

Hardware

GPU: 3x AMD Radeon AI PRO R9700 · 32 GB VRAM
CPU: 32x AMD Ryzen Threadripper PRO 7955WX 16-Cores
RAM: 184 GB

Setup

Runtime: godclaw
Quantisierung: Q4_K_M
Modell: Qwen3-Coder-30B-A3B-Instruct

Konfiguration

benchmark-konfiguration — run-20260722-165907-73bd06
# LLM-Benchmark Konfiguration # Modell : Qwen3-Coder-30B-A3B-Instruct # Engine : llama.cpp # Run-ID : run-20260722-165907-73bd06 # GPU : 3x AMD Radeon AI PRO R9700 # CPU : 32x AMD Ryzen Threadripper PRO 7955WX 16-Cores # RAM : 184 GB bench@llm-benchmark:~$ /src/build/bin/llama-server \ -m /root/.cache/huggingface/hub/models--unsloth--Qwen3-Coder-30B-A3B-Instruct-GGUF/Qwen3-Coder-30B-A3B-Instruct-Q4_K_M.gguf \ -ngl 999 \ -c 8192 \ -a Qwen3-Coder-30B-A3B-Instruct \ --host 0.0.0.0 \ --port 8000
Enginellamacpp
ModellaliasQwen3-Coder-30B-A3B-Instruct
Kontextlaenge8192
Modellpfad/root/.cache/huggingface/hub/models--unsloth--Qwen3-Coder-30B-A3B-Instruct-GGUF/Qwen3-Coder-30B-A3B-Instruct-Q4_K_M.gguf
GPU-Layer999
Kontext8192
AliasQwen3-Coder-30B-A3B-Instruct

Alle Benchmarks dieses Modells Zum Leaderboard