Created bymario-alka.dePowered bygodcore.denoob2claw.detricoma.de
DEEN
Anmelden Registrieren
Beta
Beigesteuert vonMario AlkaGoogle

Gemma-4-26B-A4B-it

Harnessbenchmark · gemessen am 16.04.2026 11:00

Benchmark-IDrun-20260722-161611-05d866
Tool Usage Standard 1.0MoE26BRuntime: openclaw_cli
Punkte2.701,00von 2.980,00
Punktequote90,64%
Aufgaben bestanden16von 16
Gesamtdauer118,00s
Einordnung im Feld
Diese GPUAlle GPUs
1von 12 Systemen

Harnessbenchmark · Leitmetrik: Punktequote (%)

Dieser Lauf ist besser als 100 % aller vergleichbaren Systeme.
Punktequote 91 %
+54 % vs Ø 58,8
Aufgaben bestanden 16
+2 % vs Ø 15,7
Gesamtdauer 118,0 s
-93 % vs Ø 1.780,3
Verteilung im Feld10 – 91 %
Ø 59 Median Dieser Lauf

Wie schlägt sich dieser Benchmark mit anderen Modellen?

Hardware

GPU: NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · 96 GB VRAM
CPU: AMD Ryzen 9 9950X 16-Core Processor
RAM: 92 GB
Mainboard: ASUSTeK COMPUTER INC. ProArt X870E-CREATOR WIFI

Setup

Runtime: openclaw_cli
Quantisierung: -
Modell: Gemma-4-26B-A4B-it

Aufgaben (16)

AufgabeStatusPunkteDauer
Antwortzeit Testbestanden38 / 504,00 s
Format Testbestanden70 / 804,00 s
Dateisystem Setupbestanden110 / 1204,00 s
Daten Generierungbestanden139 / 1505,00 s
Parsing + Transformationbestanden190 / 2005,00 s
Fehlerbehandlung JSONbestanden139 / 1505,00 s
Python Tool Usagebestanden205 / 2207,00 s
PHP Tool Usagebestanden207 / 2206,00 s
Export + Reimportbestanden227 / 2407,00 s
Archivierungbestanden169 / 1804,00 s
Hash Berechnungbestanden190 / 2004,00 s
Textsuchebestanden167 / 1805,00 s
Idempotenz Testbestanden136 / 22038,00 s
Rechte Problembestanden189 / 22014,00 s
Final JSONbestanden243 / 2503,00 s
Finale Ausgabebestanden282 / 3003,00 s

Alle Benchmarks dieses Modells Zum Leaderboard

Anzeige
Modell-Vergleich

Gemma-4-26B-A4B-it auf verschiedener Hardware

Alle veröffentlichten Performance-Läufe dieses Modells – jede Blase eine Variante: Position = Prefill (X) × Generation (Y), Blasengröße = Anzahl Läufe. Näher oben rechts = schneller. ★ Gold markiert = dieser Benchmark.

GPUnach Grafikkarte

2.0501.5371.0255120,004.7339.46614.199Prefill (tok/s)Generation (tok/s)NVIDIA RTX PRO 6000 Blackwell Workstation Edition - 1.589,1 tok/s Generation, 6.148 tok/s Prefill, TTFT 3.731 ms (3 Laufe)NVIDIA RTX PRO 6000 B...NVIDIA GeForce RTX 5090 - 1.540,5 tok/s Generation, 4.006 tok/s Prefill, TTFT 4.749 ms (3 Laufe)NVIDIA GeForce RTX 50...NVIDIA GeForce RTX 5070 Ti - 1.009,0 tok/s Generation, 3.578 tok/s Prefill, TTFT 5.953 ms (3 Laufe)NVIDIA GeForce RTX 50...NVIDIA GeForce RTX 3090 Ti - 926,2 tok/s Generation, 3.438 tok/s Prefill, TTFT 4.863 ms (6 Laufe)NVIDIA GeForce RTX 30...NVIDIA RTX A6000 - 841,8 tok/s Generation, 11.528 tok/s Prefill, TTFT 1.992 ms (36 Laufe)NVIDIA RTX A6000AMD Radeon PRO W7800 48GB - 247,3 tok/s Generation, 2.619 tok/s Prefill, TTFT 3.357 ms (8 Laufe)AMD Radeon PRO W7800 ...AMD Radeon 8060S Graphics - 79,5 tok/s Generation, 533 tok/s Prefill, TTFT 9.976 ms (9 Laufe)AMD Radeon 8060S Grap...NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition - 1.479,9 tok/s Generation, 7.172 tok/s Prefill, TTFT 3.769 ms (9 Laufe) | DIESER LAUF★ NVIDIA RTX PRO 6000 B...
NVIDIA RTX PRO 6000 Blackwell Workstation Edition 1.589,1 tok/sNVIDIA GeForce RTX 5090 1.540,5 tok/s★ NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition 1.479,9 tok/s dieser LaufNVIDIA GeForce RTX 5070 Ti 1.009,0 tok/sNVIDIA GeForce RTX 3090 Ti 926,2 tok/sNVIDIA RTX A6000 841,8 tok/sAMD Radeon PRO W7800 48GB 247,3 tok/sAMD Radeon 8060S Graphics 79,5 tok/s

CPUnach Prozessor

2.0501.5371.0255120,004.7339.46614.199Prefill (tok/s)Generation (tok/s)AMD Ryzen 7 5800X3D 8-Core Processor - 1.540,5 tok/s Generation, 4.006 tok/s Prefill, TTFT 4.749 ms (3 Laufe)AMD Ryzen 7 5800X3D 8...AMD Ryzen Threadripper PRO 9965WX 24-Cores - 1.479,9 tok/s Generation, 7.172 tok/s Prefill, TTFT 3.769 ms (9 Laufe)AMD Ryzen Threadrippe...AMD Ryzen Threadripper PRO 5975WX 32-Cores - 1.009,0 tok/s Generation, 2.880 tok/s Prefill, TTFT 4.065 ms (11 Laufe)AMD Ryzen Threadrippe...AMD Ryzen 9 8945HX with Radeon Graphics - 926,2 tok/s Generation, 3.620 tok/s Prefill, TTFT 6.478 ms (3 Laufe)AMD Ryzen 9 8945HX wi...AMD Ryzen Threadripper PRO 7955WX 16-Cores - 841,8 tok/s Generation, 11.528 tok/s Prefill, TTFT 1.992 ms (36 Laufe)AMD Ryzen Threadrippe...AMD Ryzen 5 5600X 6-Core Processor - 397,2 tok/s Generation, 3.255 tok/s Prefill, TTFT 3.248 ms (3 Laufe)AMD Ryzen 5 5600X 6-C...AMD RYZEN AI MAX+ 395 w/ Radeon 8060S - 79,5 tok/s Generation, 533 tok/s Prefill, TTFT 9.976 ms (9 Laufe)AMD RYZEN AI MAX+ 395...AMD Ryzen 9 9950X 16-Core Processor - 1.589,1 tok/s Generation, 6.148 tok/s Prefill, TTFT 3.731 ms (3 Laufe) | DIESER LAUF★ AMD Ryzen 9 9950X 16-...
★ AMD Ryzen 9 9950X 16-Core Processor 1.589,1 tok/s dieser LaufAMD Ryzen 7 5800X3D 8-Core Processor 1.540,5 tok/sAMD Ryzen Threadripper PRO 9965WX 24-Cores 1.479,9 tok/sAMD Ryzen Threadripper PRO 5975WX 32-Cores 1.009,0 tok/sAMD Ryzen 9 8945HX with Radeon Graphics 926,2 tok/sAMD Ryzen Threadripper PRO 7955WX 16-Cores 841,8 tok/sAMD Ryzen 5 5600X 6-Core Processor 397,2 tok/sAMD RYZEN AI MAX+ 395 w/ Radeon 8060S 79,5 tok/s

MBnach Mainboard

2.0571.5431.0295140,004.4018.80113.202Prefill (tok/s)Generation (tok/s)ASUSTeK COMPUTER INC. ROG STRIX B550-A GAMING - 1.540,5 tok/s Generation, 4.006 tok/s Prefill, TTFT 4.749 ms (3 Laufe)ASUSTeK COMPUTER INC....ASUSTeK COMPUTER INC. Pro WS WRX90E-SAGE SE - 1.479,9 tok/s Generation, 10.657 tok/s Prefill, TTFT 2.347 ms (45 Laufe)ASUSTeK COMPUTER INC....ASUSTeK COMPUTER INC. Pro WS WRX80E-SAGE SE WIFI - 1.009,0 tok/s Generation, 2.880 tok/s Prefill, TTFT 4.065 ms (11 Laufe)ASUSTeK COMPUTER INC....Meigao Innovation Technology (Shen Zhen) Co., Ltd DRFXL (MotherBoard Series) - 926,2 tok/s Generation, 3.620 tok/s Prefill, TTFT 6.478 ms (3 Laufe)Meigao Innovation Tec...ASUSTeK COMPUTER INC. PRIME A520M-K - 397,2 tok/s Generation, 3.255 tok/s Prefill, TTFT 3.248 ms (3 Laufe)ASUSTeK COMPUTER INC....Bosgame AXB35-02 (BeyondMax Series) - 79,5 tok/s Generation, 591 tok/s Prefill, TTFT 11.147 ms (8 Laufe)Bosgame AXB35-02 (Bey...Meigao Innovation Technology (Shen Zhen) Co., Ltd SHWSA (MS-S1 MAX) - 42,2 tok/s Generation, 71 tok/s Prefill, TTFT 609 ms (1 Lauf)Meigao Innovation Tec...ASUSTeK COMPUTER INC. ProArt X870E-CREATOR WIFI - 1.589,1 tok/s Generation, 6.148 tok/s Prefill, TTFT 3.731 ms (3 Laufe) | DIESER LAUF★ ASUSTeK COMPUTER INC....
★ ASUSTeK COMPUTER INC. ProArt X870E-CREATOR WIFI 1.589,1 tok/s dieser LaufASUSTeK COMPUTER INC. ROG STRIX B550-A GAMING 1.540,5 tok/sASUSTeK COMPUTER INC. Pro WS WRX90E-SAGE SE 1.479,9 tok/sASUSTeK COMPUTER INC. Pro WS WRX80E-SAGE SE WIFI 1.009,0 tok/sMeigao Innovation Technology (Shen Zhen) Co., Ltd DRFXL (MotherBoard Series) 926,2 tok/sASUSTeK COMPUTER INC. PRIME A520M-K 397,2 tok/sBosgame AXB35-02 (BeyondMax Series) 79,5 tok/sMeigao Innovation Technology (Shen Zhen) Co., Ltd SHWSA (MS-S1 MAX) 42,2 tok/s

ENGnach Engine

1.9861.4909934970,007.33614.67222.007Prefill (tok/s)Generation (tok/s)llama.cpp - 1.589,1 tok/s Generation, 4.207 tok/s Prefill, TTFT 4.943 ms (55 Laufe)llama.cppvLLM - 841,8 tok/s Generation, 18.105 tok/s Prefill, TTFT 695 ms (18 Laufe)vLLMunbekannt - 397,2 tok/s Generation, 2.459 tok/s Prefill, TTFT 2.588 ms (4 Laufe)unbekannt
llama.cpp 1.589,1 tok/svLLM 841,8 tok/sunbekannt 397,2 tok/s

DRVnach Treiber

2.0571.5431.0295140,003.0806.1599.239Prefill (tok/s)Generation (tok/s)unbekannt - 1.589,1 tok/s Generation, 7.461 tok/s Prefill, TTFT 3.870 ms (76 Laufe)unbekanntROCm 7.2.0 - 42,2 tok/s Generation, 71 tok/s Prefill, TTFT 609 ms (1 Lauf)ROCm 7.2.0
unbekannt 1.589,1 tok/sROCm 7.2.0 42,2 tok/s
Beigesteuert von

Mario Alka Administrator

@marioalka

Ich bin Unternehmer, Softwareentwickler und KI-Enthusiast. Seit vielen Jahren entwickle ich Unternehmenssoftware und beschäftige mich inzwischen fast täglich mit lokalen LLMs, KI-Agenten und leistungsfähiger KI-Hardware.

Mit LLM-Benchmark.de möchte ich eine Plattform schaffen, auf der Modelle, GPUs und Agenten objektiv und reproduzierbar miteinander verglichen werden.