Created bymario-alka.dePowered bygodcore.denoob2claw.detricoma.de
Z.ai (Zhipu)

glm-4.7-flash

Benchmarkprofil und veröffentlichte Ergebnisse.

Einordnung im Feld

Bestwerte im Vergleich

Beste Messwerte dieses Modells gegen Minimum, Durchschnitt und Maximum aller veröffentlichten Systeme.

Generation349,3 tok/s
Min 0,0Ø 265,2Max 2.263,7
Ueber dem Durchschnitt · 273 Systeme im Feld
Prefill14.193 tok/s
Min 5Ø 3.549Max 32.005
Ueber dem Durchschnitt · 273 Systeme im Feld
Time to First Token346 ms
Min 20Ø 78.661Max 459.880
Ueber dem Durchschnitt · 273 Systeme im Feld
Performanceprofil

Durchsatz nach Hardware & Engine

Jede Blase steht für eine GPU, CPU bzw. Engine – die Position zeigt Prompt-Verarbeitung (X) und Ausgabe-Geschwindigkeit (Y), die Blasengröße die Anzahl der Messläufe.

GPUnach Grafikkarte

4443332221110,02.5004.7607.0199.279Prefill (tok/s)Generation (tok/s)NVIDIA GeForce RTX 3090 Ti - 349,3 tok/s Generation, 8.028 tok/s Prefill, TTFT 1.698 ms (6 Laufe)NVIDIA GeForce RTX 30...AMD Radeon RX 7900 XTX - 151,7 tok/s Generation, 3.752 tok/s Prefill, TTFT 3.439 ms (3 Laufe)AMD Radeon RX 7900 XTXNVIDIA GB10 - 48,9 tok/s Generation, 4.055 tok/s Prefill, TTFT 536 ms (1 Lauf)NVIDIA GB10
NVIDIA GeForce RTX 3090 Ti 349,3 tok/sAMD Radeon RX 7900 XTX 151,7 tok/sNVIDIA GB10 48,9 tok/s

CPUnach Prozessor

4443332221110,02.5004.7607.0199.279Prefill (tok/s)Generation (tok/s)AMD Ryzen 5 5600X 6-Core Processor - 349,3 tok/s Generation, 8.028 tok/s Prefill, TTFT 1.698 ms (6 Laufe)AMD Ryzen 5 5600X 6-C...AMD Ryzen Threadripper PRO 3955WX 16-Cores - 151,7 tok/s Generation, 3.752 tok/s Prefill, TTFT 3.439 ms (3 Laufe)AMD Ryzen Threadrippe...NVIDIA Grace - 48,9 tok/s Generation, 4.055 tok/s Prefill, TTFT 536 ms (1 Lauf)NVIDIA Grace
AMD Ryzen 5 5600X 6-Core Processor 349,3 tok/sAMD Ryzen Threadripper PRO 3955WX 16-Cores 151,7 tok/sNVIDIA Grace 48,9 tok/s

ENGnach Engine

42433725016477,32.3394.9307.52110.113Prefill (tok/s)Generation (tok/s)unbekannt - 349,3 tok/s Generation, 5.807 tok/s Prefill, TTFT 2.234 ms (3 Laufe)unbekanntvLLM - 211,5 tok/s Generation, 8.700 tok/s Prefill, TTFT 1.006 ms (4 Laufe)vLLMllama.cpp - 151,7 tok/s Generation, 3.752 tok/s Prefill, TTFT 3.439 ms (3 Laufe)llama.cpp
unbekannt 349,3 tok/svLLM 211,5 tok/sllama.cpp 151,7 tok/s
Durchsatz & Latenz

Performancebenchmark

Messwert:
GPUs
#Modell / HerstellerMesswerteParallelGPU / CPU / RAMRuntime
1glm-4.7-flashZ.ai (Zhipu) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
349,28 tok/s TG
Prefill 7.891 · TTFT 3.899 ms
10×NVIDIA GeForce RTX 3090 TiAMD Ryzen 5 5600X 6-Core Processor · 30 GB RAMopenclaw_cliAWQ
2glm-4.7-flashZ.ai (Zhipu) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
233,82 tok/s TG
Prefill 6.284 · TTFT 2.148 ms
5×NVIDIA GeForce RTX 3090 TiAMD Ryzen 5 5600X 6-Core Processor · 30 GB RAMopenclaw_cliAWQ
3glm-4.7-flashZ.ai (Zhipu) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
211,45 tok/s TG
Prefill 14.193 · TTFT 1.973 ms
10×NVIDIA GeForce RTX 3090 TiAMD Ryzen 5 5600X 6-Core Processor · 30 GB RAMvLLMopenclaw_cliAWQ
4glm-4.7-flashZ.ai (Zhipu) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
151,70 tok/s TG
Prefill 5.294 · TTFT 5.865 ms
10×2x AMD Radeon RX 7900 XTXAMD Ryzen Threadripper PRO 3955WX 16-Cores · 189 GB RAMllama.cppgodclawQ4_K_M
5glm-4.7-flashZ.ai (Zhipu) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
144,63 tok/s TG
Prefill 3.247 · TTFT 656 ms
1×NVIDIA GeForce RTX 3090 TiAMD Ryzen 5 5600X 6-Core Processor · 30 GB RAMopenclaw_cliAWQ
6glm-4.7-flashZ.ai (Zhipu) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
103,06 tok/s TG
Prefill 4.019 · TTFT 3.355 ms
5×2x AMD Radeon RX 7900 XTXAMD Ryzen Threadripper PRO 3955WX 16-Cores · 189 GB RAMllama.cppgodclawQ4_K_M
7glm-4.7-flashZ.ai (Zhipu) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
102,50 tok/s TG
Prefill 10.352 · TTFT 1.169 ms
5×NVIDIA GeForce RTX 3090 TiAMD Ryzen 5 5600X 6-Core Processor · 30 GB RAMvLLMopenclaw_cliAWQ
8glm-4.7-flashZ.ai (Zhipu) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
48,92 tok/s TG
Prefill 4.055 · TTFT 536 ms
1×NVIDIA GB10 (DGX Spark)NVIDIA Grace · 120 GB RAMvLLMgodclawAWQ
9glm-4.7-flashZ.ai (Zhipu) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
43,51 tok/s TG
Prefill 1.942 · TTFT 1.097 ms
1×2x AMD Radeon RX 7900 XTXAMD Ryzen Threadripper PRO 3955WX 16-Cores · 189 GB RAMllama.cppgodclawQ4_K_M
10glm-4.7-flashZ.ai (Zhipu) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation)
21,28 tok/s TG
Prefill 6.200 · TTFT 346 ms
1×NVIDIA GeForce RTX 3090 TiAMD Ryzen 5 5600X 6-Core Processor · 30 GB RAMvLLMopenclaw_cliAWQ
Agent- & Chat-Bewertung

Harnessbenchmark

Noch keine Harnessbenchmarks fuer dieses Modell.