Qwen (Alibaba)
Qwen2.5-32B-Instruct-AWQ
Benchmarkprofil und veroeffentlichte Ergebnisse.
Dense32B
Einordnung im Feld
Bestwerte im Vergleich
Beste Messwerte dieses Modells gegen Minimum, Durchschnitt und Maximum aller veroeffentlichten Systeme.
Generation22,6 tok/s
Min 0,0Ø 87,0Max 1.295,3
Unter dem Durchschnitt · 304 Systeme im Feld
Prefill698 tok/s
Min 6Ø 3.213Max 37.116
Unter dem Durchschnitt · 303 Systeme im Feld
Time to First Token6.524 ms
Min 91Ø 22.143Max 299.591
Ueber dem Durchschnitt · 305 Systeme im Feld
Harness-Quote13,4 %
Min 10,0Ø 54,4Max 90,6
Unter dem Durchschnitt · 30 Systeme im Feld
Performanceprofil
Durchsatz nach Hardware & Engine
Jede Blase steht für eine GPU, CPU bzw. Engine – die Position zeigt Prompt-Verarbeitung (X) und Ausgabe-Geschwindigkeit (Y), die Blasengröße die Anzahl der Messläufe.
GPUnach Grafikkarte
AMD Radeon 8060S Graphics 22,6 tok/s
CPUnach Prozessor
AMD RYZEN AI MAX+ 395 w/ Radeon 8060S 22,6 tok/s
ENGnach Engine
unbekannt 22,6 tok/s
Agent- & Chat-Bewertung
Harnessbenchmark
| # | Modell / Hersteller | Messwerte | Parallel | GPU / CPU / RAM | Runtime | ||
|---|---|---|---|---|---|---|---|
| 1 | Qwen2.5-32B-Instruct-AWQQwen (Alibaba) HarnessbenchmarkTool Usage V 1.0 | 13,4 % 235/1.760 Pkt · 15/15 Aufg. | 1× | AMD Radeon 8060S Graphics32x AMD RYZEN AI MAX+ 395 w/ Radeon 8060S · 31 GB RAM | openclaw_cli | Details → | |
| 2 | Qwen2.5-32B-Instruct-AWQQwen (Alibaba) HarnessbenchmarkTool Usage Standard 1.0 | 10,0 % 298/2.980 Pkt · 16/16 Aufg. | 1× | AMD GPU32x AMD RYZEN AI MAX+ 395 w/ Radeon 8060S · 123 GB RAM | openclaw_cli | Details → |
Durchsatz & Latenz
Performancebenchmark
| # | Modell / Hersteller | Messwerte | Parallel | GPU / CPU / RAM | Runtime | ||
|---|---|---|---|---|---|---|---|
| 1 | Qwen2.5-32B-Instruct-AWQQwen (Alibaba) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation) | 22,57 tok/s TG Prefill 698 · TTFT 41.575 ms | 10× | AMD Radeon 8060S Graphics32x AMD RYZEN AI MAX+ 395 w/ Radeon 8060S · 31 GB RAM | godclaw | Details → | |
| 2 | Qwen2.5-32B-Instruct-AWQQwen (Alibaba) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation) | 20,39 tok/s TG Prefill 518 · TTFT 24.247 ms | 5× | AMD Radeon 8060S Graphics32x AMD RYZEN AI MAX+ 395 w/ Radeon 8060S · 31 GB RAM | godclaw | Details → | |
| 3 | Qwen2.5-32B-Instruct-AWQQwen (Alibaba) PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation) | 10,45 tok/s TG Prefill 336 · TTFT 6.524 ms | 1× | AMD Radeon 8060S Graphics32x AMD RYZEN AI MAX+ 395 w/ Radeon 8060S · 31 GB RAM | godclaw | Details → |