🏆
Ranglisten
LLM Leaderboard
Reale Messergebnisse aller getesteten Sprachmodelle auf echter, benannter Hardware – bewertet nach roher Geschwindigkeit (Performance in Token pro Sekunde, Prefill und Zeit bis zum ersten Token) und nach praktischer Aufgaben-Qualität in vollständigen Agenten- und Chat-Abläufen (Harness). Wähle unten einen Benchmark-Typ oder filtere nach Modell, Hersteller und Hardware, um genau zu sehen, was jeweils geprüft wird und wie die Ergebnisse zustande kommen.
⚡ Performance (tok/s)🤖 Harness-Qualität👥 Concurrency🖥️ echte Hardware
| # | Modell / Hersteller | Messwerte | Parallel | GPU / CPU / RAM | Runtime | ||
|---|---|---|---|---|---|---|---|
| 1 | Meta-Llama-3.1-8B-Instruct8BMeta PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation) | 317,00 tok/s TG Prefill 14.849 · TTFT 2.492 ms | 10× | 2x NVIDIA RTX A6000 iAMD EPYC 7203P 8-Core Processor · 126 GB RAM | vLLMgodclaw | Details → | |
| 2 | Meta-Llama-3.1-8B-Instruct8BMeta PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation) | 183,35 tok/s TG Prefill 11.565 · TTFT 1.219 ms | 5× | 2x NVIDIA RTX A6000 iAMD EPYC 7203P 8-Core Processor · 126 GB RAM | vLLMgodclaw | Details → | |
| 3 | Meta-Llama-3.1-8B-Instruct8BMeta PerformancebenchmarkTimebench 3 - Kombi (Prefill + Generation) | 42,39 tok/s TG Prefill 5.909 · TTFT 412 ms | 1× | 2x NVIDIA RTX A6000 iAMD EPYC 7203P 8-Core Processor · 126 GB RAM | vLLMgodclaw | Details → |

