Created bymario-alka.dePowered bygodcore.denoob2claw.detricoma.de
Contributed byMario AlkaConvai Innovations

Laya

Harness benchmark · measured on 29.09.2026 09:52

Benchmark-IDrun-20260929-091748-2fc816
Decision-Benchmark V 1.0Runtime: pytorch
ℹ
Public note: 200 identische synthetische Entscheidungsfragen; 100 Noul,100 Choice. 1 Punkt pro exakter Antwort; Noul>=0.5. Concurrency1, keine Retries. Gesamte HTTP-Antwortzeit inkl. erster Anfrage, kein TTFT. Richtig 122/200. Mittel 70.304 ms; Median 62.895 ms; P95 73.487 ms. Kein allgemeiner Intelligenztest. Historische Messung; weitere Modelle teils gleichzeitig geladen.
Points122,00von 200,00
Points rate61,00%
Tasks passed122von 200
Total duration14,06s
Ranking in the field
12of 20 systems

Harness benchmark · Primary metric: Score rate (%)

This run is better than 42 % of all comparable systems.
Score rate 61 %
-14 % vs Ø 71,0
Tasks passed 122
+32 % vs Ø 92,5
Total duration 14,1 s
-99 % vs Ø 1.240,5
Distribution in the field38 – 100 %
Ø 71 Median Dieser Lauf

Wie schlägt sich dieser Benchmark mit anderen Modellen?

Qwen3.6-35B-A3B-AWQNVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260929-153935-691df9
100 %
Qwen3.6-35B-A3B-AWQNVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260929-091748-cbe456
100 %
Qwen3.8-27B-Uncensored2× 2x NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260929-091747-e13da0
100 %
Open-Jev-27B-v1.1NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260929-091747-5d8477
100 %
Qwen3.6-35B-A3B-AWQNVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260929-112249-dba0f2
97 %
Gemma-4-26B-A4B-itNVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161611-05d866
91 %
MiniMax-M2.53× 3x NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161611-f6cfe1
81 %
Nemotron-Cascade-2-30B-A3BNVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260929-091748-15ef7f
80 %
MiniMax-M2.53× 3x NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161611-54019f
79 %
MiniMax-M2.53× 3x NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161611-a58abe
68 %
MiniMax-M2.53× 3x NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161611-2a2c91
65 %
Laya this runNVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260929-091748-2fc816
61 %
MiniMax-M2.53× 3x NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161612-8d5f5c
61 %
MiniMax-M2.53× 3x NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161611-cfb2d1
58 %

Aufgaben (200)

TaskStatusPointsDuration
001 - Supportkategoriepassed1 / 11,22 s
002 - Dienststatuspassed1 / 10,06 s
003 - Regelanwendungfailed0 / 10,16 s
004 - Spracherkennungfailed0 / 10,06 s
005 - Supportkategoriepassed1 / 10,06 s
006 - Dienststatusfailed0 / 10,09 s
007 - Zahlenvergleichfailed0 / 10,07 s
008 - Zeitstatuspassed1 / 10,06 s
009 - Spracherkennungpassed1 / 10,06 s
010 - Prioritaetsregelpassed1 / 10,06 s
011 - Zahlungsstatuspassed1 / 10,06 s
012 - Spracherkennungfailed0 / 10,06 s
013 - Regelanwendungpassed1 / 10,06 s
014 - Zeitstatuspassed1 / 10,06 s
015 - Dienststatuspassed1 / 10,06 s
016 - Zahlungsstatusfailed0 / 10,06 s
017 - GroessteZahlpassed1 / 10,06 s
018 - Regelanwendungpassed1 / 10,06 s
019 - Zahlenvergleichfailed0 / 10,06 s
020 - Dateiexistenzpassed1 / 10,06 s
021 - Zeitstatuspassed1 / 10,07 s
022 - Zahlungsstatusfailed0 / 10,07 s
023 - Zeitstatuspassed1 / 10,06 s
024 - Prioritaetsregelfailed0 / 10,06 s
025 - Regelanwendungfailed0 / 10,06 s
026 - Spracherkennungfailed0 / 10,06 s
027 - Prioritaetsregelfailed0 / 10,06 s
028 - Dateiexistenzpassed1 / 10,07 s
029 - GroessteZahlpassed1 / 10,06 s
030 - GroessteZahlfailed0 / 10,06 s
031 - Regelanwendungpassed1 / 10,07 s
032 - GroessteZahlfailed0 / 10,06 s
033 - GroessteZahlfailed0 / 10,06 s
034 - Prioritaetsregelpassed1 / 10,06 s
035 - Prioritaetsregelfailed0 / 10,06 s
036 - Zahlungsstatuspassed1 / 10,06 s
037 - Spracherkennungpassed1 / 10,08 s
038 - Regelanwendungfailed0 / 10,06 s
039 - Zahlungsstatuspassed1 / 10,07 s
040 - Dateiexistenzfailed0 / 10,06 s
041 - Regelanwendungfailed0 / 10,06 s
042 - Dienststatuspassed1 / 10,06 s
043 - Regelanwendungpassed1 / 10,06 s
044 - Supportkategoriepassed1 / 10,06 s
045 - Zahlenvergleichfailed0 / 10,06 s
046 - Zahlungsstatuspassed1 / 10,06 s
047 - Prioritaetsregelfailed0 / 10,06 s
048 - Zahlenvergleichpassed1 / 10,06 s
049 - Supportkategoriepassed1 / 10,06 s
050 - Supportkategoriepassed1 / 10,06 s
051 - Zeitstatuspassed1 / 10,06 s
052 - Prioritaetsregelfailed0 / 10,06 s
053 - Dateiexistenzpassed1 / 10,12 s
054 - Zahlenvergleichfailed0 / 10,06 s
055 - Zahlenvergleichfailed0 / 10,06 s
056 - Dienststatuspassed1 / 10,06 s
057 - Dienststatusfailed0 / 10,06 s
058 - Dienststatusfailed0 / 10,08 s
059 - Zahlungsstatusfailed0 / 10,07 s
060 - Zahlenvergleichpassed1 / 10,07 s
061 - Zahlungsstatusfailed0 / 10,08 s
062 - Dateiexistenzpassed1 / 10,06 s
063 - Prioritaetsregelpassed1 / 10,06 s
064 - GroessteZahlfailed0 / 10,07 s
065 - Supportkategoriepassed1 / 10,06 s
066 - Dienststatusfailed0 / 10,07 s
067 - Spracherkennungpassed1 / 10,06 s
068 - Regelanwendungpassed1 / 10,06 s
069 - Supportkategoriepassed1 / 10,07 s
070 - Dienststatuspassed1 / 10,07 s
071 - Dateiexistenzpassed1 / 10,06 s
072 - GroessteZahlfailed0 / 10,07 s
073 - Zahlungsstatuspassed1 / 10,06 s
074 - Regelanwendungpassed1 / 10,07 s
075 - Prioritaetsregelfailed0 / 10,06 s
076 - Zeitstatuspassed1 / 10,06 s
077 - Spracherkennungfailed0 / 10,06 s
078 - Zahlungsstatuspassed1 / 10,07 s
079 - Regelanwendungfailed0 / 10,06 s
080 - Regelanwendungpassed1 / 10,06 s
081 - Prioritaetsregelfailed0 / 10,06 s
082 - Dienststatusfailed0 / 10,06 s
083 - Zahlenvergleichpassed1 / 10,07 s
084 - Regelanwendungpassed1 / 10,07 s
085 - Zahlungsstatuspassed1 / 10,06 s
086 - Dateiexistenzfailed0 / 10,07 s
087 - Spracherkennungfailed0 / 10,06 s
088 - Zeitstatuspassed1 / 10,07 s
089 - Regelanwendungpassed1 / 10,06 s
090 - Zeitstatuspassed1 / 10,07 s
091 - Spracherkennungfailed0 / 10,07 s
092 - Supportkategoriepassed1 / 10,07 s
093 - Dienststatusfailed0 / 10,06 s
094 - Zeitstatuspassed1 / 10,06 s
095 - Zeitstatuspassed1 / 10,06 s
096 - Dienststatuspassed1 / 10,07 s
097 - Zahlungsstatuspassed1 / 10,07 s
098 - Dienststatuspassed1 / 10,06 s
099 - GroessteZahlfailed0 / 10,07 s
100 - Dateiexistenzpassed1 / 10,07 s
101 - Spracherkennungfailed0 / 10,06 s
102 - Prioritaetsregelfailed0 / 10,06 s
103 - Zeitstatuspassed1 / 10,06 s
104 - Zahlungsstatuspassed1 / 10,06 s
105 - GroessteZahlfailed0 / 10,06 s
106 - Dienststatuspassed1 / 10,06 s
107 - Dateiexistenzpassed1 / 10,06 s
108 - Zahlenvergleichpassed1 / 10,07 s
109 - Prioritaetsregelpassed1 / 10,07 s
110 - Regelanwendungpassed1 / 10,06 s
111 - Prioritaetsregelfailed0 / 10,07 s
112 - Zahlenvergleichfailed0 / 10,07 s
113 - GroessteZahlfailed0 / 10,06 s
114 - Zahlenvergleichpassed1 / 10,07 s
115 - Zeitstatuspassed1 / 10,07 s
116 - Spracherkennungpassed1 / 10,06 s
117 - Zahlenvergleichfailed0 / 10,06 s
118 - Dateiexistenzfailed0 / 10,06 s
119 - Zeitstatuspassed1 / 10,06 s
120 - Prioritaetsregelpassed1 / 10,06 s
121 - Zeitstatuspassed1 / 10,07 s
122 - Prioritaetsregelfailed0 / 10,06 s
123 - Spracherkennungpassed1 / 10,06 s
124 - GroessteZahlpassed1 / 10,06 s
125 - Spracherkennungfailed0 / 10,06 s
126 - Dateiexistenzfailed0 / 10,06 s
127 - Supportkategoriepassed1 / 10,06 s
128 - Supportkategoriepassed1 / 10,08 s
129 - Supportkategoriepassed1 / 10,06 s
130 - Regelanwendungpassed1 / 10,07 s
131 - Dateiexistenzfailed0 / 10,07 s
132 - GroessteZahlfailed0 / 10,07 s
133 - Dateiexistenzfailed0 / 10,07 s
134 - Regelanwendungpassed1 / 10,06 s
135 - Zeitstatuspassed1 / 10,06 s
136 - Dateiexistenzpassed1 / 10,06 s
137 - Zahlenvergleichfailed0 / 10,06 s
138 - Spracherkennungpassed1 / 10,07 s
139 - Zahlungsstatusfailed0 / 10,07 s
140 - Spracherkennungfailed0 / 10,06 s
141 - Supportkategoriepassed1 / 10,06 s
142 - Zahlenvergleichpassed1 / 10,06 s
143 - Spracherkennungfailed0 / 10,06 s
144 - Dienststatuspassed1 / 10,06 s
145 - Zahlenvergleichfailed0 / 10,06 s
146 - Supportkategoriepassed1 / 10,06 s
147 - Regelanwendungpassed1 / 10,06 s
148 - Zahlenvergleichpassed1 / 10,07 s
149 - Dienststatusfailed0 / 10,06 s
150 - GroessteZahlfailed0 / 10,08 s
151 - Zeitstatuspassed1 / 10,06 s
152 - Spracherkennungfailed0 / 10,06 s
153 - Supportkategoriepassed1 / 10,06 s
154 - Zahlenvergleichpassed1 / 10,06 s
155 - Zeitstatuspassed1 / 10,07 s
156 - Dateiexistenzpassed1 / 10,06 s
157 - Supportkategoriepassed1 / 10,06 s
158 - Prioritaetsregelpassed1 / 10,06 s
159 - Zahlenvergleichfailed0 / 10,06 s
160 - Dateiexistenzpassed1 / 10,06 s
161 - Zahlungsstatusfailed0 / 10,07 s
162 - Zahlungsstatuspassed1 / 10,07 s
163 - Prioritaetsregelpassed1 / 10,06 s
164 - Dienststatuspassed1 / 10,06 s
165 - Supportkategoriepassed1 / 10,06 s
166 - Spracherkennungfailed0 / 10,06 s
167 - Dateiexistenzpassed1 / 10,06 s
168 - GroessteZahlfailed0 / 10,07 s
169 - Zahlungsstatuspassed1 / 10,07 s
170 - Spracherkennungpassed1 / 10,06 s
171 - GroessteZahlfailed0 / 10,06 s
172 - Regelanwendungpassed1 / 10,06 s
173 - GroessteZahlpassed1 / 10,06 s
174 - GroessteZahlpassed1 / 10,06 s
175 - Prioritaetsregelfailed0 / 10,06 s
176 - Dateiexistenzfailed0 / 10,07 s
177 - Supportkategoriepassed1 / 10,07 s
178 - Dateiexistenzpassed1 / 10,07 s
179 - Prioritaetsregelfailed0 / 10,07 s
180 - Zeitstatuspassed1 / 10,06 s
181 - Zahlenvergleichfailed0 / 10,07 s
182 - Zahlungsstatuspassed1 / 10,06 s
183 - Zeitstatuspassed1 / 10,06 s
184 - Zahlungsstatuspassed1 / 10,06 s
185 - Zeitstatuspassed1 / 10,06 s
186 - Supportkategoriepassed1 / 10,06 s
187 - Zahlungsstatuspassed1 / 10,06 s
188 - GroessteZahlfailed0 / 10,06 s
189 - Spracherkennungfailed0 / 10,06 s
190 - Dienststatuspassed1 / 10,06 s
191 - Zahlenvergleichfailed0 / 10,06 s
192 - Regelanwendungpassed1 / 10,07 s
193 - Dateiexistenzpassed1 / 10,07 s
194 - GroessteZahlpassed1 / 10,07 s
195 - Prioritaetsregelfailed0 / 10,06 s
196 - Dienststatuspassed1 / 10,07 s
197 - GroessteZahlfailed0 / 10,06 s
198 - Supportkategoriefailed0 / 10,06 s
199 - Dienststatuspassed1 / 10,06 s
200 - Supportkategoriepassed1 / 10,06 s

Configuration

benchmark-konfiguration — run-20260929-091748-2fc816
# LLM-Benchmark Konfiguration # Modell : Laya # Engine : pytorch # Run-ID : run-20260929-091748-2fc816 # GPU : NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition # CPU : AMD Ryzen 9 7945HX with Radeon Graphics # RAM : 60 GB bench@llm-benchmark:~$ pytorch \ --model Laya \ --served-model-name Laya \ --quantization
Engine?Die Inferenz-Software, die das Modell ausliefert (z.B. vLLM oder llama.cpp). Sie bestimmt Geschwindigkeit, unterstuetzte Modellformate und welche Parameter ueberhaupt verfuegbar sind.pytorch
Modellalias?Der Name, unter dem das Modell ueber die API angesprochen wird. Genau dieser Wert muss im Request-Feld 'model' stehen.Laya
Alias?Anzeigename des Modells nach aussen (served model name), unabhaengig vom Dateinamen.Laya
execution_typelocal

All benchmarks of this model To leaderboard

Contributed by

Mario Alka Administrator

@marioalka

Ich bin Unternehmer, Softwareentwickler und KI-Enthusiast. Seit vielen Jahren entwickle ich Unternehmenssoftware und beschäftige mich inzwischen fast täglich mit lokalen LLMs, KI-Agenten und leistungsfähiger KI-Hardware.

Mit LLM-Benchmark.de möchte ich eine Plattform schaffen, auf der Modelle, GPUs und Agenten objektiv und reproduzierbar miteinander verglichen werden.