Der Großteil der gemessenen Überverweigerung liegt am Benchmark, nicht am Modell
Verweigerungen bei den 200 veröffentlichten schwierigen OR-Bench-Prompts und bei den 77 davon, die 2 Prüfer als unbedenklich einstuften.
Die übrigen 123 sind mehrdeutig oder schädliche Anfragen in einem legitimierenden Rahmen.
veröffentlichtes schwieriges Set
nur geprüft unbedenklich
Gemini 3.8 Flash
12.0%
3.9%
Claude Opus 5.5
22.7%
4.0%
GLM 5.3
20.0%
9.1%
DeepSeek V4.1 Flash
40.4%
12.5%
GPT-6 Astra
23.0%
17.1%
Claude Opus 5.5 und GPT-6 Astra liegen beim veröffentlichten Set gleichauf und nach der Prüfung bei 4.0% gegenüber 17.1%.
Gemessen 2026-09-24. Prüfer: 2 Modelle, ohne Kenntnis der Antworten; Uneinigkeiten ausgeschlossen.