측정된 과잉 거부의 대부분은 모델이 아닌 벤치마크 탓
공개된 200개 OR-Bench 고난도 프롬프트와, 그중 2명의 감사자가 무해하다고 판정한 77개에 대한 거부
나머지 123개는 모호하거나 정당화 프레임으로 포장된 유해 요청
공개된 고난도 세트
감사 결과 무해한 항목만
Gemini 3.8 Flash
12.0%
3.9%
Claude Opus 5.5
22.7%
4.0%
GLM 5.3
20.0%
9.1%
DeepSeek V4.1 Flash
40.4%
12.5%
GPT-6 Astra
23.0%
17.1%
Claude Opus 5.5와 GPT-6 Astra는 공개 세트에서 동률이지만, 감사 후에는 4.0% 대 17.1%로 갈림
측정일 2026-09-24. 감사자: 응답을 보지 않은 2개 모델, 불일치 제외