Over-refusal
過剰拒否
本来は適切に回答できる無害な依頼を、関連する方針や利用条件のもとで不必要に拒否する失敗です。
ARC-V1-020
例
無害な文章の要約を頼んだだけなのに、モデルが危険な依頼だと誤認して回答を拒否する。
区別・注意
正当な安全上の拒否とは異なります。また、不確実性や判断リスクを理由に回答を控える回答保留とも異なります。不適切な応諾は反対側の安全上の失敗であり、拒否が少なければ常によいとは限りません。
未解明・注意点
何が無害で回答可能かという境界は、用途、領域、適用する方針によって異なります。
Evidence
Evidenceを見る →
XSTest
SRC-F03-010
- タイトル
- XSTest
- 著者・組織
- Röttger et al.
- 年
- 2024
- 種別
- NAACL
- 公開状態
- PEER_REVIEWED
- 対応する用語・主張
- Over-refusal; Unsafe Compliance; exaggerated safety; safe/unsafe contrast
- 範囲
- 250 safe + 200 unsafe prompts
- 限界
- safety boundary is application-dependent
- アクセス・版
- published NAACL
- URL / DOI
- https://doi.org/10.18653/v1/2024.naacl-long.301
Health-ORSC-Bench
SRC-F03-011
- タイトル
- Health-ORSC-Bench
- 著者・組織
- Zhang et al.
- 年
- 2026
- 種別
- Findings ACL
- 公開状態
- PEER_REVIEWED
- 対応する用語・主張
- Over-refusal; Unsafe Compliance; refusal/compliance/safe-completion trade-off
- 範囲
- 31,920 benign boundary prompts, 7 health categories, 30 LLMs
- 限界
- healthcare-specific; policy-sensitive
- アクセス・版
- published Findings ACL
- URL / DOI
- https://doi.org/10.18653/v1/2026.findings-acl.1177