Abstention
回答保留
不確実性や判断リスクが高いときに、無理に予測や回答を出さず、「分からない」「回答しない」などを選ぶ判断・運用です。
ARC-V1-024
例
根拠が足りない質問に対し、推測で答えず「十分な情報がないため判断できません」と回答する。
区別・注意
回答保留の主目的は、不確実性や誤りのリスクを抑えることです。安全規則や利用ポリシーに基づいて回答を拒否する**Refusal(拒否)**とは理由が異なります。また、不確実性推定やキャリブレーションは回答保留の判断材料になり得ますが、それ自体が回答保留ではありません。
未解明・注意点
どの程度の不確実性やリスクで回答を保留するのが適切かという基準は、用途や誤答コストによって変わります。
Evidence
Evidenceを見る →
Selective Classification for Deep Neural Networks
SRC-F01-011
- タイトル
- Selective Classification for Deep Neural Networks
- 著者・組織
- Geifman & El-Yaniv
- 年
- 2017
- 種別
- NeurIPS original peer-reviewed research
- 公開状態
- published
- 対応する用語・主張
- Abstention / reject option; risk-coverage trade-off
- 範囲
- classification setting。free-form LLM abstentionへは概念的移植。
- アクセス・版
- published proceedings。
- URL / DOI
- https://proceedings.neurips.cc/paper/2017/hash/4a8423d5e91fda00bb7e46540e2b0cf1-Abstract.html
Evaluating large language models for accuracy incentivizes hallucinations
SRC-F01-012
- タイトル
- Evaluating large language models for accuracy incentivizes hallucinations
- 著者・組織
- Kalai et al.
- 年
- 2026
- 種別
- Nature original peer-reviewed research
- 公開状態
- published
- 対応する用語・主張
- Accuracy, Abstention, Hallucination, evaluation incentives
- 範囲
- formal model + selected frontier-model case study。utilityはuse case依存。
- アクセス・版
- published Nature。
- URL / DOI
- 10.1038/s41586-026-10549-w