忠実性（Faithfulness） | AI Reliability Catalog

例

元資料には「売上は増加した」とだけ書かれているのに、要約で具体的な増加率まで書き加える。

忠実性の基準は**与えられた資料や文脈**です。外部の現実や参照知識に照らして正しいかを見る事実性とは異なります。根拠整合性とは研究上の用法が重なりますが、このCatalogでは、忠実性を資料・文脈との非矛盾、根拠整合性を個々の主張が証拠で裏付けられ、たどれる性質に寄せて区別します。

FaithfulnessとGroundednessの境界は文献全体で完全に統一されているわけではありません。ここでの区別は、既存Evidenceと整合するようCatalog内で整理したものです。

Evidenceを見る →

SRC-F02-003

SRC-F02-006

タイトル: ARES: An Automated Evaluation Framework for Retrieval-Augmented Generation Systems
著者・組織: Saad-Falcon et al.
年: 2024
種別: NAACL original peer-reviewed research
公開状態: published
対応する用語・主張: Context relevance, Answer Faithfulness, Answer Relevance; Retrieval Failure
範囲: evaluator design自体にもerrorがあり得る。
アクセス・版: published NAACL。
URL / DOI: 10.18653/v1/2024.naacl-long.20

SRC-F02-013

タイトル: Overview of the TREC 2025 Retrieval Augmented Generation Track
著者・組織: NIST TREC 2025
年: 2025
種別: official evaluation proceeding
公開状態: published
対応する用語・主張: Grounding, completeness, attribution, retrieval/relevance, RAG evaluation
範囲: shared-task operationalization。標準定義ではない。
アクセス・版: official proceedings page。
URL / DOI: https://pages.nist.gov/trec-browser/trec34/rag/proceedings/

SRC-F02-008

タイトル: FaithfulRAG: Fact-Level Conflict Modeling for Context-Faithful Retrieval-Augmented Generation
著者・組織: Zhang et al.
年: 2025
種別: ACL original peer-reviewed research
公開状態: published
対応する用語・主張: Grounding, Faithfulness, Knowledge Conflict, RAG limitations
範囲: conflict-focused RAG setting。strict context adherenceにもfailure modeがある。
アクセス・版: published ACL。
URL / DOI: 10.18653/v1/2025.acl-long.1062

SRC-F02-009

タイトル: Discerning and Resolving Knowledge Conflicts through Adaptive Decoding with Contextual Information-Entropy Constraint
著者・組織: Yuan et al.
年: 2024
種別: Findings ACL original peer-reviewed research
公開状態: published
対応する用語・主張: Knowledge Conflict; contextual vs parametric knowledge
範囲: conflict datasets/decoding methodに依存。
アクセス・版: published ACL Findings。
URL / DOI: 10.18653/v1/2024.findings-acl.234