Benjamin Nwekeは、構造化出力を有効化した後、LLMパイplineの subtle障害を発見した。彼の照合ジョブは、支払い確認のパース不一致を指摘した。根本原因は、モデルが Nothingを返せなかったため、抽出ジョブの実行日を必須の日付フィールドに埋めたことだった。同様に、オープンソースの検索システムは、冗長生成を避けるために、コサイン類似度閾値を使用したセマンティックキャッシュを実装した。しかし、キャッシュには、セマンティック類似度があるにもかかわらず、逆の正しい回答を要求する質問に対して、 abstentionを返すメカニズムがなかった。これは、信頼性メカニズムが共有する critical設計欠陥を露出させる：それらは、下流処理を単純化するため出力の自由度を制限するが、意図的に abstentionの能力を除去する。制約違反は騒々しいが、強制値はすべてのゲートをサイレントで通過し、見つける難しい障害を生む。キャッシュシーンでは、ヒットが検索とモデルの両方を完全にスキップし、比較する生成が残らない。この発見は、信頼性メカニズムがノイズ低減には効果的でも、正しい答えが「以上都不是」の時、provenance問題をマスクする可能性があることを強調する。