最も懸念されるAIのエラーは明白なものではありません。それらは注意深く、構造化され、ほぼ正しいと思われる回答です。そのトーンと真実の間の静かなギャップが信頼が弱まり始めるところです。
今日は、大規模言語モデルが検索、金融、コーディング、カスタマーサポートシステム全体で毎日数十億のプロンプトを処理しています。もしその日々のボリュームの中で1パーセントでも意味のある不正確さが含まれている場合、その結果は何百万もの欠陥のある出力が実際の決定を通過することになります。規模が大きくなると、小さなエラー率は構造的リスクになります。