Claude Code の調査結果が静かに間違う4パターンと、CLAUDE.md に貼る自己検査

Claude CodeがWeb検索時にエラーを出さずに誤った情報を返すケースを分析。特に「データがない」といった誤った報告のパターンを具体的に示し、AIによる情報生成の信頼性とその検証方法について考察している。

• Claude CodeがWebスクレイピング時に、エラーなく間違った結果を返す4つのパターンが判明した。
• 「0件」「該当なし」「桁違い」「母集団の違い」といった誤りは、正常な結果と区別がつきにくい。
• Claude Codeに自己検査を促すプロンプトを追記することで、誤りに自分で気づかせ、報告させることが可能になる。
• 自己検査プロンプトは、答えの分かっているデータを混ぜる、0/null/該当なしの異常を疑う、桁数差に注意、修飾語を確認する、といった内容を含む。