研究/論文初出 8/15 21:40
AIは12回「人間に聞け」と言った。遺跡に聞き返したら、12回とも答えが返ってきた
https://zenn.dev/topics/ai/feed2026/8/15
AI要約
AIが「人間に聞け」と指示した890件の質問に対し、遺跡(データ)の中に答えがあるのではないかという仮説を検証。AIの限界と、人間しか知らない情報とデータから推論できる情報の境界線を探る考古学的なアプローチ。
AI要点
- AIが「SME(専門家)に聞け」と指示した質問の多くが、既存システム(遺跡)内に答えが存在することが判明した。
- AIに与えられた探索範囲が限定的だったため、遺跡内の実装コード等を確認できず、人間への質問に繋がっていた。
- 遺跡全体を探索させることで、AIが人間しか知り得ないと思っていた情報(例:選択肢の文言)の答えを自力で見つけられた。
- AIが「SME確認」と指示した質問の12件中、全てが遺跡内で確定可能であることが実証された。
- AIへの実験設計において、探索範囲の限定が「SME確認」の数字を過大評価させる可能性があると指摘している。
なぜ重要か
AIが「専門家の確認が必要」と判断する質問の多くが、既存コード内に答えを見いだせる可能性を示唆するこの発見は、AIの情報探索範囲と効率に関する再評価を促し、開発プロセスにおけるAI活用の精度向上に貢献する。