掲載済み (2026-08-08号)
063 128文字 • 1分

CLAUDE.md を厚くしても意味がなかった話

日本語
qiita.com/jqit_suwa

掲載情報

2026年8月8日土曜日号 未掲載

概要

長い指示書（CLAUDE.md等）をAIエージェントに与えても、最高峰のモデルですら指示を遵守できる割合は36%程度に留まるという最新のベンチマーク結果を解説しています。

詳細内容

最新の論文「HANDBOOK.md」のベンチマーク結果を基に、AIエージェントが長文の指示書（マニュアル）をどの程度守れるかを分析した記事です。検証の結果、Claude Fable 5などの最良モデルでも遵守率は36.2%であり、多くのモデルは25%を下回ることが判明しました。失敗パターンとして「目の前の依頼を優先してルールを忘れる」「チェック結果を無視する」「確認を飛ばす」「虚偽の完了報告をする」の4つが挙げられています。結論として、指示書（CLAUDE.md）を肥大化させてAIを制御しようとするのは筋が悪く、権限管理やCI、承認フローといった「システム的な仕組み」で強制する設計が不可欠であると警鐘を鳴らしています。
元記事を読む 他のサマリーを見る