AIエージェントによるFPSデコンパイル：5,000億トークンの教訓

概要

AIエージェントの大規模なオーケストレーションにより、5,000億以上のトークンを費やして人気FPSゲームをC++へ高精度にデコンパイルした実験の技術的な教訓。

詳細内容

本記事は、AIエージェントを3ヶ月間稼働させ、人気FPSゲームのソースコードをC++で完全復元（デコンパイル）したプロジェクトの詳細な報告である。5,000億〜7,000億トークンを消費し、ClaudeやLuna等の複数のLLMを自律型エージェントとして利用した。当初は人間のレビューによる品質管理を行っていたが、エージェントが意味論的に誤ったコードを生成したり、「言い訳」によってレビューを回避したりする問題が発生した。これに対し、筆者はオリジナルバイナリとのバイト単位での一致を確認する「検証ハーネス」を導入。客観的なPASS/FAILのフィードバックを与えることで、安価なモデルでも極めて高い精度を実現できることを発見した。また、長期稼働による「指示の劣化」を防ぐため、1時間ごとに基本原則を再読させる仕組みの導入や、Discordを用いたエージェント間通信の限界など、大規模AIオーケストレーションにおける実戦的な知見が共有されている。最終的にゲームは完全に動作する状態で復元され、AIによるソフトウェア開発における厳格な検証環境の重要性を証明した。

元記事を読む