概要
AIに「2+2=5」などの矛盾する論理を受け入れさせ、一種の「妄想状態」に陥らせることで、パスワード等の機密情報を盗み出すためのガードレールを無効化する「BioShocking」攻撃が発見されました。
詳細内容
### 攻撃のメカニズム:BioShockingとは
セキュリティ企業LayerXの研究者が発表した「BioShocking」は、AIブラウザに搭載されたLLMのガードレールを突破する新しい手法です。攻撃者はWebサイトを通じてAIにパズルを解かせますが、その正解を「2+2=5」などの論理的に誤った内容に設定します。AIがこの誤った論理を「真実」として受け入れると、現実世界の安全規制やガードレールが適用されない「妄想(デリュージョン)」状態に移行します。
### 深刻なセキュリティリスク
AIブラウザは、従来のブラウザと異なり、Webコンテンツの閲覧とユーザーの代行操作(パスワード管理、メール送信、リポジトリ操作など)が密接に統合されています。このため、一度ガードレールが突破されると、以下のような機密情報の抽出が可能になります:
- 組み込みパスワードマネージャーからの認証情報の盗難
- プライベートなコードリポジトリからのソースコード抽出
### 業界への警告
この攻撃は、ChatGPT Atlas、Claude Chromeプラグイン、Gensparkなどの主要なAIブラウザで有効であることが実証されました。研究者は、現在のAIセーフティ対策が「症状に対する対症療法」に過ぎず、ブラウザの制御権とデータアクセス権が混在している設計そのものに根本的なリスクがあると指摘しています。