概要
LLMと強化学習を活用し、CADの新規生成と修正・編集プロセスを一つのエージェントに統合することで、高度に制御可能で忠実な3Dモデリングを実現するフレームワーク「PR-CAD」の提案。
詳細内容
### 概要
本研究は、大規模言語モデル(LLM)を用いてテキストからCADモデルを生成する際の「生成と編集の分断」という課題を解決する、新たなフレームワーク「PR-CAD」を提案しています。従来の手法では初期生成と後からの修正が個別のタスクとして扱われてきましたが、本手法はこれらを単一のプロセスとして統合します。
### 技術的ブレイクスルー
1. **統合型プログレッシブ・リファインメント**: 生成と編集をシームレスに統合し、ユーザーとの対話を通じて設計を洗練させる「オールインワン」の解決策を提供します。
2. **高品質な対話データセット**: CADのライフサイクル全体をカバーし、定性的・定量的な記述を含む高忠実なインタラクションデータセットを構築。これにより、人間のような自然な編集操作の学習を可能にしました。
3. **強化学習による推論の強化**: 意図の理解、パラメータ推定、編集箇所の特定を最適化するために強化学習を導入。LLMベースのエージェントが、より精密にCADコードを操作できるよう設計されています。
### 成果と意義
公開ベンチマークにおける実験の結果、PR-CADは生成と修正の両方において、従来技術を凌駕する制御性と忠実性(Faithfulness)を達成しました。専門知識が必要なCADモデリングの敷居を下げ、設計効率を大幅に向上させる可能性を示しています。