概要
最新モデルClaude Fable 5のReact実装能力を13の指標で評価した結果、Opus 4.8の通常設定を上回るものの、高思考設定(max effort)には及ばないことが判明しました。
詳細内容
エンジニアのuhyo氏による独自ベンチマーク「React Profession Bench」の第8回レポート。最新のClaude Fable 5を評価した結果、総合スコアは81.33となり、前世代のOpus 4.8 (default) を上回りましたが、Opus 4.8 (max effort) の84.03には届きませんでした。
### 主な分析結果
- **進化点**: 状態モデリングやReact 19の最新イディオム(`<Context value>`短縮記法等)の採用、アクセシビリティへの配慮に地力の向上が見られます。
- **弱点**: 複雑なコンポーネント設計や、再利用可能なパーツへの適切な分解能力。これはモデルの「世代」よりも「思考量(effort)」に依存する性質が強いと分析されています。
- **APIの死角**: `useTransition`や`useOptimistic`といった並行レンダリング関連のAPIは、新世代モデルでも依然として活用できていない状況です。
### 結論
Fable 5は正常進化を遂げているものの、コスト効率の観点では既存モデルの思考設定を上げた方が高いパフォーマンスを発揮するケースがあることが示唆されました。