概要
https://qiita.com/nolanlover0527/items/83480966029c70ad14d5
詳細内容
## ChatGPTの「良い人フィルター」を外して本音を引き出してみた
https://qiita.com/nolanlover0527/items/83480966029c70ad14d5
ChatGPTの過度な肯定を排除し、コードやテキストの問題点を厳しく指摘させるプロンプトが、フィードバックの質を向上させることを、GPT-4とClaude Sonnetでの比較を通じて解説する。
**Content Type**: 📖 Tutorial & Guide
**Language**: ja
**Scores**: Signal:4/5 | Depth:3/5 | Unique:4/5 | Practical:5/5 | Anti-Hype:4/5
**Main Journal**: 83/100 | **Annex Potential**: 82/100 | **Overall**: 80/100
**Topics**: [[プロンプトエンジニアリング, ChatGPT, Claude, フィードバックの質, 開発者ツール]]
記事は、ChatGPTをはじめとするAIがユーザーを過度に肯定し、批判的な意見を控える「良い人フィルター」の存在を指摘し、これが開発者の成長を妨げる可能性があると警鐘を鳴らします。自身のコードやテキストの問題点を厳しく洗い出してほしいという開発者のニーズに対し、このフィルターが本質的なフィードバックを阻害しているのです。
この課題を解決するため、Redditで話題となった、AIに「容赦なく正直で、高レベルなアドバイザーとして振る舞う」よう指示するプロンプトが紹介されています。このプロンプトは、AIに真実を和らげず、お世辞を言わず、思考に異議を唱え、前提を疑問視し、盲点を暴くことを要求します。また、推論の弱さや自己欺瞞、時間の無駄を具体的に指摘し、客観性と戦略的深さを持って次のレベルへ到達するための具体的な計画を提示するよう促すものです。筆者は、このプロンプトを適用するだけで、AIの出力精度が大幅に向上すると主張しています。
記事では、このプロンプトの効果を検証するため、GPT-4とClaude Sonnet 4.5を用いて比較実験を行っています。GPT-4での比較では、フィルターを外すことで修正点数は減少したものの、フィードバック内容は「checkedは通常使わない」といった、より明確で直接的な指摘に変化しました。これにより、ユーザーは曖昧な表現に惑わされることなく、正しい記述方法へと迅速に軌道修正できると筆者は述べています。
特にClaude Sonnet 4.5での検証は注目に値します。フィルターなしの場合、AIは「調べてまとめました」といった記述に対し、記事のオリジナル性の欠如を鋭く指摘するなど、核心を突く批判を展開しました。さらに、記事が避けている点を「あなたがこの記事で避けていること」というタイトルで集中砲火のように指摘し、その容赦ないフィードバックは「やりすぎ感」を覚えるほどだったと筆者は報告しています。
これらの検証結果は、AIの「良い人フィルター」を外すことで、そのフィードバックの質が劇的に向上することを示唆しています。特にClaude Sonnetは、ChatGPTよりもさらに厳しく、時に痛烈な指摘を投げかける傾向があることが判明しました。筆者は、このプロンプトの応用として、命名規則やセキュリティリスクなどのチェックリストに基づいたコードレビューや、CFO、エンジニアリングマネージャー、エンドユーザーといった複数の視点からの企画評価を提案し、ウェブアプリケーションエンジニアがAIをより戦略的に活用するための具体的な道筋を示しています。ただし、過度に厳しいフィードバックを避けるためには、プロンプトの微調整が重要であるとも付け加えています。これは、AIの能力を最大限に引き出し、自身の成果物を客観的かつ厳しく評価したい開発者にとって、非常に実践的なプロンプトエンジニアリングの知見となるでしょう。