ClaudeやLLMに動画を効率的に「見せる」ためのローカルツール「claude-real-video」

概要

シーン検知と重複排除により、LLMが最小限のトークンで動画内容を深く理解できるように最適化されたフレーム抽出・文字起こしツール。

詳細内容

claude-real-videoは、ClaudeやChatGPT、GeminiなどのLLMに動画内容を「見せる」ためのオープンソースツールです。従来の固定間隔でのフレーム抽出とは異なり、シーンの変化を検知して重要なフレームのみを抽出し、ピクセルベースの重複排除を行うことで、トークン消費を抑えつつ情報の欠落を防ぎます。主な特徴： - **高度なフレーム抽出**: シーン変更検知とスライディングウィンドウによる重複排除により、静止画の多いプレゼン動画などは1枚に、動きの激しい動画は詳細にキャプチャします。 - **マルチモーダル対応**: 動画のフレーム抽出に加え、Whisperによる音声文字起こし、グリッド形式（コンタクトシート）での画像統合をサポート。 - **ローカル・プライバシー重視**: すべての処理はローカルで実行され、LLMへは最適化されたデータのみを送信します。 - **Claude Code統合**: Claude Codeの「スキル」としてインストール可能で、対話型AIに直接動画URLを渡して分析させることができます。 - **目的別分析**: `--why`フラグで分析の意図を指定でき、特定の情報を探すなどのコンテキストをLLMに提供可能です。

元記事を読む他のサマリーを見る