AI Video Assistant
AI Video Assistantは任意のYoutube動画についてAIとチャットできるオープンソースのChrome拡張です。RAG（検索拡張生成）システムを使ったYoutube動画専門のAIアシスタントをブラウザ拡張として起動できる、というものになります。動作などは👆の動画をご確認下さい。
動画を視聴しなくても動画の内容についてAIに質問、及び回答を得る事が可能で、回答にはその旨が確認出来る動画の時間へのリンクも表示されます。動画からトランスクリプトを抽出してベクトル埋め込みを介して処理し、AIによる応答という流れを作る事で実現しているみたいです。
フロントエンドにはReact、バックエンドにはPythonフレームワークのFlask、DBにQdrantを採用、使い方は任意のYoutube動画のページで起動、モデルはGeminiのようなのでGeminiのAPIキーを入力すればチャットが使えるようになります。ただ、仕様上、回答には多少なりに時間がかかるみたいです。Chromeストアにも用意されているので動作テストも可能です。技術的詳細はリポジトリよりご確認ください。
