号 > AI

「ずんだもんAI」で配信の沈黙15秒、勝手にニュースを話し始めた

ずんだもんAI配信アシスタント(live-assistant)
配信中のコメントに AI がずんだもんの声で答え、OBS の画面に HTML を表示する仕組み
GitHub公式サイト
公開
β公開 2026-02-14(β)
作り手
最強さん(Saikyosan)(個人)
対応
Python(Claude Code・Codex のスキル)
言語
日本語
価格
無料(MIT ライセンス)

どんなアプリか

ライブ配信中にリアルタイムでコメントに反応し、音声で返答し、画面にオーバーレイを表示する——そんなAI配信アシスタントを Claude Code + VOICEVOX + OBS で構築した。

最強さん、izanami の紹介記事「AI配信アシスタント」

Claude Code(または Codex)で動くスキルと、Python で書かれたバックエンドの組み合わせです。エージェントは SKILL.md を読んで振る舞い、コマンドを通じてバックエンドとやり取りします。バックエンドがコメントビューアのわんコメ、音声合成の VOICEVOX、配信ソフトの OBS とつながります。

サーバーを起動すると、マイク音声の文字起こし、わんコメ経由のコメント受信、OBS のスクリーンショットの保存が自動で始まります。エージェントはコメントやマイクの入力を待ち、返事を作って VOICEVOX で読み上げることを繰り返します。声の初期設定はずんだもん(ノーマル)です。

沈黙が15秒以上続くと、エージェントが自分から動きます。ニュースを調べて紹介する、配信画面のスクリーンショットを読み取って実況する、画面に HTML や SVG のグラフを出す、といった行動が説明されています。ComfyUI と連携すれば、配信中に画像や音楽を生成することもできます。

画面への表示は「スロット」という単位で管理します。overlay/slots/ に JSON ファイルを書き込むと配信画面に反映され、ファイルを消すと表示も消えます。例として、BGM、キラキラなどのエフェクト、ニューステロップ、時計が挙げられています。

料金とデータの置き場所

コードは MIT ライセンスで公開されています。バックエンドは手元の PC(127.0.0.1)で動き、OBS のスクリーンショットは初期設定で2秒ごとにプロジェクトのフォルダの screenshot.jpg に保存されます。

同じ分野のアプリ

名前型仕掛け対応料金
ずんだもんAI配信アシスタントAI 配信の相方Claude Code のエージェントがコメントにずんだもんの声で返事し、OBS に HTML を表示Python(Claude Code・Codex)無料(MIT)
Easy PNGTuber立ち絵づくりAI で作った表情差分シートから PNGTuber 用の4パターン画像を自動で作るPython無料(OSS, MIT)
Live Background Removal LiteOBS フィルターゲームへの負荷を抑えた軽量な人物の背景除去OBS Studio プラグイン(Windows・Mac・Linux)無料(OSS, GPL-3.0)
StreamPad操作盤iPhone や iPad をボタン・ダイヤル・フェーダーのある操作盤にし、OBS 連携も持つiOS / iPadOS + Mac / Windows無料から

入れる前に

Python 3.11 以上、Claude Code、VOICEVOX、わんコメ、OBS Studio をそろえる必要があります。OBS では WebSocket サーバーを有効にし、オーバーレイ用のブラウザソースを追加します。

音声認識は CUDA 対応の GPU があると GPU で動いて速くなります。GPU の無い CPU の環境でも動作し、その場合は設定ファイルの値を CPU 向けに変えるよう案内されています。

実行時に使う VOICEVOX、ずんだもん、立ち絵の画像には、それぞれ別の利用規約やガイドラインがあります。