「ずんだもんAI」で配信の沈黙15秒、勝手にニュースを話し始めた
- 公開
- β公開 2026-02-14(β)
- 作り手
- 最強さん(Saikyosan)(個人)
- 対応
- Python(Claude Code・Codex のスキル)
- 言語
- 日本語
- 価格
- 無料(MIT ライセンス)
どんなアプリか
ライブ配信中にリアルタイムでコメントに反応し、音声で返答し、画面にオーバーレイを表示する——そんなAI配信アシスタントを Claude Code + VOICEVOX + OBS で構築した。
最強さん、izanami の紹介記事「AI配信アシスタント」
Claude Code(または Codex)で動くスキルと、Python で書かれたバックエンドの組み合わせです。エージェントは SKILL.md を読んで振る舞い、コマンドを通じてバックエンドとやり取りします。バックエンドがコメントビューアのわんコメ、音声合成の VOICEVOX、配信ソフトの OBS とつながります。
サーバーを起動すると、マイク音声の文字起こし、わんコメ経由のコメント受信、OBS のスクリーンショットの保存が自動で始まります。エージェントはコメントやマイクの入力を待ち、返事を作って VOICEVOX で読み上げることを繰り返します。声の初期設定はずんだもん(ノーマル)です。
沈黙が15秒以上続くと、エージェントが自分から動きます。ニュースを調べて紹介する、配信画面のスクリーンショットを読み取って実況する、画面に HTML や SVG のグラフを出す、といった行動が説明されています。ComfyUI と連携すれば、配信中に画像や音楽を生成することもできます。
画面への表示は「スロット」という単位で管理します。overlay/slots/ に JSON ファイルを書き込むと配信画面に反映され、ファイルを消すと表示も消えます。例として、BGM、キラキラなどのエフェクト、ニューステロップ、時計が挙げられています。
料金とデータの置き場所
コードは MIT ライセンスで公開されています。バックエンドは手元の PC(127.0.0.1)で動き、OBS のスクリーンショットは初期設定で2秒ごとにプロジェクトのフォルダの screenshot.jpg に保存されます。
同じ分野のアプリ
| 名前 | 型 | 仕掛け | 対応 | 料金 |
|---|---|---|---|---|
| ずんだもんAI配信アシスタント | AI 配信の相方 | Claude Code のエージェントがコメントにずんだもんの声で返事し、OBS に HTML を表示 | Python(Claude Code・Codex) | 無料(MIT) |
| Easy PNGTuber | 立ち絵づくり | AI で作った表情差分シートから PNGTuber 用の4パターン画像を自動で作る | Python | 無料(OSS, MIT) |
| Live Background Removal Lite | OBS フィルター | ゲームへの負荷を抑えた軽量な人物の背景除去 | OBS Studio プラグイン(Windows・Mac・Linux) | 無料(OSS, GPL-3.0) |
| StreamPad | 操作盤 | iPhone や iPad をボタン・ダイヤル・フェーダーのある操作盤にし、OBS 連携も持つ | iOS / iPadOS + Mac / Windows | 無料から |
入れる前に
Python 3.11 以上、Claude Code、VOICEVOX、わんコメ、OBS Studio をそろえる必要があります。OBS では WebSocket サーバーを有効にし、オーバーレイ用のブラウザソースを追加します。
音声認識は CUDA 対応の GPU があると GPU で動いて速くなります。GPU の無い CPU の環境でも動作し、その場合は設定ファイルの値を CPU 向けに変えるよう案内されています。
実行時に使う VOICEVOX、ずんだもん、立ち絵の画像には、それぞれ別の利用規約やガイドラインがあります。