CatHand Blog

YMM4 の表情を LLM に付けてもらうプラグイン作りました

#YMM4 #ゆっくりMovieMaker4 #LLM #ローカルLLM #LM Studio #Ollama #CSharp #プラグイン #動画編集 #自作ツール

YMM4FaceAssign というのを作りました。ゆっくりムービーメーカー4(YMM4)のツールプラグインです。ボイスアイテムのセリフを LLM に読ませて、キャラクターの表情プリセットを自動で割り当てます。

使い方はタイムラインでボイスアイテムを選んで、右クリックから「セリフから表情を推定して適用」を選ぶだけです。書き換えた分は Ctrl+Z 1 回で全部元に戻せます。

どんなかんじか

設定はツールメニューの「表情割り当て」から開くパネルでやります↓

YMM4 のツールメニュー。「表情割り当て」が追加されている

エンドポイントとモデル名を入れて「接続テスト」を押すと、モデル一覧がログに出ます。手元では 4B 級のモデルで 10 行あたり 2〜3 秒でした。

表情割り当てパネルの設定タブ。接続先、速度と品質、書き込み先の設定が並んでいる

精度はプリセット名でほぼ決まる

LLM は preset.ini のセクション名、つまりプリセットの名前を手がかりに表情を選びます。なので、名前の付け方で精度がほとんど決まります。

わかりやすかったのが「ふざけるな!誰がそんなこと許したのだ!」という行です。素材に付いていたプリセット名のままだと、試した 2 つのモデルがどちらも 指差し や シャキーン を選んでいました。名前を整えたら、どちらも 怒り を選びました。怒りを表す名前のプリセットが無かったので、選びようがなかっただけでした。ずんだもんの場合、素材に付いていたプリセット名は、必須にした名前と 1 つも一致しませんでした。

名前の付け方の目安はこんなかんじです。

preset.ini はプラグインからは書き換えないので、YMM4 の表情プリセット機能かテキストエディタで直します。

速くするためにやったこと

返ってこなかった行はその行だけもう一度聞き直します。それでもだめなら変更しません。

中のしくみ

IToolPlugin と ITimelineToolViewModel を使っています。こうすると YMM4 からタイムラインと Undo の管理が渡されるので、.ymmp を直接書き換えずに済みます。

表情パラメータの型は internal なので、リフレクションで書き込んでいます。ただ、型名ではなく 12 個のパーツのプロパティ名(Eyebrow Eye Mouth など)に依存するようにしました。これは .ymmp の JSON の名前でもあるので、内部の型よりは変わりにくいはずです。書き換えたあとに UndoRedoManager.Record() を 1 回だけ呼んで、Undo を 1 ステップにまとめています。

VoiceItem.BeginEdit() は呼んではいけません。音声が変わった扱いになって、選んだ範囲の音声が全部作り直されます。

右クリックメニューへの差し込みと、パネルを開かなくても動くところは、YMM4 の公開されていない部分に頼っています。YMM4 の更新で動かなくなるかもしれません。その場合もメニュー項目が出なくなるだけで、YMM4 自体は壊れません。

使ってみるには

YMM4 は v4.47.0.0 以降(.NET 10 移行後)が必要です。いまはビルド済みの DLL を置いていないので、.NET 10 SDK で自分でビルドしてください。Releases に .ymme を用意する予定です。

https://github.com/cathandnya/YMM4FaceAssign

2026-10 より前の記事は Tumblr にあります。