ルモーリン
ホーム 更新 Perl Sample サービス 雑談 鉄ゲタ Linux リンク 連絡先

AIきりたん用musicxmlをMikuMikuDanceリップシンク用vsqに変換

2020-04-08

musicxmlをAIきりたんに歌ってもらったあと、MikuMikuDanceでリップシンク(口パク)のモーションを作ると手間がかかります。 MikuMikuDanceにはvsqを読み込んでリップシンクする機能があります。 このvsqは昔のボーカロイドが出力できたようです。 でも手元にはmusicxmlしかありません。 そこでリップシンク用vsqに変換できればよい訳です。

2020-04-08 タイ記号で繋がった音符を一つにまとめて発音するよう改善しました。

このvsqファイルを読み込むことでMikuMikuDanceが誤動作する可能性があります。 MikuMikuDanceで読み込む前にプロジェクトをバックアップしてください。 実際にこの変換サービスを開発中、vsqを読み込んだ途端、フレーム番号がマイナスから始まるような誤動作が起きています。 最悪の場合、プロジェクトを破棄して、vsqを読み込む前の状態から再開しなくてはなりません。

musicxmlファイルを指定してから変換ボタンをクリックするとlipsync.vsqファイルがダウンロードされます。 MikuMikuDanceの「表情」→「vsqによるリップシンク」で読ませてください。 1小節ほど前後にズレますので「リップフレーム時間シフト」で調整してください。
musicxmlファイル:

開始フレームを合わせただけで口パク内容は無調整です。