Ctrl Menu
Web Portal
10:33 May 15, 2021
文章からモーションを生成出来るColabページを作ってみた【ツール配布】【Text2Motion ver1.00.00】
Web Portal
_ Minimize
Full View
Guide View
Open
Back
Forward
Go
|<
>
O
>|
10:33 / 11:11
文章からモーションを生成出来るColabページを作ってみた【ツール配布】【Text2Motion ver1.00.00】 @mius7135
updated 3 years ago
文章からモーションを生成出来るColabページを作ってみた【ツール配布】【Text2Motion ver1.00.00】
miu s 2022-10-25 | I made a Colab page that can generate motion from text 文章からモーションを自動生成し、それをJSONやVMDモーションに変換するColabページを作ってみました! ・モーションプロンプト(どのような動作をするかの指示文)を任意入力OK ・モーションプロンプト自動翻訳機能あり ・モーション秒数指定OK -------- I made a Colab page that automatically generates motions from sentences and converts them to JSON and VMD motions! ・Optional input OK for motion prompts (instructions for what actions to take) ・Motion prompt automatic translation function available ・Specify motion seconds OK --------------------------------- ■Colabページ(日本語版)colab.research.google.com/github/miu200521358/motion_trace_colab/blob/master/Text2Motion1.ipynb ■Colab Page(English ver)colab.research.google.com/github/miu200521358/motion_trace_colab/blob/master/Text2Motion1_en.ipynb 2022/10/25 ver1.00.00 一般公開開始
【MMD】モデルとモーションのビューワーを作ってみた【MuModelViewer / MuMotionViewer ver1.00】
miu s 2025-02-15 | モデルビューワー「MuModelViewer」とモーションビューワー「MuMotionViewer」の正式版配布を開始します! ■ツール概要 MuModelViewer: PmxモデルおよびXファイルに対応したモデルビューアです 拡張子に紐付けて、ダブルクリックで起動することができます MuMotionViewer: VmdモーションおよびVpdポーズファイルに対応したモーションビューアです 事前に任意のPmxモデルを登録しておくことで、モーションを確認することができます 拡張子に紐付けて、ダブルクリックで起動することができます --------------------------------- ■配布情報 MuModelViewer: 配布元URL: bowlroll.net/file/331649 最新版:2025/02/15 v1.0.0 MuMotionViewer: 配布元URL: bowlroll.net/file/331650 最新版:2025/02/15 v1.0.0 ---------------------------------- ■ ヘルプが必要な場合 ツールの不具合報告やご相談はコミュニティからお願いします それ以外からのご連絡は、お答えしかねます --------------------------------- ■ コミュニティのご案内 MMD長屋:discord.gg/jDqU6qRaKj カテゴリごとにオーナーがいて、希望するカテゴリに参加できる形式のちょっと変わったDiscordサーバーです ニコニコミュニティなどでのコミュ限配布や交流などの使い方を想定しています カテゴリ開設を申請していただくことも可能です ---------------- miuの実験室:discord.gg/MW2Bn47aCN VMDサイジングやモーションサポーターなど、自作ツールに関する諸々実験室 拙作ツールに関する質問や相談を受け付けています。FAQページも用意しています。 また一足早くベータ版を試していただくことができます。 「MMD長屋」サーバーの1カテゴリなので、サーバーに参加してから参加希望を申請してください --------------------------------- よければコーヒーの一杯でも奢ってくださいwgiftee.com/u/miu200521358
miu s 2024-09-24 | 刀ブレ追加ツール「SwordBlur」の配布を開始します! ■ツール概要 刀を動かした時に出るブレの設定をモデルに追加できるツールです 主に日本刀を想定していますが、モデルの読み込み制限などは行っていないので、 お好きなモデルで試していただけます 【注意事項】 ・ブレを出すためモデル改造を行います 「材質追加、ウェイト調整、ボーン追加、モーフ追加」などの モデル改造が許可されていないモデルにはご利用いただけません --------------------------------- ■配布元URLbowlroll.net/file/325008 最新版:2024/09/24 v1.0.0 ※2024/09/24 に一般配布に切り替えました ■コンテンツツリー登録用静画seiga.nicovideo.jp/seiga/im11486697
【MMD】Pmxの名称欄を一括置換できるツールを作ってみた【PmxTranslator ver1.00】
miu s 2024-09-23 | Pmx名称変換ツール「PmxTranslator」の正式版配布を開始します! ■ツール概要 Pmxモデルの名称関連を一括で置換できるツールです 主に中華圏モデルの日本語変換を想定していますが、モデルの読み込み制限は行っていないので、 既存モデルの名称置換にもお使いいただけるかと思います ファイルパスにShift-JIS外の文字が含まれている場合には、ファイル名も適宜変更します (モデル名の翻訳を間違えていました…申し訳ありません) --------------------------------- ■配布元URLbowlroll.net/file/331359 最新版:2025/02/09 v1.0.0 ■有志配布辞書note.com/kanna3939/n/na94bcef393c3 ■コンテンツツリー登録用静画seiga.nicovideo.jp/seiga/im11561836 -------------------- ■ ヘルプが必要な場合 ツールの不具合報告やご相談はコミュニティからお願いします それ以外からのご連絡は、お答えしかねます --------------------------------- ■ コミュニティのご案内 MMD長屋:discord.gg/jDqU6qRaKj カテゴリごとにオーナーがいて、希望するカテゴリに参加できる形式のちょっと変わったDiscordサーバーです ニコニコミュニティなどでのコミュ限配布や交流などの使い方を想定しています カテゴリ開設を申請していただくことも可能です ---------------- miuの実験室:discord.gg/MW2Bn47aCN VMDサイジングやモーションサポーターなど、自作ツールに関する諸々実験室 拙作ツールに関する質問や相談を受け付けています。FAQページも用意しています。 また一足早くベータ版を試していただくことができます。 「MMD長屋」サーバーの1カテゴリなので、サーバーに参加してから参加希望を申請してください --------------------------------- よければコーヒーの一杯でも奢ってくださいwgiftee.com/u/miu200521358
【MMD】海賊服のお着替え【PmxDressup】
miu s 2024-07-02 | PmxDressupbowlroll.net/file/301915
miu s 2024-07-02 | PmxDressupbowlroll.net/file/301915
【MMD】スーツのお着替え【PmxDressup】
miu s 2024-07-02 | PmxDressupbowlroll.net/file/301915
【VRoidMMD】燕尾服のお着替え【PmxDressup】
miu s 2024-07-02 | Vroid2Pmxbowlroll.net/file/267190 PmxDressupbowlroll.net/file/301915
【VRoidMMD】ネクタイとリボンの物理の入れ方【Vroid2Pmx】【PmxTailor】
miu s 2024-07-02 | Vroid2Pmxbowlroll.net/file/267190 PmxTailorbowlroll.net/file/301915
【VRoidMMD】しっぽへの物理の入れ方【Vroid2Pmx】【PmxTailor】
miu s 2024-07-02 | Vroid2Pmxbowlroll.net/file/267190 PmxTailorbowlroll.net/file/301915
【VRoidMMD】プリーツスカートの物理の入れ方【Vroid2Pmx】【PmxTailor】
miu s 2024-07-02 | Vroid2Pmxbowlroll.net/file/267190 PmxTailorbowlroll.net/file/301915
【VRoidMMD】コートの裾物理の入れ方【Vroid2Pmx】【PmxTailor】
miu s 2024-07-02 | Vroid2Pmxbowlroll.net/file/267190 PmxTailorbowlroll.net/file/301915
【VRoidMMD】スカートの裏面物理の入れ方【Vroid2Pmx】【PmxTailor】
miu s 2024-07-02 | Vroid2Pmxbowlroll.net/file/267190 PmxTailorbowlroll.net/file/301915
【VRoidMMD】多重スカートの物理の入れ方【Vroid2Pmx】【PmxTailor】
miu s 2024-07-02 | Vroid2Pmxbowlroll.net/file/267190 PmxTailorbowlroll.net/file/301915
【VRoidMMD】リボンの物理の入れ方【Vroid2Pmx】【PmxTailor】
miu s 2024-07-02 | Vroid2Pmxbowlroll.net/file/267190 PmxTailorbowlroll.net/file/301915
miu s 2024-06-09 | VRoid Studioのエプロンメイドを例にした多重物理の入れ方 Vroid2Pmxbowlroll.net/file/267190 PmxTailorbowlroll.net/file/301915
miu s 2024-06-02 | MMD自動トレース v4 のベータ版を公開します! コミュニティからColabに入って実行してくださいcom.nicovideo.jp/community/co5387214 ----------------- Colabでの自動トレース #00:43 ~ 環境構築 #01:00 ~ 自動トレース実行 #02:44 ~ 自動トレース再開 #04:46 ~ トレース結果の適用 #05:58 ~ ----------------- バカをやるなら Music: しぇろ様 (sm31024962) Dance: まりやん様、ぼたん様(sm37641584) ----------------- コンテンツツリー登録先 im10660670 利用規約github.com/miu200521358/mmd-auto-trace-4/wiki/03.%E5%88%A9%E7%94%A8%E8%A6%8F%E7%B4%84 ソースコードgithub.com/miu200521358/mmd-auto-trace-4/tree/t3
MMDモーショントレース自動化への挑戦【ver4.00 α】
miu s 2024-04-21 | MMD自動トレース v4 の正式版配布は間に合わなかったので、途中経過報告となりますw 【改修点】 ・姿勢推定技術変更(4D-Humans採用) ・IKの計算ロジック修正 ・腕捩の補間追加 ----------------- SNOBBISM Music: Neru様 Dance: Babo様 ----------------- クラウド版(Colab)(ver3.00.04) ・日本語: colab.research.google.com/github/miu200521358/motion_trace_colab/blob/master/MMDAutoTrace3.ipynb ・English:colab.research.google.com/github/miu200521358/motion_trace_colab/blob/master/MMDAutoTrace3_en.ipynb コンテンツツリー登録先 im10660670 Wikigithub.com/miu200521358/mmd-auto-trace-3/wiki/01.%E6%A6%82%E8%A6%81 ソースコードgithub.com/miu200521358/mmd-auto-trace-3
【MMD】MMDお着替えフィッティングツールを作ってみた【ツール配布】【PmxDressup ver1.00】
miu s 2023-08-20 | MMDお着替えフィッティングツール「PmxDressup」の正式版配布を開始します! ■ツール概要 指定したモデルに指定した衣装を体形に合わせて、フィッティングできるツール ・ボーンの長さと身体の厚みに基づいた自動フィッティング ・人物材質を半透明にして、体型を確認しながら細かい調整が可能 ・ボーンや剛体・ジョイントの関係を調整してお着替え結果出力 ・材質ごとの色合わせや設定のコピー Automatic fitting based on bone length and body thickness Fine adjustments can be made while checking the body shape by making the person material translucent Adjustment of bones and rigid body/joint relationships and output of changeover results Color matching and copying of settings for each material --------------------------------- ■配布元URLbowlroll.net/file/301915 最新版:2023/08/20 ver1.00.00 ■コンテンツツリー登録用静画 im11209493 ■機能ご紹介 起動方法 (Startup procedure) #00:28 ~ ファイルの読み込み(Loading Files) #00:54 ~ 基本のフィッティング(Basic fitting) #01:15 ~ プレビュー画面の使い方(How to use the preview screen) #01:33 ~ 出力対象材質の選択(Selection of output material) #01:57 ~ モーフの適用(Applying Morphs) #02:24 ~ 材質の色合わせと設定のコピー(Material color matching and copying of settings) #02:36 ~ 出力(Change of clothes model output) #04:03 ~
MMDモーショントレース自動化への挑戦(Challenge to MMD motion trace automation)【ver3.00】
miu s 2022-11-05 | MMD自動トレース v3、正式版リリース開始しました! 【改修点】 ・姿勢推定学習モデル変更 ・MVIG-SJTU/AlphaPose(各関節位置) ・3dpose/3D-Multi-Person-Pose(センターZ) ・Garfield-kh/PoseTriplet(センターXY) ・モーション生成元用にVRoidベースのモデルを追加 ・出力対象 ・JSON ・VMD ・モーション生成元モデル ・JSONビューワー -------- MMD Auto Trace v3, official release has started! [Repair points] ・Modification of pose estimation learning model ・MVIG-SJTU/AlphaPose (each joint position) ・3dpose/3D-Multi-Person-Pose (Center Z) ・Garfield-kh/PoseTriplet (Center XY) ・Added VRoid-based model for motion generator ・Output target ・JSON ・VMD ・Motion generation source model ・JSON viewer ----------------- バカをやるなら Music:しぇろ様 Dance: まりやん様、ぼたん様nicovideo.jp/watch/sm37641584 ----------------- クラウド版(Colab)(ver3.00.00) ・日本語: colab.research.google.com/github/miu200521358/motion_trace_colab/blob/master/MMDAutoTrace3.ipynb ・English: (Now Making) コンテンツツリー登録先 im10660670 Wiki github.com/miu200521358/mmd-auto-trace-3/wiki/01.%E6%A6%82%E8%A6%81 ソースコード github.com/miu200521358/mmd-auto-trace-3
【MMD】Cloneエフェクトを改造して整列できるようにしてみた【エフェクト配布あり】
miu s 2022-09-23 | クローンオブジェクトを並べて動かす事が出来ます。 並べ方やちりばめ方を調整可能です。 このエフェクトは、「Clone(そぼろ様: sm12387576) 」を改変させていただいております。 この場を借りて、厚く御礼申し上げます。 --------------------------------- ■配布元URLbowlroll.net/file/285527 ver1.00 (2022/09/23) ・一般配布開始
画像生成AIにブラウザから日本語文章で指示を出せるColabページを作ってみた【ツール配布】【StableDiffusionGenerator ver1.00.00】
miu s 2022-08-28 | 今大流行の画像生成AI「Stable Diffusion」に日本語文章で指示できるColabページを作ってみました! ・日本語文章での画像イメージ指定可能 ・画風、画材、視点、色調などの選択肢 ・シームレステクスチャフラグ ・萌え系イラストフラグ ・安定した人間出力 ・生成した画像はパブリックドメインとして利用可能 --------------------------------- ■Colabページcolab.research.google.com/github/miu200521358/motion_trace_colab/blob/master/StableDiffusionGenerator.ipynb 2022/08/28 ver1.00.00 一般公開開始
【MMD】MMDでクロスシミュできるツールを簡単にしてみた【ツール配布】【PmxTailor ver2.00】
miu s 2022-07-18 | クロスシミュレーション感覚でMMD用物理を設定できる「PmxTailor」を正式版アップデートしました! ■概要 MMD用物理を布や髪の材質のイメージで設定できるツール ・メッシュ走査による物理(ボーン・ウェイト・剛体・ジョイント)設定 ・既存ボーン・ウェイトを利用した物理(剛体・ジョイント)設定 ・Vroid2Pmxで出力したPmx用物理をボタンひとつで設定 --------------------------------- ■配布元URLbowlroll.net/file/267191 2022/07/18 ver2.0.0 v2正式版配布開始 ■配布動画で使用したモデル Googleドライブ: bit.ly/3PdZLic リオ様(@RioMinato)が分かりやすい手順を公開してくださいました! VRoid2Pmx&PmxTailorを使う方法: bit.ly/3zwo4Ro --------------------------------- ■機能ご紹介 起動方法 (Startup procedure) #00:32 ~ 基本の使い方 (Basic usage) #01:04 ~ 扱える形状 (Shape that can be handled) #01:50 ~ プリセット (preset) #02:19 ~ パラメーター説明 (Parameter description) #02:46 ~ PmxTailorで入る物理 (Physics entered with PmxTailor) #03:24 ~ 頂点範囲の選択 (Vertex range selection) #03:54 ~ VRoidモデルへの物理の設定 (Physical settings for VRoid model) #05:09 ~ 既存モデルへの設定 (Settings for existing models) #05:48 ~ --------------------------------- ■クレジット Masked bitcH Music: ギガP様 Dance: え~すけ様、いりぽん様、ゆじまる様 Motion・Camera: MaineCoon(エバ様、じゅんこだ様、Oisis様) チーズケーキクライシス Music: 西沢さんP様 Dance: まぁり様 Motion: Tarotaro様 * Motion * 服をお披露目するときのターン 《グレイ様》 * Costume * なんちゃってマントモデル 《1ya様》 * Background * グリッド風の床 《hiro K2様》 * Sound * マリオ 1UP音 《kenapo様》 Cafe by the sea 《のる様》 * Tool * MikuMikuDance 《樋口M様》 MikuMikuEffect 《舞力介入P様》 MikuMikuPlus 《猫のしもべ様》 AviUtl 《KENくん様》 Ut Video Codec Suite 《梅澤 威志様》 PMXEditor 《極北P様》 VRoid Studio VMDサイジング 《miu》 Vroid2Pmx 《miu》 * Special Thanks * β版テスターの皆様 MMDの集い Discord支部の皆様
【VRoid】【MMD】Vroid2Pmxにモーフを沢山追加してみた【ツール配布】【Vroid2Pmx ver2.00】
miu s 2022-05-21 | VRoid Studioで作ったモデルをボタンひとつでMMDで踊らせられる「Vroid2Pmx」が正式版アップデートしました! ■概要 VRoid Studio正式版に対応したPmx(MMDモデル)変換ツール ・モデルシェーダーを使わず、ほぼVRoid Studioと同じ色味を再現 ・エッジ出力機能追加 ・自動生成モーフ:約140個(表示枠搭載分のみ) ・舌ボーン、目光(瞳ハイライト)ボーン追加 ※物理は当ツールでは設定していないので、PmxTailor(youtu.be/yOCPhRNFE2k)で設定してください。 ニコニコミュニティ(com.nicovideo.jp/community/co5387214)で配布してる最新ベータ版だとボタン1つで物理設定が入れられます。 --------------------------------- ■配布元URLbowlroll.net/file/267190 2022/05/21 ver2.0.0 v2正式版配布開始 ■コンテンツツリー登録用静画 im10854785 ※セキュリティソフトで誤検知される場合があります。すみませんが下記手順をご参照下さい サイジングWiki短縮リンク:bit.ly/33cJAyJ リオ様(@RioMinato)が分かりやすい手順を公開してくださいました! VRoid2Pmx&PmxTailorを使う方法: bit.ly/3zwo4Ro --------------------------------- ■機能ご紹介 起動方法 (Startup procedure) #00:25 ~ vrmエクスポート手順 (vrm export procedure) #00:56 ~ pmxへの変換手順 (Conversion procedure to pmx) #01:18 ~ 解説 - 材質 (Commentary - Material) #01:38 ~ 解説 - ボーン (Commentary - Bone) #02:04 ~ 解説 - モーフ (Commentary - Morph) #02:37 ~ 解説 - 剛体 (Commentary - Rigidbody) #03:59 ~
【MMD】布っぽい物理を入れられるツールを作ってみた【ツール配布】【PmxTailor ver1.00】
miu s 2021-12-01 | 布や髪っぽい物理が入れられる物理セッティングツールできました! スライダーパラメーターで材質のイメージを設定できます。プリセットも付いてます。 複数スリットOK・裾のフリルOK・裏面OK・プリーツOK・多重物理OK・髪(アホ毛も)OK --------------------------------- ■配布元URLbowlroll.net/file/267191 --------------------------------- 【機能ご紹介】 起動方法 (Startup procedure) #00:23 ~ 01. 基本の使い方 (Basic usage) #00:47 ~ 02. パラメーター説明 (Parameter description) #02:17 ~ 03. 取り扱い可能なメッシュ (Handleable mesh) #03:09 ~ 04. 色々な使い方 (Various usages) #03:39 ~ 05. 既存設定の再利用 (Reuse of existing settings) #04:42 ~ 06. VRoidへの物理設定方法 (Physical setting method for VRoid) #05:39 ~ 07. 多重物理の設定方法 (How to set multiple physics) #07:30 ~
【MMD】VRoidをPmxに変換できるツールを作ってみた【ツール配布】【Vroid2Pmx ver1.00】
miu s 2021-12-01 | VRoid Studio正式版に対応したPmx変換ツール、できました! ・モデルシェーダーを使わず、ほぼVRoid Studioと同じ色味を再現 ・髪の毛のハイライト焼き込み ・MMD準標準(+上半身3)ボーン名準拠 ・腕捩り・手捩りのウェイトを綺麗になるよう再調整 ・Aスタンス ・左右モーフ追加 ※物理は当ツールでは設定していないので、PmxTailorで設定してください。 --------------------------------- ■配布元URLbowlroll.net/file/267190 --------------------------------- 【機能ご紹介】 起動方法 (Startup procedure) #00:21 ~ Vrmエクスポート手順 (Vrm export procedure) #00:45 ~ Pmxへの変換手順 (Conversion procedure to Pmx) #01:05 ~ 解説 (Commentary) #01:24 ~
MMDモーショントレース自動化への挑戦【ver2.05】
miu s 2021-08-22 | 【改修点】 ・ mediapipeの姿勢推定結果を元に検算追加 → 姿勢安定性UP ・ グルーブ(センターY)の推定方法変更 → カメラサイジングの手法を流用 ・ 足FKtoIKの「つま先・かかとY=0オプション」の挙動変更 → 全体の中央値を基準に接地 → ジャンプができるようになった ・ 足FKtoIKに「足IKブレ固定オプション」追加 → 一定のブレ範囲内の足IKを固定する ----------------- 【ご本家】 楽曲:dezzy(一億円P)様 sm24753406 踊り:やっこ様×まりやん様 sm27620009 ----------------- 【リリース状況】(2021/08/22) MMD自動トレースv2 クラウド版(Colab)(ver2.05.00) MMD自動トレースリップ版 クラウド版(Colab)(ver1.00.03) MMD automatic trace v2 cloud version (Colab) (ver2.05.00) MMD automatic trace lip version cloud version (Colab) (ver1.00.03) アクセス先URL: qiita.com/miu200521358/items/fb0a7bcf2764d7797e26 ※このページからMMD自動トレースのやりかたを案内しています。 This page introduces how to do MMD automatic tracing. ※初めての方は、導入編で使い方に慣れてから作業してください。 If you are new to this, please work after getting used to how to use it in the introductory part. 使い方動画: sm37986816 調整案動画: sm38019762 使用技術・ライセンス・クレジットch.nicovideo.jp/miu200521358/blomaga/ar1974413 リップ版ライセンス等ch.nicovideo.jp/miu200521358/blomaga/ar1975393 モーションサポーター(ver1.04)bowlroll.net/file/233713 VMDサイジング(ver5.01.03)bowlroll.net/file/197410 ----------------- ソースコード → github.com/miu200521358/expose_mmd Qiita全体目次 → qiita.com/miu200521358/items/d826e9d70853728abc51
MMDモーショントレース自動化への挑戦【ver2.04】
miu s 2021-08-15 | 【改修点】 ・手指・表情推定にmediapipe(holistic)を採用 ・モーション生成方式を「移動モーション」生成→「回転モーション」生成 →「あにまさ式ミクモーション」生成の三段階に変更 ・ボーンの回転データが以前より綺麗に取れるようになった ・センターの計算式を見直し ・モーションサポーターの足FKtoIKを調整 ・足首水平化、つま先・かかとY=0オプション追加 ・モーションサポーターのスムージングも合わせて調整 ・不要キー間引き処理のロジック変更 ----------------- 【ご本家】 B.B.F 楽曲:KIRA様 【sm32149780】 踊ってみた:チーム池袋最強様 【sm37742155】 ----------------- 【リリース状況】(2021/08/16) MMD自動トレースv2 クラウド版(Colab)(ver2.04.00) MMD自動トレースリップ版 クラウド版(Colab)(ver1.00.03) アクセス先URL: qiita.com/miu200521358/items/fb0a7bcf2764d7797e26 ※初めての方は、導入編で使い方に慣れてから作業してください。 使い方動画: sm37986816 調整案動画: sm38019762 使用技術・ライセンス・クレジットch.nicovideo.jp/miu200521358/blomaga/ar1974413 リップ版ライセンス等ch.nicovideo.jp/miu200521358/blomaga/ar1975393 モーションサポーター(ver1.03)bowlroll.net/file/233713 VMDサイジング(ver5.01.03)bowlroll.net/file/197410 ----------------- ソースコード → github.com/miu200521358/expose_mmd Qiita全体目次 → qiita.com/miu200521358/items/d826e9d70853728abc51
トラッキング技術勉強会発表資料(MMD自動トレース)
miu s 2021-06-11 | 2021/06/11 に「トラッキング技術勉強会 vol.1」で発表した 「MMD自動トレース~推しを手軽に動かしたい~」の資料です。 めっちゃ緊張しましたーーーーーー!!!! 皆さんすっごいんだもん…… でもコメントで「親切」とか「おかあさんか」とか言っていただけたの、 めっちゃ嬉しかったです!! 第二回も楽しみにしております!
MMDモーショントレース自動化への挑戦【ver2.03】
miu s 2021-01-24 | 全体的に安定しました。 【改修点】 ・FKボーンの安定化処理追加 ・足IK固定処理追加 ・センター移動(XYZ)のブレを少なく ・モーションサポーターのスムージングも合わせて調整(ver1.02) ・不要キー間引き処理のロジック変更 ・リップトレース新規作成 ・通常の楽曲ファイルから、音声のみを抽出 ・音声データと歌詞データを突き合わせて、音素解析 ・ついでにAviutlで歌詞を読み込めるexoファイル生成 ----------------- 【ご本家】 B.B.F 楽曲:KIRA様 【sm32149780】 歌ってみた:あらき様【sm35394093】 踊ってみた:チーム池袋最強様 【sm37742155】 ----------------- 【リリース状況】(2021/01/24) MMD自動トレースv2 クラウド版(Colab)(ver2.03.00) MMD自動トレースリップ版 クラウド版(Colab)(ver1.00.00) アクセス先URL: qiita.com/miu200521358/items/fb0a7bcf2764d7797e26 ※初めての方は、導入編で使い方に慣れてから作業してください。 使い方動画: nicovideo.jp/watch/sm37986816 調整案動画: nicovideo.jp/watch/sm38019762 使用技術・ライセンス・クレジットch.nicovideo.jp/miu200521358/blomaga/ar1974413 リップ版ライセンス等ch.nicovideo.jp/miu200521358/blomaga/ar1975393 モーションサポーター(ver1.02)bowlroll.net/file/233713 ----------------- ソースコード → github.com/miu200521358 Qiita全体目次 → qiita.com/miu200521358/items/d826e9d70853728abc51 MMD自動トレース挑戦の記録: series/87034 MME・MMDツール等 : mylist/63580881 自作MMD作品マイリスト : mylist/47353166
MMD自動トレースv2 モーション配布への道(途中まで)
miu s 2021-01-24 | MMD自動トレースv2のモーションデータを配布できるようになるまでの修正案です。 足IKの調整にちょっと時間がかかりそうなので、一旦放流します。 参考になりましたら嬉しいです。
MMDモーショントレース自動化への挑戦【ver2.00】
miu s 2020-12-20 | MMD自動トレース、全面的に作り直しました!!! 【改修点】 ・ 人物推定のアルゴリズムを、OpenposeからExPoseに変更 ・ 人物追跡推定のアルゴリズムに、lighttrackを採用 ・ 指の姿勢推定と出力を追加 ・ 表情・視線の推定を追加(dlib) ・ モーション生成の参照元モデルを、あにまさ式ミク準標準に固定 ・ Colab版もアップデート ----------------- 【ご本家】 B.B.F 楽曲:KIRA様 【sm32149780】 踊り:チーム池袋最強様 【sm37742155】 利用許諾ありがとうございます! ----------------- 【リリース状況】(2020/12/20) クラウド版(Colab)(ver2.00.00) アクセス先URL: qiita.com/miu200521358/items/fb0a7bcf2764d7797e26 デモ動画: 解説動画: 使用技術・ライセンス・クレジットch.nicovideo.jp/miu200521358/blomaga/ar1974413 ----------------- ソースコード → github.com/miu200521358 Qiita全体目次 → qiita.com/miu200521358/items/d826e9d70853728abc51
miu s 2020-12-20 | Colab版でのMMD自動トレースのやり方のご案内です。 【目次】 ・Colabとは #00:12 ・autotraceフォルダの準備 #00:38 ・①-A、①-B Googleドライブ・SDKとの連携 #00:53 ・①-C、①-D 学習データの配置 #01:15 ・② 環境設定 #01:35 ・③ コード準備 #01:44 ・④ データ展開配置 #01:52 ・⑤ 入力映像アップロード #02:01 ・⑥-A 人物推定 #02:11 ・⑥-B、⑥-C 人物確認・追跡指定 #02:27 ・⑥-D、⑥-E 追跡指定実行・確認 #03:04 ・⑥-F モーション出力 #03:24 ・スムージング #03:53 ・サイジング #04:31 ----------------- 【リリース状況】(2020/12/20) クラウド版(Colab)(ver2.00.00) アクセス先URL: qiita.com/miu200521358/items/fb0a7bcf2764d7797e26 デモ動画: 解説動画: 使用技術・ライセンス・クレジットch.nicovideo.jp/miu200521358/blomaga/ar1974413 ----------------- ソースコード → github.com/miu200521358 Qiita全体目次 → qiita.com/miu200521358/items/d826e9d70853728abc51
AlphaPoseとOpenpose比較(2020/02)
miu s 2020-02-19 | 姿勢推定ライブラリ「AlphaPose」と「Openpose」の比較動画です。 左上が「AlphaPose」 github.com/MVIG-SJTU/AlphaPose 右下が「Openpose」github.com/CMU-Perceptual-Computing-Lab/openpose 出力されたJSONデータの順番に基づいて、関節に緑と青の点を追加しています。 【引用元】 バスター! 楽曲:dezzy(一億円P)様 nicovideo.jp/watch/sm24753406 踊り:やっこ様×まりやん様 nicovideo.jp/watch/sm27620009 所感、導入手順等: 追跡機能付き姿勢推定「AlphaPose」を試してみた qiita.com/miu200521358/items/a51d26d978b2298464e5
MMDモーショントレース自動化への挑戦【ver1.03】
miu s 2019-12-16 | 【改修点】 ・ 深度推定(センターZ)のアルゴリズムを変更しました
・ 複数人数トレースの際の人物順番推定アルゴリズムを作り直しました
・ Openposeで信頼度が低いデータを振るい落とすようにしました
・ 首・頭の角度を取得できるようにしました
・ 【VMD生成】時の円滑化フィルターパラメーターを変更しました
----------------- 【ご本家】 アルカリレットウセイ
楽曲:かいりきベア様 nicovideo.jp/watch/sm30105817 踊り:金剛様 nicovideo.jp/watch/sm35298446 -----------------
【リリース状況】(12/21)
ローカル版 … ver1.03github.com/miu200521358 クラウド版(colab) … ver1.03qiita.com/miu200521358/items/fb0a7bcf2764d7797e26
(A link to the English Colab page is also included in this article.) ローカル版の少し楽なインストール手順 … ver1.02:江良野様nicovideo.jp/watch/sm35683725
Docker Toolbolx版β(Win10 Home, Win8, Win7) … ver1.02:セルゆかり様bowlroll.net/file/193693 -----------------
使用技術・ライセンス → http://ch.nicovideo.jp/article/ar1686913 ソースコード → github.com/miu200521358 Qiita全体目次 → qiita.com/miu200521358/items/d826e9d70853728abc51 Qiitaクラウド版説明 → qiita.com/miu200521358/items/fb0a7bcf2764d7797e26
MMD自動トレース挑戦の記録: nicovideo.jp/mylist/61943776 MME・MMDツール等 : nicovideo.jp/mylist/63580881 自作MMD作品マイリスト : nicovideo.jp/mylist/47353166
MMDモーショントレース自動化への挑戦【ver1.01】
miu s 2019-03-31 | ・多人数トレースに対応 ・MMD用背景AVIを出力 ・意図しない回転の修正方法を変更 ・異常データのハンドリング追加 ・人物交差の精度向上 ・終了フレーム番号指定パラメーター追加 ・クラウド版・Docker版リリース ----------------- 【ご本家】 楽曲:八王子P様 nicovideo.jp/user/15104449 youtube.com/channel/UCD7pKXtQ-ZFixYZp8NYAY1Q 踊り:しらす+様、Al!ce様、丸井かお様 sm33844861 利用許諾ありがとうございます! ----------------- 【リリース状況】 ローカル版 … ver1.01 (3/31)github.com/miu200521358 クラウド版(colab) … ver1.01 (3/31)qiita.com/miu200521358/items/fb0a7bcf2764d7797e26 Docker Desktop版(Win10 Pro) … ver1.00:江良野様nicovideo.jp/watch/sm34829627 Docker Toolbolx版β(Win10 Home, Win8, Win7) … ver1.00:セルゆかり様bowlroll.net/file/193693 ----------------- クラウド版リリースに伴いまして、テスター公募は終了させていただきました。 使用技術・ライセンス → http://ch.nicovideo.jp/article/ar1686913 ソースコード → github.com/miu200521358 Qiita全体目次 → qiita.com/miu200521358/items/d826e9d70853728abc51 Qiitaクラウド版説明 → qiita.com/miu200521358/items/fb0a7bcf2764d7797e26 挑戦の記録: nicovideo.jp/mylist/61943776 自作MMDマイリスト : nicovideo.jp/mylist/47353166 自作・改変MMEマイリスト : nicovideo.jp/mylist/63580881
クラウド(colab)版MMD自動トレース解説【ver1.01】
miu s 2019-03-20 | クラウド版MMD自動トレースの導入手順等をざっくり解説してみました。 Chromeブラウザさえあれば、GPUのないパソコン、ノートパソコンでも、後は全部クラウド(colab)上で、MMD自動トレースを実行することができます! ソースコード等、実行に必要なデータはすべてクラウド上に保存されます。 実行結果のMMDモーションデータ等は、Googleドライブに保存されるので、ご自分のローカル環境にダウンロードする事ができます。 所要時間は、導入編に30分、実行編準備に約60分、実行編実行に約60分です。大体3時間くらい見込んでおいてください。 途中生成データ(pos.txt)をUnityに読み込むことで、Unityでも自動トレース結果を動かすことが可能です。 めっちゃ時間かかると明言してますし、実際言われてますけど、手動トレースに比べたら早いと思うの…(小声) 【ご注意】 3/20時点ではまだリリースしていない、ver1.01の画面で説明しています。 パラメーター項目や目次の段組などが若干違っています。 基本的な操作方法は同じです。 【ご本家】 モーション:ミソジサラリーマン様(twitter.com/keriwaza ) 動画ご提供&配布許可ありがとうございます! クラウド版リリースに伴いまして、テスター公募は終了させていただきました。 使用技術・ライセンス → http://ch.nicovideo.jp/article/ar1686913 ソースコード → github.com/miu200521358 Qiita全体目次 → qiita.com/miu200521358/items/d826e9d70853728abc51 Qiitaクラウド版説明 → qiita.com/miu200521358/items/fb0a7bcf2764d7797e26 挑戦の記録: nicovideo.jp/mylist/61943776 自作MMDマイリスト : mylist/47353166 自作・改変MMEマイリスト : mylist/63580881
MMDモーショントレース自動化への挑戦【ver1.00】
miu s 2019-02-15 | ・2人分トレース対応!!!! ・意図しない回転を軽減 ・3D推定の精度向上 ・バルクバッチにファイル読み込み機能版追加 ・メジャーバージョンUP 【ご本家】 楽曲:dezzy(一億円P)様 nicovideo.jp/watch/sm24753406 踊り:やっこ様×まりやん様 nicovideo.jp/watch/sm27620009 利用許諾ありがとうございます! Qiitaに動画内コメントを文字起こししました。翻訳等にどうぞ。qiita.com/miu200521358/items/f18d066a1fa9636f0947 【3/5】クラウド版MMD自動トレースリリースしました。 Chromeブラウザさえあれば、GPUのないパソコン、ノートパソコンでも、後は全部クラウド(colab)上で、MMD自動トレースを実行することができます!qiita.com/miu200521358/items/fb0a7bcf2764d7797e26 使用技術・ライセンス → http://ch.nicovideo.jp/article/ar1686913 ソースコード → github.com/miu200521358 導入手順等 → qiita.com/miu200521358/items/d826e9d70853728abc51 挑戦の記録: nicovideo.jp/mylist/61943776 自作MMDマイリスト : nicovideo.jp/mylist/47353166 自作・改変MMEマイリスト : nicovideo.jp/mylist/63580881 Twitter: twitter.com/miu200521358
MMDモーショントレース自動化への挑戦【ver0.11】
miu s 2019-02-15 | ・ Openposeの開始フレームNo指定機能追加 ・ 初期傾き補正をモーションデータから読み取るよう修正 ・ 足FKの【gan】の採用角度を45度→55度に変更 ・ OneEuroFilter追加 ・ 間引き処理修正(江良野師匠のsmoothvmdより移植) ・ 英語版バッチを作成 ・ バルク(一括処理)バッチを作成 【ご本家】 楽曲:Neru様 nicovideo.jp/watch/sm32921516 踊り:Babo様 nicovideo.jp/watch/sm33220501 利用許諾ありがとうございます! HeartBeatsはこちら。簡易手動調整お試しアリ。 → nicovideo.jp/watch/sm34472827 テスターさん募集中。再申請もこちらから → http://ch.nicovideo.jp/article/ar1504345 使用技術・ライセンス → http://ch.nicovideo.jp/article/ar1686913 ソースコード → github.com/miu200521358 導入手順等 → qiita.com/miu200521358/items/d826e9d70853728abc51 挑戦の記録: nicovideo.jp/mylist/61943776 自作MMDマイリスト : nicovideo.jp/mylist/47353166 自作・改変MMEマイリスト : nicovideo.jp/mylist/63580881
MMDモーショントレース自動化への挑戦【ver0.10】
miu s 2018-10-21 | MMDモーショントレース自動化への挑戦【ver0.10】 ・ 3dpose_ganを正式導入しました ・ 直立姿勢のパラメーター入力をなくし、自動推定するようにしました ・ センターの判定を修正しました ・ 関節の回転角度・IKの移動量を滑らかにするパラメーターを追加しました 【ご本家】 楽曲:Neru様 sm32921516 踊り:Babo様 sm33220501 利用許諾ありがとうございます! テスターさん募集中。再申請もこちらから → http://ch.nicovideo.jp/article/ar1504345 使用技術・ライセンス → http://ch.nicovideo.jp/article/ar1686913 Github・Qiitaは10/21予定。 挑戦の記録: nicovideo.jp/mylist/61943776
MMDモーショントレース自動化への挑戦【ver0.09】
miu s 2018-10-10 | ・3dpose_ganを導入して、足のトレース精度向上を試してみました。 【ご本家】 楽曲:Neru様 sm32921516 踊り:Babo様 sm33220501 利用許諾ありがとうございます! 【使用技術・ライセンス】 Openpose:CMU:非商用であれば無料利用可能(商用利用はライセンス要購入)。スポーツ分野利用制限アリ。 … github.com/CMU-Perceptual-Computing-Lab/openpose 起動バッチ:miu200521358:GNU GPLv3 … github.com/miu200521358/openpose-simple Openpose→3D変換:una-dinosauria, ArashHosseini, miu200521358:MIT … github.com/miu200521358/3d-pose-baseline-vmd Openpose→3D変換その2:Dwango Media Village:MIT … nico-opendata.jp/ja/casestudy/3dpose_gan/index.html 深度推定:Iro Laina, miu200521358:Simplified BSD License … github.com/miu200521358/FCRN-DepthPrediction-vmd 3D→VMD変換: errno-mmd, miu200521358:GNU GPLv3 … github.com/miu200521358/VMD-3d-pose-baseline-multi
MMDモーショントレース自動化への挑戦【ver0.08】
miu s 2018-10-10 | ・深度推定を用いて、センターZ軸を判定するようにしました ・足IKの止めの動作を追加しました。 ・間引き角度の初期パラメータ値を減らしました。 【ご本家】 楽曲:Neru様 sm32921516 踊り:Babo様 sm33220501 利用許諾ありがとうございます! 【使用技術・ライセンス】 Openpose:CMU:非商用であれば無料利用可能(商用利用はライセンス要購入)。スポーツ分野利用制限アリ。 … github.com/CMU-Perceptual-Computing-Lab/openpose 起動バッチ:miu200521358:GNU GPLv3 … github.com/miu200521358/openpose-simple Openpose→3D変換:una-dinosauria, ArashHosseini, miu200521358:MIT … github.com/miu200521358/3d-pose-baseline-vmd 深度推定:Iro Laina, miu200521358:Simplified BSD License … github.com/miu200521358/FCRN-DepthPrediction-vmd 3D→VMD変換: errno-mmd, miu200521358:GNU GPLv3 … github.com/miu200521358/VMD-3d-pose-baseline-multi
MMDモーショントレース自動化への挑戦【ver0.07】
miu s 2018-10-10 | キーフレーム間引きの見直し・足埋まりの調整を行いました。 テスターさん募集中。再申請もこちらから → ar1504345 【ご本家】 楽曲:Neru様 sm32921516 踊り:Babo様 sm33220501 利用許諾ありがとうございます! 【使用技術・ライセンス】 Openpose:CMU:非商用であれば無料利用可能(商用利用はライセンス要購入)。スポーツ分野利用制限アリ。 … github.com/CMU-Perceptual-Computing-Lab/openpose 起動バッチ:miu200521358:GNU GPLv3 … github.com/miu200521358/openpose-simple Openpose→3D変換:una-dinosauria, ArashHosseini, miu200521358:MIT … github.com/miu200521358/3d-pose-baseline-vmd 3D→VMD変換: errno-mmd, miu200521358:GNU GPLv3 … github.com/miu200521358/VMD-3d-pose-baseline-multi
MMDモーショントレース自動化への挑戦【ver0.06】
miu s 2018-10-10 | キーフレーム間引きました。 【ご本家】 楽曲:Neru様 sm32921516 踊り:Babo様 sm33220501 利用許諾ありがとうございます! 【使用技術・ライセンス】 Openpose:CMU:非商用であれば無料利用可能(商用利用はライセンス要購入)。スポーツ分野利用制限アリ。 … github.com/CMU-Perceptual-Computing-Lab/openpose 起動バッチ:miu200521358:GNU GPLv3 … github.com/miu200521358/openpose-simple Openpose→3D変換:una-dinosauria, ArashHosseini, miu200521358:MIT … github.com/miu200521358/3d-pose-baseline-vmd 3D→VMD変換: errno-mmd, miu200521358:GNU GPLv3 … github.com/miu200521358/VMD-3d-pose-baseline-multi
MMDモーショントレース自動化への挑戦【ver0.05】
miu s 2018-05-26 | 足IKと肩導入しました。 【ご本家】 楽曲:Neru様 sm32921516 踊り:Babo様 sm33220501 利用許諾ありがとうございます! 【ご協力】 江良野(@errno_mmd)様、ろますた38(@Romast38)様。ありがとうございます! 【使用技術・ライセンス】 Openpose:CMU:非商用であれば無料利用可能(商用利用はライセンス要購入)。スポーツ分野利用制限アリ。 … github.com/CMU-Perceptual-Computing-Lab/openpose 起動バッチ:miu200521358:GNU GPLv3 … github.com/miu200521358/openpose-simple Openpose→3D変換:una-dinosauria, ArashHosseini, miu200521358:MIT … github.com/miu200521358/3d-pose-baseline-vmd 3D→VMD変換: errno-mmd, miu200521358:GNU GPLv3 … github.com/miu200521358/VMD-3d-pose-baseline-multi VMD-3d-pose-baseline-multi が、ver0.05になりました。 Qiitaはそのうち…
MMDモーショントレース自動化への挑戦【ver0.04】
miu s 2018-05-20 | センター移動ざっくり導入しました。 【本家】 楽曲:Neru様 sm32921516 踊り:Babo様 sm33220501 利用許諾ありがとうございます! 【使用技術・ライセンス】 Openpose:CMU:非商用であれば無料利用可能(商用利用はライセンス要購入)。スポーツ分野利用制限アリ。 … github.com/CMU-Perceptual-Computing-Lab/openpose 起動バッチ:miu200521358:GNU GPLv3 … github.com/miu200521358/openpose-simple Openpose→3D変換:una-dinosauria, ArashHosseini, miu200521358:MIT … github.com/miu200521358/3d-pose-baseline-vmd 3D→VMD変換: errno-mmd, miu200521358:GNU GPLv3 … github.com/miu200521358/VMD-3d-pose-baseline-multi
MMDモーショントレース自動化への挑戦【ver0.03】
miu s 2018-05-18 | 頭と肩に回転を分散させてボーン登録行うようにしました。 あと、上半身の傾き判定も直しました。 使用技術:Openpose(CMU) + 3d-pose-baseline-vmd + VMD-3d-pose-baseline-multi VMD-3d-pose-baseline-multi が、ver0.03になりました。 (github.com/miu200521358/VMD-3d-pose-baseline-multi ) 技術解説は肩のパラメータ調整ができたらQiitaかな… ライセンス: Openpose:非商用であれば無料利用可能(商用利用はライセンス要購入) 3d-pose-baseline-vmd :MIT VMD-3d-pose-baseline-multi : GNU GPLv3
MMDモーショントレース自動化への挑戦【ver0.02】
miu s 2018-05-12 | グローバルX軸の前傾姿勢が直りました。 使用技術:Openpose(CMU) + 3d-pose-baseline-vmd + VMD-3d-pose-baseline-multi
MMDモーショントレース自動化への挑戦【ver0.01】
miu s 2018-05-05 | 手を抜く為の手間は惜しまないのが信条です。 使用技術:Openpose + 3d-pose-baseline-vmd + VMD-3d-pose-baseline-multi 5/7 導入手順をQiitaにUPしました!qiita.com/miu200521358/items/d826e9d70853728abc51 共同開発者絶賛募集中! Twitter(@miu200521358)から声をかけてください。